--- title: 研究日誌 --- ###### tags: `實驗室` # 9/21: 今天得知學習障礙最細能分6種左右, 但是由於提供的資料只有聲音, 預計只能用來分析表達障礙、理解表達障礙和閱讀障礙, 但是這一點必須跟醫生確認。 表達障礙、理解表達障礙和閱讀障礙的特徵大致如下, 但是必須跟醫生確定(黃底的字) ## 表達障礙: 1. 詞彙貧乏 2. 使用大量填充詞嗯, 這個, 那個 (stuff, things), 而非更具體的詞 3. 時態混淆 4. 回答問題或說故事時措辭重複 5. 常說不合理的句子 6. 學習新字有困難 7. ==Feel like words are constantly stuck “at the tip of their tongue”== 8. 因交流有障礙而感到挫折 ## 理解和表達障礙: 1. 似乎對對話和社交活動沒興趣 2. ==Have difficulty following directions== 3. 時常答非所問(理解錯誤), 不當行為 4. 難以理解笑話的點 5. 內向和害羞 ## 閱讀障礙: 1. 無法順暢和精準辨識, 理解, 拼寫文字 3. 因閱讀技巧不佳導致閱讀理解能力低落 4. ==難以辨識音位和語音 Often have deficits in phonemic and phonological awareness, which refer to the ability to hear, identify and manipulate the sound structure of a spoken word, including its phonemes, syllables, onsets and rimes== 5. 難以精準和順暢得辨識文字間, 文字和聲音間的關係 預計做什麼: 跟醫生確定是否只專注在這三種學習障礙, 確認這三種學習障礙的特徵是否正確, 還有每項測驗關注的特徵為何? # 9/24(每周meeting): 今天專題報告被指出簡報凌亂, 流程圖畫不好, 要重新整理簡報, 最好重新規劃專案流程 今天得到的方向: 1. 醫生希望模型做出統一標準的分析, 就必須選擇和大家討論一套評斷標準 2. 應該先研究資料, 試試看為資料分群, 找相關性 3. ASR不要自己訓練, 找一個現成的模型 預計做什麼: 重新整理簡報和規畫專案流程 # 10/5: 前幾天如然想到一個問題(第三個)，不小心拖到今天才終於寄信問醫師, 問了三個問題: 1. 請醫師指教學習障礙的種類及特徵，若可以的話希望他可以給我醫院方面的詳細資料(比起網路上的安心多) 2. 得選出一組標準，我把醫師們分析所關注的點也整理在附件裡， 想請教怎樣的標準比較適合， 不過考慮到這個問題可能有點複雜， 也許可以在下次開會的時候討論 3. 學習障礙診斷的測驗是怎麼設計的? 各項測驗專注在哪些能力或症狀上? 還有醫師們是不是在分析完各項測驗的結果後， 才會綜合所有結果去判斷是哪種學習障礙， 但是現在我們要嘗試只透過看圖敘述結果來診斷? 預計準備第四次與教授和醫師的meeting, 希望可以報告如何把資料特徵化 # 10/6: 醫師說現在臨床上許多學習障礙的分類也不是太精確，很難確定哪些學習障礙會出現的特定的症狀，他認為==現在把重點放在異常檢測就好==，但是若要更深入理解實際上的分類跟理論，他傾向在會議當面解釋。醫生也認為當前要評估理解能力倒有些困難，所以他們的資料裡捕捉到的多是表達上的問題，此外還提供一些評估表達能力的依據: 1. 平均語句長度 2. 詞彙多樣性 3. 最長5個語句平均長度 4. 詞類分析 5. 輪替次數(如果有交談) 6. 構音精確性等 當前的目標是異常檢測，預計在第四次與教授和醫師的meeting時報告初步結果，但是可能要在2、3個禮拜後，實際上的分類跟理論可能等到要分析時再討論就好，但是醫生說可以提供語料分析的參考書，或許可以在下一次meeting拿到? # 10/8(每周meeting): Done: 釐清流程圖的Audio需要完成聲音切割和降噪(降噪可能有副作用，之後看看成效) To do: 稍微切割之後看看頻譜和MFCC，看能不能有什麼想法，也嘗試降噪看看 # 10/15(每周meeting): Done: 初步切割音檔，留下看圖敘述的部分，發現噪音的波形非常不規則且波動幅度非常大，人說話的聲音波形則相對平緩且有週期性，轉成時頻譜後噪音在頻率上分布非常廣且能量很強。之後要決定是否要分離敘述和對話，是否要語者分離。之後要決定是否要分離敘述和對話，是否要語者分離。降噪則因為現有工具可能不符需求，決定在有進一步發展後，再評估降噪是否必要，或許噪音影響不大。 To do: 想辦法收集更多資料，如實驗室朗讀CD、科技大擂台第一屆的資料、一般朗讀的音檔(開源)