# 20260301 ## Attendee - JC, Wei, Yu, Shaoyu, Hugh, Kuan-wei ... - 請假: Ann ## Milestone Phase 1:正常人測試 1. 2026 年 6 月投稿期刊 > 題目:測試基底模型、RAG 分析仿單文案 > 延後1-2個月是可預期的 2. 2026 年 3 月啟動 IRB 申請 > - IRB 範圍:Prototype、實驗設計、測試流程、邀請函、接觸點等。 > - IRB 企劃內需提供詳細產品內容,例如操作畫面,審查重點須無誘導受測者行為、確保為自由意志參與。 > - Prototype 為選單互動介面。 > - 往後可沿用這個 IRB 企劃申請更多次審查。 > - 待 shadowing 完,討論受測者如何招募、招募管道等。 4. 執行正常人測試 > 控制變因:有用 Prototype 給予用藥資訊、標準照護 5. Prototype 初次迭代 ## Schedule - [期刊] 2026 年 3 月專家評分 > 15 個藥品,對 4 個模型產生的結果評分,產出 60 個評分,最終選出答得最好的兩個模型。 - [g0v] 2026/4/12(日)零時小學校孵化計畫 成果發表 - 活動日期:4/12 週日下午 2:00-5:00 - 活動地點:臺北市中正區重慶南路三段 2 號 2 樓 - 活動流程: .13:40-14:00 開放報到 .14:00-14:15 「NEST 專案孵化計畫」回顧介紹 .14:15-14:30 邀請貴賓致詞 .14:30-14:40 休息 .==14:40-15:50== 專案團隊成果分享,4 分鐘分享執行成果,4 分鐘由嘉賓回饋意見 (2 分鐘嘉賓提問,2 分鐘團隊回覆,採統問統答)。現場也邀請活動與會者投票給團隊。 .15:50-16:00 休息 / 統計團隊獲得票數 .16:00-16:20 專案孵化獎項頒獎 (依照獲得票數排序,頒發:茁壯獎 11000 元_至少三組 、新芽獎 6000 元_數量不限) .16:20-17:00 綜合座談,主題「數位公民教育近期趨勢」 - 詳細資訊請見網址:https://g0v.hackmd.io/@jothon/nest/ - **4 min 發表** .1.5 min background + solution .1.5 min demo .1 min evaluation + future .準備 QR code 給現場觀眾試用 - [期刊] 2026 年 6 月投稿期刊 ## Action Items Tracking - 3/1(日) 20:00 Meetings @ Google Meet ✅ - @JC 在 Slack 上通知 Shadowing 見面地點時間 ✅ - @JC 安排 Shadowing 受訪的藥師 ✅ - @JC 2/22 前提供 15 個藥品跟問項給 @Wei ✅ - @Wei 2/22 內讓模型成為可使用狀態 & RAG 掛載 ✅ - @all 2/22 前提供 @YU 訪綱 Feedback ✅ ## Agenda ### 期刊 - 15項特殊劑型依操作步驟分難、中、易,共三類,輔助臨床專科別。 藉由專家評分5個維度,4取2兩個模型,再給一般人評分易讀性 (PEMAT-P)。 @JC - 專家五維度評分:[藥師評估問卷](https://forms.gle/ioYKYtz9eE2ZUmRX6) - 需將問卷調整的更淺顯易懂 @JC - 一般人易讀性評分:與專家評分統一評分表 @JC - 精簡度:拆分為兩部分,一為人類專家整體評估、另一為程式字數統計。@Yu - 以 LINE 訊息為目標的 [精簡度評估建議](https://hackmd.io/_jnyKbokQweKknhgLX-7dQ?view#Suggestion-for-evaluation) by YU - 目前 Wei 產出的內容沒有限定字數,請 Wei 先統計看看目前字數的分布 - 統計方法:粗估需要的專家與一般受試者的母數 @JC - 一般受試者:2 藥品 x 20 題 x 2 models = 80題 - 受試者: 250 位健康人 (待確認) - 回饋:禮券 - 模型準備:@Wei ### g0v > POC (no backend) - Gemma 3 4B、MedGemma 1.5 4B 是否部署 @Wei * 目前模型(Gemma & MedGemma)部署概況 * RAG ready 目前遇到的困難 - 食藥署有在更新仿單開放資料庫(新增仿單輸出選項、部分仿單之XML格式) - 部分藥品因仿單之電子格式,處理困難 - 可參見:https://docs.google.com/spreadsheets/d/1IiSIWG4Gf58gC9tcBvcQoynNeeaeFmxU/edit?usp=sharing&ouid=109917949156735088092&rtpof=true&sd=true * 目前給模型的全域指令(system prompt, 在每一步回答都須遵守的規定): 你是一位專業的台灣醫療AI助理。(<-請點我) 請務必遵守以下規則: 1. 只能使用繁體中文(Traditional Chinese)回答。 2. 除非是專有名詞(如藥名、病名)可以保留英文括號對照,否則禁止輸出英文句子。 3. 用語請貼近台灣醫療習慣(例如:使用「普拿疼」而非「撲熱息痛」)。 4. 若不確定,請回答「我不知道」,不要編造事實。" * 可討論是否需調整、增刪 (Yu已提供建議)。 * 想確定,15項藥品各5問題的用字遣詞,是否已確定?是。如已確定,可開始部分模型之問答產出。 - [Design] Shadowing Results(問答互動設計、Product Insights)@Yu - [藥師窗口觀察訪談小報告](https://hackmd.io/_jnyKbokQweKknhgLX-7dQ?view) - [Design] [prototype video](https://g0v-tw.slack.com/archives/C0999FDUDMW/p1771386061711429?thread_ts=1770614157.841229&cid=C0999FDUDMW) - ~~[idea] 衛教單張作為 AI input?(打消念頭了,好像都是 PDF)~~ ### IRB - 徵詢諮詢專家意見。@JC ### Others - 訪談 raw data 上傳規則 - 如果真的需要對外使用照片,需要請醫院法務審核同意 - 會有法律問題~大家要注意,後果自負 - Slack Communication - 一個串一個主旨,如果有延伸討論則直接另開新串 - 避免同個串回覆時,同步釘選到頻道上 ## Action Items > 所有成員 go through 一次自己要做的工作 - MVP for 4/12(日)零時小學校孵化計畫 成果發表 - 3/21 之前(以Excel表格)提供 9 個藥品、問題、答案 **@Wei to @JC&Yu** - LINE prototype design **@YU** - background: 拿到Excel表格後,至少難/適中/易特殊劑型各一,4種模型,共12次的專家評估 **@JC** - design - 希望也可以包含服務設計 **@YU** - 3/22以前:定稿專家五維度評分、一般人易讀性評分; 估計專家與一般受試者的母數; 準備IRB送審文件 @JC - 3/22以前:粗略計算4個語言model在三種難易度產出的字數分布 @wei - 3/22以前:RAG來源不是電子仿單(XML)的解決方法 @Wei @Kuan-wei ## Next Meeting 3/22 (日) 晚上8:00-9:30 3/27-4/8 YU 不在台灣~~~
×
Sign in
Email
Password
Forgot password
or
By clicking below, you agree to our
terms of service
.
Sign in via Facebook
Sign in via Twitter
Sign in via GitHub
Sign in via Dropbox
Sign in with Wallet
Wallet (
)
Connect another wallet
New to HackMD?
Sign up