# 7/10 RAG project會議紀錄
> [0710 RAG 會議錄影](https://mega.nz/file/uUJSVAQa#2RitRnQGoQhaVo5V5AGdvQuqMJNmcMLfyKgHmiuGjyk)
> [0710 RAG 會議錄影2](https://drive.google.com/file/d/1lYPRwbW-xGHjRM6aUSJso5FWZYyKXjiB/view?usp=sharing)

## 指派工作
1. 曜誠 : 9 個指標用 word 列清楚 公式 計算方式 提供範例 (7/12五給)
2. 統整目前有哪些現成 benchmark dataset 從 ESG data 利用 LLM 設計問題
3. 教育雲 : 先問助理要資料format 具有 ground truth dataset

4. 測試程式 : output RAG 的評估指標分數
5. 測試目前 RAG : ESG 教育雲

:::success
下周三前有進度
:::

---
1. 9個指標用 word 列清楚 公式 計算方式 提供範例 (7/12五給)
負責人：曜誠

2. 依照目前實驗室裡的ESG dataset，生出一個QA pair的資料集
負責人：彥汝、品媛

3. 寫一個 Evaluate RAG 的 platform (需驗證)(可以用公開資料集)、驗證目前 ESG RAG、整理主流驗證RAG的公開資料集。
負責人：曜誠、淳瑜

4. 以教育雲上有限的資料，建立一個可以作為Benchmark的資料集(需有Ground Truth)(QA pair)
負責人：政叡、玟樺
- 教育雲網站 : https://cloud.edu.tw/
- 電子書 : https://oidcebook.nlpi.edu.tw/resourceDetail?id=14266&resourceType=ebook
- 針對教育雲網站上的素材(電子書、教案...其他)，產生QA pair、評量 rubrics

---
- https://docs.ragas.io/en/stable/howtos/applications/data_preparation.html