【2020農業開放資料論壇】挖資料掘商機：農業開放資料經濟學 - 【農業智庫報導】PI阿柴

tags: COSCUP2020 入門 TR209

歡迎來到 https://hackmd.io/@coscup/2020 共筆

Image Not Showing Possible Reasons
  • The image file may be corrupted
  • The server hosting the image is unavailable
  • The image path is incorrect
  • The image format is not supported
Learn More →

點擊本頁上方的 開始用 Markdown 一起寫筆記！
手機版請點選上方 按鈕展開議程列表。

農業data

傳統的

  • 服務模式：平台開發者為資料產出者

現今

  • 服務模式：每一個人都是data producer

開放資料：每個人都可以提供資料、使用資料，都可以對資料做編制

Image Not Showing Possible Reasons
  • The image file may be corrupted
  • The server hosting the image is unavailable
  • The image path is incorrect
  • The image format is not supported
Learn More →

說笑話給我聽為範例

依規則：資料庫搜索（例如：飲料杯笑話、讓我笑話你）

  • 資料庫沒有，就找不到資料

依據機率：AI模組（語意分析的模組）->判斷語意->詞彙關聯集or 笑話資料集

  • 開放資料
  • 社群
  • 協作文化

資料庫文本分析、資料探勘

農業智庫報導 Agritech
https://www.agrianalytics.tw/

資料來源

  • 農業科技辭庫清單
  • 農業科技文本資料集

Image Not Showing Possible Reasons
  • The image file may be corrupted
  • The server hosting the image is unavailable
  • The image path is incorrect
  • The image format is not supported
Learn More →

語意分析模組、詞彙判識模組

  1. 改善傳統關鍵詞系統，量化關鍵詞重要程度(TF-IDF)
  2. 商業應用：農業AI詞彙判斷式模組，自動進行關聯性分析
  3. 資料標準化取決於使用者需要什麼內容、解決問題

AgriVocTaiwan 數位轉型3化

https://github.com/AgriAnalyticsTaiwan/AgriVocTaiwan

數位化、結構化、標準化(資料格式)

  • 不能結構化的資料沒有分析的必要
  • 缺乏見解的資料，沒有應用的價值->缺乏見解的資料，沒有應用的價值

Q&A時間

搜集了很多農業詞彙的資料，請問是只有將資料讀進資料庫，還是用全文語意去結構化資料？

有辭庫很重要，透過科研的文本資料作分析，利用農委會公開的資料裡面找出關聯的詞彙
困擾處：跨領域關鍵字、模糊概念(ex,farming)

1.關鍵字搜索
2.語義文本分析，透過jieba
3.詞彙語意分析

Select a repo