二技專題 === # 210316 ### 會議記錄 - 專題名稱是否修改 :arrow_right: 下次開會決定 - 系統簡介修改 > 系統開發工具可以到hackmd新增,最後統整至文件 - [x] 系統功能 - 填寫日記:除了用機器人聊天方式紀錄外,也可以透過日記方式紀錄 - [x] 系統功能 - 照片分析:不僅在紀錄時拍照,隨時隨地都能使用拍照功能進行臉部表情辨識 - [ ] 系統使用對象:可以再完整一點 - [x] 系統特色:填寫日記時所選的icon會有對應的button - [ ] 系統使用環境:區分LINE BOT和網頁的使用環境 - 固定做專題時間 - 禮拜二 - 禮拜四 ### 下次與老師的會議時間 > 3/24 # 210309 ### 會議記錄 ## 增加系統功能 - 使用者相關資訊 - [ ] LineID - [ ] 姓名 name(暱稱) - [ ] 性別 gender:男/女 - [ ] 年齡 age:使用者自行輸入 - [ ] 職業 career:學生|軍公教|服務業|工商業|自由業|家管|退休人員|其他 - 功能 > 填寫日記 > 拍照 > 歷史紀錄 > 統計 - 填寫日記 Diary - [ ] 心情 mood - [ ] 做什麼事 - [ ] 照片 pic(使用者一定要放) - [ ] 其他文字紀錄 note - [ ] 時間 time:yyyy/mm/dd hh:mm - 歷史紀錄 > 從DB 日記導入 - 未來展望 - AI機器人聊天 - 透過像是視訊通話方式抓取使用者的聲音及表情(語音及影像即時辨識) # 210304 ### 會議記錄 ## 系統架構 - Client View > LINEBot + RWD Web Ver. - DB(Local) > SQL Server - AI System > Python - Service Server > ngrok - Service Engine > Django ## 系統功能 - 心情日記 >> 平台中打字記錄心情 > - LINEBot:以一問一答的方式與使用者聊天紀錄 > - Web:以問卷方式記錄使用者 - LINEBot 功能 - [ ] 開始先收集使用者相關資訊 - [ ] 姓名 - [ ] 年齡 - [ ] 職業 - [ ] 利用 LINEBot 接收照片,並傳至後台分析 - [ ] 一問一答方式引導使用者寫日記 - Web 功能 - [ ] 呈現歷史紀錄(從 DB 抓取) - [ ] 以問卷方式寫日記 - 未來展望 > AI 機器人與使用者聊天 # 210303 ### ### 會議記錄(與老師meeting) * 把經過訓練的模型放到伺服器 * 將照片丟到伺服器上辨識,再回傳結果給user * 研讀老師給的影片(下下周開會給) * 把網頁端能做得先做 ex:日記介面設計等 * 約期中考後看系統進度 ### 下次與老師的會議時間 > 約兩周後,再用E-mail確認 # 210223 ### 會議紀錄 * 統整看過的文章/論文 * 往技術方免找資料 * 透過"微表情"判斷人的心理狀況跟實際表達出來的是否一致 * 是否有可用的表情庫open data * 觀察眉毛眼睛的細微變化 * 討論要使用APP或網頁讓使用者操作 # 210217 ### 會議記錄 * 多了解心理對情緒的影響 * 證明表情的變化跟心理有關聯性 * 找心理學論文 * 微表情 -> 未來發展 * 與老師討論"分析情緒時應該要使用影像or照片" * 往憂鬱症方向找資料 ### 下次開會時間 > 2/24星期三 中午(暫定) # 210118 ### 會議記錄 >* 看心理學相關書籍,分析臉部表情細微變化與心情邊畫之間的關係(每人至少看五篇) >* 搜尋技術方面文章 ex:python如何達成辨識的功能 ### 下次開會時間 > 2/17下午兩點 線上開會 # 相關論文 > [應用語音及臉部表情之雙模態情緒辨識](https://hdl.handle.net/11296/g8tuye) > [深度學習於中文句子之表示法學習](https://hdl.handle.net/11296/2jfs64) > [利用群眾外包機制建立表情基準資料與表情分類器](https://hdl.handle.net/11296/4re9yx) - 心理學相關 > [正向心理學介入對幸福與憂鬱效果之視覺化文獻回顧與後設分析](https://hdl.handle.net/11296/xr23nb) > [高功能自閉症學齡孩童的情緒語調辨識:以瞳孔反應為指標](https://hdl.handle.net/11296/ap3vn4) > [邊緣性人格疾患者 情緒辨識、情緒覺察、同理心 與人際親密之關聯性研究](https://hdl.handle.net/11296/fz6yj3) - 程式技術相關 > [機器人情感模型及情感辨識設計](https://hdl.handle.net/11296/t54m4e) > [應用於手機之自動化臉部辨識系統](Creating note...) > [主打「情感識別技術」的創業公司](https://www.affectiva.com/how/how-it-works/) > [相關論文 - Google雲端](https://drive.google.com/drive/folders/1axvOBv4BnDXB-YRQaOf5TxzEJ7rzLmZM?usp=sharing) # 201210 - 專題製作計劃書 - 是否修改 :arrow_right: 否 - 名稱:EZAnalysis(暫定) - 社群申請 - 經費(total :$40,000) |經費項目 | 單價 |數量| 總價 | | ------ | ---- | - | ------ | |講師鐘點費|$2,000| 5 |$10,000 | |書費 |$1,000| 5 |$5,000 | |雜支 | | |$15,000 | |設備費 |$2,000| 4 |$8,000 | |交通費 |$500 | 4 |$2,000 | - :memo:12/15前完成 # 201204 - 討論主題方向 - 工作分配 - 專題方向敘述+統整 :arrow_right: 16一珊、26純青 - 相關比賽(110/1~110/12) :arrow_right: 05若家、17妍葶、23奕勳 # 201127 ## <主題> ### 垃圾分類大數據分析 - 題目:點石成金 - 簡介: - ++透過各家各戶回收物分析家戶使用習慣進而瞭解回收習性++更能打造商業模式分析。 - 使用模式: - 由我們設立智慧回收站,使用者僅須將回收物投入回收孔內,回收站內機器便開始++識別其回收物,並將識別之回收物資料做蒐集整理++ - 對於使用者回收之物品依份量或使用者黏著度適當給予現金回饋 - 商業模式: 1. ++由後台分析該區使用者群體或個人消費習慣及生活模式,甚至對該區消費習慣及生活模式作出預測++;而統計出之數據結果和預測模型,++可供企業對於該區商業模式及庫存物品銷售精準提供解決方案++,使企業流程效益達到最佳化,甚至JIT。 2. 將使用者投入回收站之回收物售予長期配合之回收廠商。 - 技術面可行性: - 物品辨識因回收物形體不依可能較為困難,因此可能除了以形體辨識貼標籤做機器學習,也可能以類似機場行李輸送帶延伸RFID應用,多方收集回收物原產品資料。 - 相關案例文檔: - [基於深度學習卷積神經網路的垃圾分類裝置研究](https://twsf.ntsec.gov.tw/activity/race-1/59/pdf/NPHSF2019-052508.pdf) - [以人工智慧及物聯網方法探討垃圾分類自動辨識之研究](https://tanet2019.nsysu.edu.tw/assets/TANET2019_thesis/A3_015.pdf) - [智慧型感測資源分類桶](http://www.csie.chu.edu.tw/ezfiles/11/1011/bbs/4/bbs_101_609425_85207.pdf) - [回收自動辨識 成功高中](https://www.shs.edu.tw/works/essay/2020/03/2020032314064162.pdf) - 具有創新性之類似案例: - [基於聲音辨識實作智慧垃圾桶 中央大學](http://knowledge.colife.org.tw/one_speech.aspx?sid=11175) - 相關比賽案例: - [智慧分類垃圾桶](https://niicc.cilab.csie.ncu.edu.tw/achievement/achieveresult/10077) - [2017校園菁英獎 基於影像辨識技術的自動回收分類](https://www.mobilehero.com/review/2017/item/708-c17179.html) - 最相近相關之應用: - [資源回收機器人3秒辨識 清大團隊創新研發](https://udn.com/news/story/6928/3878207) - 相關商業應用: - [可自動分類的智慧垃圾桶來了,但智慧的價格很驚人](https://technews.tw/2020/02/25/cleanrobotics-trashbot/) - [英國設計公司研發「辨識裝置」,輕輕感應即可正確做分類](https://www.seinsights.asia/article/3290/3270/6584) ### 運動app - 類似寶可夢 - 蒐集天氣 - 提醒使用者健身房或公園位置 - AR畫面 - 走到一定公里數有獎勵 > 希望透過此APP讓使用者養成運動的好習慣 缺點:美工部分耗時 ### 藥品掃描辨識 - 減低藥師錯誤發藥的機率 - 紀錄患者吃什麼藥種 ### 盲人/視障搭公車 - 語音辨識 - 分辨要搭乘之公車號以及抵達之目的地 - 連線至公車司機 司機會收到訊息 - 相關APP - [APP助視障者 交通轉乘無障礙](https://news.cts.com.tw/vita/campus/201612/201612121830433.html) - [視障助乘巴士報站](https://play.google.com/store/apps/details?id=mo.gov.dsat.bis.voice&hl=zh_TW) ### 心情辨別器 > 近期自殺率有點高,或許可以提供一個管道減少 - 以日記紀錄 - 可以回答一些簡單的問題去辨別使用者的心裡狀況 - 可將結果傳至上面的人 讓大家多注意當事人的狀況 - 加以預防自殺率上升 - 相關資料 - [董氏APP影片](https://m.youtube.com/watch?v=XDbQOZzuyVs) - [憂鬱檢測APP](https://apps.apple.com/tw/app/%E6%86%82%E9%AC%B1%E6%AA%A2%E6%B8%AC/id1469020485) - [解憂娃娃APP](https://apps.apple.com/tw/app/%E8%A7%A3%E6%86%82%E5%A8%83%E5%A8%83/id1475104794) - 許多的日記都是單純紀錄心情 然後算出平均的心情指數。沒有使用檢測表來做計算 - [心情溫度計APP](https://apps.apple.com/tw/app/%E5%BF%83%E6%83%85%E6%BA%AB%E5%BA%A6%E8%A8%88/id909530514) - 有檢測的App,但沒有日記功能 ### 食物辨識 - 圖片辨識 - [190萬張訓練圖像!Google釋出超大型開放圖片資料集,150萬項物件定位可訓練AI多樣化複雜圖像辨識](https://www.ithome.com.tw/news/122797) - [Open Images Dataset V4](https://scidm.nchc.org.tw/dataset/open-images) - 丟一張圖片辨識附近是否有類似食物 > <big>相似系統</big> > 1. https://buzzorange.com/techorange/2017/07/25/pic2-recipe-mit/ > 2. https://today.line.me/hk/v2/article/3%E5%80%8B%E9%A3%B2%E9%A3%9F%E8%BF%BD%E8%B9%A4App%E6%8E%A8%E4%BB%8B%E3%80%80%E5%BD%B1%E4%B8%AD%E6%96%87%E9%A4%90%E7%89%8C%E5%8D%B3%E6%B8%AC%E5%8D%A1%E8%B7%AF%E9%87%8C-J8r8qk ### 紀錄夢境 - 紀錄夢境(惡夢/美夢) ## <專題相關經歷> - 系統介紹(條列) # 201123 ### 主題 > 辨識♻️ > - 搜集各區垃圾資料,來針對該區可以如何去營銷 > - 透過材質、條碼或形狀去辨識 ### 專題老師 > 林俊杰、蒯思齊、許晉龍、葉明貴、唐震、林宏仁 ### 下次討論時間 :memo: 11/27 12:00在教室討論 # 比賽相關資訊 - 全國大學校院數位人文大數據學生競賽 - 報名時間:12月~1月底 - https://contest.bhuntr.com/tw/0v9h0kpi4rvq9e1x08/ - 第二屆 大專院校資訊創新應用暨金流服務競賽活動 - 報名時間:2021/01/15 下午 5:00 - https://www.ecpay.com.tw/Activities/CollegeCompetition_20200422?utm_source=ecpay_news - 全國大專校院智慧創新暨跨域整合創作競賽 - 報名時間:5/8~7/3 - ==限制1~4人== - https://niicc.cilab.csie.ncu.edu.tw/ - 經濟部搶鮮大賽 - 報名時間:9/25 - https://www.getfresh.org.tw/index.aspx - [x] - InnoServe 大專院校資訊應用服務創新競賽 - 報名時間:9/27~10/8 - http://innoserve.tca.org.tw/method_9_2021.aspx - http://innoserve.tca.org.tw/method_3_2021.aspx (資訊應用沒資格) - 帳號: 10936026@ntub.edu.tw 密碼: Imd110208 - 育秀盃創意獎 - 報名時間:10月 - http://award.ysed.org.tw/ - [x] - 中原大學第三屆【你‧可以改變未來】創新創業競賽 - 報名時間:~~10月底到11月~~ 2021/8/23前 - https://cyie.cycu.edu.tw/%f0%9f%99%8c2021%e6%96%b0%e5%89%b5%e5%8d%83%e9%87%8c%e9%a6%ac%e5%89%b5%e6%a5%ad%e7%ab%b6%e8%b3%bd/ - 通訊大賽 - https://mobilehero.com/zh-Hant/fivegplus/detail - [x] 2021 第三屆 LINE Chatbot 對話機器人設計大賽 - 報名截止:2021.9.30 17:00前 - 報名網址:https://contest.bhuntr.com/tw/fklc6b98o0ueubrzel/home/ - 主題、人數不限 - [x] 2021全國大專院校產學創新實作競賽 - 報 名 截 止 :2021年 10月18日(星期一) - http://eedept.ncue.edu.tw/innovation2021/join.html - [x] 大手攜小手智慧創新應用競賽 - 報名截止:2021.10.29 (星期五) 17:00前 - https://iot2gather.ntust.edu.tw/member <big>物聯網IoT</big> - 新思科技ARC®盃AIoT設計應用大賽 - 報名時間:2月~4月 - https://www.synopsys.com/zh-tw/taiwan/university-program/2020-arc-aiot-design-contest.html - 通訊大賽 聯網未來挑戰賽 - 報名時間:6月前 - https://www.mobilehero.com/competitions/iot.html - 中華電信IoT大平台創意應用大賽 - 報名時間:6月~9月 - https://www.cht.com.tw/home/campaign/5genterprise/index.html > 額外資料《智慧城鄉-環境篇》 http://lom.com.tw/wordpress/?p=758