# 2022/1/24 主題發想 & 資料蒐集 ## Survey分工(1/27 中午12:00前) 1. 鏡頭 + 即時骨架分析 * 2(人): 葉欣瑜、張均富 2. 感測器(測速度、加速度之類的數據) * 2(人): 朱佳恩、傅宣妮 3. 劍道教學(攻擊、身態等等) * 1(人): 葉揚昀 ## 葉揚昀 ### 劍道輔助App * 動機 劍道除了持劍、揮劍外,步法、身態也是很重要的課題,在練習時往往只能透過老師或同學矯正自己的動作(因為對鏡子練習也不一定知道自己做的是否正確)。另外劍道從開始攻擊到擊中對手往往只需極短的時間(高段位的人攻擊面部過程不到0.1秒),因此需要客觀、量化的數據去幫助他們更了解自己的揮劍速度、加速度、角度、軌跡等數據來幫助他們在比賽中能有更好的表現。 * TA(目標受眾) 劍道初學者: 練習正確揮劍、格檔、移動(擦足、步足...)和身態 劍道持段者: 透過量化數據幫助他們精進自己的技術 ![](https://i.imgur.com/T2HRT82.jpg =500x) * 功能 1. 教學模式 利用影像辨識判斷使用者動作是否正確,並紀錄或提醒使用者需改進的點, e.g. : * 練習攻擊面、腹、手部時,竹劍的的停止點有特定高度 * 擦足的右腳不能超左腳 * 中段持劍時手臂要微彎且左手要置於下腹前約一個拳頭的距離 * 由上而下揮劍時左手要在頭頂上,竹劍與地約夾45° * etc. Python+OpenCV+OpenPose的人體姿態估計: ![](https://i.imgur.com/jV6GoJp.jpg =150x)![](https://i.imgur.com/E2GSJBX.png =300x) 2. 量化數據 利用感測器(裝在刀顎或刀尖上)或影像分析,量化並記錄使用者揮劍速度、加速度、角度、軌跡、平均施力等數據。 ![](https://i.imgur.com/MKjwRh1.png) * 資料蒐集(比較市面上的相似軟體&產品) 1. Kenjutsu Sword Fighting * 具有文字與影片教學 * 缺乏判斷使用者動作的教學模式與數據蒐集 ![](https://i.imgur.com/lhwRQUJ.png =200x) ![](https://i.imgur.com/rwSajVk.png =200x) 2. KENDO APP * 具有圖文教學與書籍教學 * 缺乏判斷使用者動作的教學模式與數據蒐集 ![](https://i.imgur.com/9vh0sEf.png =200x) ![](https://i.imgur.com/J8MAqEf.png =200x) ### 環境監測&預測狗狗 * 動機 空氣汙染是廣泛受到關注的議題,它會對人們的健康產生負面影響(e.g. 肺癌、氣喘、COPD等呼吸系統疾病)。在台灣,人們暴露在各式點汙染源(SPS)中,如餐廳、廟宇、車輛排放廢氣等。再加上民眾能取得的空汙資訊往往不是最即時(TAQMA以小時為單位更新)、最關心的地點(測站數量、地點有限),因此希望以狗狗來輔助有需要的人做出適當的決策。 * TA 1. 一般家庭: 可以把狗狗放在廚房檢測油煙等懸浮微粒,或浴室中檢測CO(一氧化碳)含量 2. 有氣喘等肺部疾病的病患: 可以把狗狗放在房間、工作場所等地,即時檢測PM2.5濃度等指標 * Hardware & Software 1. 硬體: 利用raspberry pi結合[PMS5003T G5T 粉塵溫濕度二合一感測器](https://www.taiwaniot.com.tw/product/pms5003t-g5t-%e6%94%80%e8%97%a4%e7%b2%89%e5%a1%b5%e6%ba%ab%e6%bf%95%e5%ba%a6%e4%ba%8c%e5%90%88%e4%b8%80%e6%84%9f%e6%b8%ac%e5%99%a8/)(測PM2.5)、[MQ2煙霧氣體感測器](https://www.taiwaniot.com.tw/product/grove-gas-sensor-mq2-mq2-%e6%b0%a3%e9%ab%94%e6%84%9f%e6%b8%ac%e5%99%a8/)(測CO等有害氣體)等裝置監測空汙與環境參數、並用喇叭模擬狗叫聲、使用[紅外線人體移動探測感測器](https://www.taiwaniot.com.tw/product/grove-pir-motion-sensor-%e7%b4%85%e5%a4%96%e7%b7%9a%e4%ba%ba%e9%ab%94%e7%a7%bb%e5%8b%95%e6%8e%a2%e6%b8%ac%e6%84%9f%e6%b8%ac%e5%99%a8/)感應是否有人經過 2. 軟體: 以html, Python, Flask, Oracle MySQL為主要架構去設計、呈現UI介面和處理資料 * 功能 1. 使用案例1(使用者設定): 使用者可以註冊、登入並設定可接受的空汙範圍 -> 參考其他人用同樣架構做出的登入後介面 ![](https://i.imgur.com/LgdC4I4.png =500x) 2. 使用案例2(使用者檢視環境參數): 使用者可以檢視PM2.5, CO, 煙霧, 溫濕度等環境資訊,並以統計圖表的方式呈現給使用者 -> 參考其他人用同樣架構做出的UI介面 ![](https://i.imgur.com/RvhQ4GP.png =500x) 3. 使用案例3(狗狗提醒): 如果空汙指標超過預設的範圍使用者經過時狗狗(把raspberry pi和感測器藏到狗狗的身體中)會汪汪叫提醒(使用紅外線人體移動探測感測器感應是否有人經過),並發送警告通知到UI介面上 4. 使用案例4(空汙預測): 透過資料庫中收集到的數據,以LSTM(長短期記憶,一種時間循環神經網路(RNN)),去預測未來該地的空汙趨勢,並依使用者需求呈現在UI介面上 -> 用LSTM做PM2.5預測的論文 ![](https://i.imgur.com/Z0ZKT5z.png =500x) ![](https://i.imgur.com/hM6ZJi9.png =500x) * 資料蒐集(比較市面上的相似軟體&產品) 1. TAQMN(Taiwan Air Quality Monitoring Network) 優點: 為行政院環境保護署提供的資料,測站設備精度高 缺點: 測站少、分布不均且每小時更新一次(不即時) ![](https://i.imgur.com/lgtcX5o.png =400x) 2. Airbox 優點: 可從有佈署AirBox的地點取得即時的資訊且價格不貴,能精準偵測所在空間的PM2.5空汙指數,而非區域平均值 缺點: 軟、硬體可擴充性較差、沒有用過往資訊預測未來的功能 ![](https://i.imgur.com/A3kwqVe.png =300x) 3. Graywolf 優點: 可監測多種氣體濃度(e.g. SO2, NO2, NO, CO, NH3, H2S...),且準確度高 缺點: 價格較貴、操作上不直觀、沒有用過往資訊預測未來的功能 ![](https://i.imgur.com/qDGL1mR.png =400x) * Reference 1. [都會地區PM2.5監測系統與預測之研究](https://tdr.lib.ntu.edu.tw/handle/123456789/74479?mode=full) 2. [環境監測IoT](https://github.com/jason40418/iot_project) 3. [TAQMN](https://airtw.epa.gov.tw/ENG/default.aspx) 4. [Airbox](https://airbox.edimaxcloud.com/) 5. [Graywolf](https://graywolfsensing.com/) ## 張鈞富 ### BunnyTrip * 動機 現有的旅遊APP雖然非常多,但有以下問題 1. 功能都各有缺失。 總共的幾項功能有:景點瀏覽、規劃行程、住宿推薦、美食推薦、消費優惠、共同編輯、交通路徑、加入火車航班等資訊、社群(打卡)...等等。 3. 大多缺乏即時性。 若店家有調整營業時間,又或是最近疫情影響,常會使遊客撲空。 4. 無一款具備智能規劃功能,排行程也是很累Der,非常多人都只想躺好照著行程走。 * 功能 結合現有的APP的各項功能,並介接Google API以取得即時資料,並具備AI智能規劃行程的功能。 * TA(目標受眾) 1. 喜愛旅遊的人: 具有完整且即時的旅遊資料庫,也具備方便的自主排行程的功能,行程也可以共同編輯及匯出分享 2. 懶人: 具有語音辨識及手動輸入特定條件的功能(如總預算、地區、交通方式、偏好食物、偏好景點類型)就可以自動生成一整個旅遊行程(包含交通、餐廳、住宿...) * Software 1. 軟體: 以APP, MySQL為主要架構去設計、呈現UI介面和處理資料 * 比較市面產品 https://www.playpcesor.com/2017/01/top-9-travler-app.html?m=1 ### 食在 * 動機 現在人雖然健康意識逐漸抬頭,但又苦於工作忙碌。有時仍常忽略飲食的均衡性,因此希望做出一個能智能推薦飲食的個人化系統,用戶能自行決定目標(如增肌、減脂、營養均衡...等) * 功能 結合健康手環和APP,以手環監測使用者生理狀況,並結合用戶身體狀況、AI營養師、用戶需求 自動推薦三餐各該攝取的營養。並讓使用者可以使用APP拍攝每餐食物,智能分析該份餐點會獲得哪些營養,並提示用戶應該再調整哪種類型的食物的攝取量。APP會針對用戶當周飲食去評分,也可以結合社群讓用戶分享自己的使用成果。 * TA(目標受眾) 1. 重視飲食均衡的人 2. 工作忙碌的人 3. 希望調整身體素質的人(如膽固醇過高、體重過高...等) 4. 希望提升體態的人 * Software: 以APP呈現 * 比較市面產品 用英文查有蠻多類似的資料,但用中文查沒查到。 ## 傅宣妮 ### 演講訓練APP * 動機: 無論是老師、演講者、學生以及上班人士,演講可說是基本的能力,但沒有經過好的訓練以及追蹤很難在緊張的環境下達到最好的表現,為了克服緊張忘詞以及贅詞過多還沒有意識的情況下,透過演講訓練的APP可以更有效的追蹤每次re稿的情況,包含容易忘詞的地方以及慣用的贅詞,並統計出贅詞以及忘詞的次數是否有減少。除此之外,面部表情以及眼神的交流或是肢體語言的表達也相當重要,且市面上較為少見。 * TA: 講者(老師、演講者、學生以及上班人士等) * 主要功能: 1.打卡紀錄 2.面部表情的加強 3.肢體語言的表達 4.聲調的高低起伏 5.語速以及時間的控管 6.辨識忘詞、贅詞 * 技術: 影像辨識:辨識面部表情(眼睛是否偏移、是否皺眉、面部微笑)以及肢體動作(大動作時可以吸引觀眾的注意力等) 聲音辨識:辨識語調以及聲音,並將語音轉成文字,贅詞、停頓太久的地方用紅字標示,並根據每張投影片的時間給出時間上的建議(建議一張投影片3分鐘) * 資料蒐集 Ummo:只有紀錄每次的演講內容並評分,沒有表情以及肢體語言的管理。 今年學長姐的面試APP:TA客群不一樣,無法取代。 有看到中國的APP,但功能做的沒有很完善,包括打卡學習、演講課程的推薦、演講評分(看不出來標準是甚麼)、推薦演講相關的網站。 ### 生涯規劃APP * 動機: 對大多數的人來說,性向測驗往往看過就忘、距離遠程目標太過遙遠難以實行等困難。設計這款APP將測驗出的性向結果推薦職業以及相關的活動或是比賽供使用者參考,除此之外使用者可以按照測驗的結果設立長程以及短程的目標,APP會分析出每日的進步量。但因為人往往會隨著時間的遞嬗而改變想法,為了改善以往性向測驗太過沒彈性,此款APP隨著時間推移會針對使用者的改變做相應。 * TA:對人生迷惘的人 * 功能: 1. 性向測驗(測出人格後會依照人格的特色推薦職業以及相關的活動、比賽等) 2. 設定大目標(長程)以及小目標(短程、以天計算) 3. APP計算出每日達成量 4. 設計人生藍圖--APP並不侷限現有的生活讓每個人有能力選擇自己想要過的生活。 * 技術:APP開發、性向測驗等資料蒐集 * 資料蒐集: 职业兴趣性格测试:选择要测试类型,依次回答问题,全部回答后提交再查看结果。 沒有看到有結合目標的APP。 ## 葉欣瑜 ### 戰痘吧!食戰經驗手冊 - 動機: 1. 不論是學生還是上班族,時常被各種工作課業壓得喘不過去,有時壓力還會大到,臉上各部位冒出煩人的痘痘,此時,有些人可能會擦各種保養品來抑制痘痘的生長等,但卻忽略臉上的痘痘也許是身體各部位給自己的一個警訊,且與其花大錢購買各種高檔的保養品(有時還會因為工作太累,忙到忘記擦)倒不如從日常飲食下手,透過飲食的管理,從頭到尾改善自己的健康狀況。 2. 根據了解後,市面上的產品,目前提供的改善方法沒有從飲食方面下手的APP,主要都是以推薦化妝品與保養品為主。 - 客群:任何想維持自己膚況的人 <!-- - 特點:透過臉部辨識,判斷一個人痘痘的位置,根據痘痘的位置去判斷個人的身體是否有哪些地方需要注意,並根據需要注意的地方,提供一些能夠改善該身體狀況的飲食清單,(甚至是運動項目之類的) --> - 主要功能 1. 使用前置鏡頭,進行臉部辨識,判斷痘痘長的位置,根據痘痘位置,點出身體可能出現的問題,提出能夠改善該健康問題的飲食清單 2. 膚況追蹤:根據過去累積資料,做出一份報告、折線圖等,讓使用者得以監督自己膚質狀況改善程度 <!-- - 軟體:臉部辨識、機器學習分析相關數據、App設計 --> <!-- - 與業界相關皮膚管理人士合作 --> - 市面上相似產品比較 - 在市面上都是大陸的產品:缺少繁體字版本、資安疑慮 1. [ClearFace](https://apps.apple.com/tw/app/clearface/id1331260454) - 語言只提供英語 - 只能辨識比較大顆的痘痘(紅紅的那種) - 使用區域問題:有一個Doctor opinion的功能,但可能是因為是國外開發的緣故,無法根據所在位置提供醫生相關資訊,但這個功能也給了我一個大膽的想法,我們可以根據使用者所在位置,提供附近皮膚科診所推薦的(可以與googl map做連結) - 缺乏客製化的功能:其他功能只是連結到某個特定網站而已,並不具有非常大的幫助,例如:有一個prevention hint,就只是單純連到某篇教人怎麼保養的文章。 - 只提供相關保養品推薦網站文章,而且沒有客製化!!!!!! 2. [你今天真好看](https://apps.apple.com/tw/app/%E4%BD%A0%E4%BB%8A%E5%A4%A9%E7%9C%9F%E5%A5%BD%E7%9C%8B-%E6%8B%8D%E7%85%A7%E8%BD%BB%E6%9D%BE%E6%B5%8B%E8%82%A4%E8%B4%A8/id1085941322) #### 缺點 - 大陸的產品:缺少繁體字版本、資安疑慮、只能夠過qq或WeChat登入,ios使用者可以使用Apple帳戶登入 - 一定要綁定手機 - 只能使用前製鏡頭 #### 優點 - 角色養成,任務制(可參考) - 皮膚管理小知識 - 任務解鎖 - 累積積分換取獎勵 - ![](https://i.imgur.com/g41TCoo.png) - 睡眠、飲食、生理期紀錄(可參考) - 偵測整體肌膚狀況:不只痘痘、還有黑眼圈、出油情況、膚色、光滑度 - ![](https://i.imgur.com/fIX9zEF.png) - ![](https://i.imgur.com/2HOnCYq.png) - ![](https://i.imgur.com/n5xi5l7.png) - 針對膚況提供保養品推薦 - ![](https://i.imgur.com/P8g8ipl.png) - 紀錄測膚狀態 - 歷史紀錄查詢:追蹤膚質變化狀況(可參考) - ![](https://i.imgur.com/6IgVLue.png) - 話題圈 - 根據不同的問題,提供相關文章分享(可參考) - 小社群的感覺 - ![](https://i.imgur.com/0gmmAsE.png) - [相關評論](https://www.dcard.tw/f/makeup/p/228296605) 3. [面部瑜珈](https://apps.apple.com/tw/app/%E9%9D%A2%E9%83%A8%E7%91%9C%E4%BC%BD-%E7%BE%8E%E5%AE%B9%E7%98%A6%E8%87%89%E7%9A%AE%E8%86%9A%E6%B8%AC%E8%A9%A6-%E5%81%A5%E5%BA%B7%E8%AD%B7%E8%86%9A%E7%9F%A5%E8%AD%98%E5%B7%A5%E5%85%B7-%E8%87%AA%E7%84%B6%E7%84%A1%E9%9C%80%E5%BE%AE%E6%95%B4%E5%BD%A2/id1551099110) - 膚況的部分是直接手動輸入,不是根據臉部辨識,無法準確對症下藥 - 針對想改善的肌膚狀況,提供相關的臉部瑜珈課程 - 付費制 ### 卡路里計算機 - 動機:大家越來越關注飲食控制的議題,而在飲食控制過程中,卡路里的計算佔有非常重要的地位,然而雖然目前有出了幾款可以記錄每餐食用多少卡路里的APP,但這些APP都只能根據曾經登錄在資料庫下的食品或是手動輸入的方式來記錄,無法每一次都能及時並準確的得知當下究竟攝取多少熱量。 - 客群:想要飲食管理的人 - 主要功能: - 透過影像辨識的方式,讓用戶能夠透過拍照的方式,馬上得知食物的總熱量。 - 第26屆資服「艾斯特」的標籤系統給了我一些小靈感:因為食物根據不同的烹煮方式,所涵蓋的熱量也會有所不同,所以在做影像判別的時候,也許可以標籤的形式,在旁邊附註透過影像辨識,所辨識出來的結果,而這項功能的目的,可以在影像辨識有誤時,讓使用者可以更改,讓系統能夠計算出更精確的結果。 ![](https://i.imgur.com/9P03qve.png) - 市面產品比較 1. [MyFitnessPal](https://apps.apple.com/tw/app/myfitnesspal/id341232718) - 輸入卡路里的方式:掃描條碼/手動輸入 缺點:使用條碼輸入的話,若該食品是尚未被登入在資料庫裡的話,便無法辨識,若改用手動輸入的話,因為使用者未必每餐都是攝取有上面印有營養標示所包裝過後的食品,故無法每餐都準確的判斷出該餐所攝取的熱量,再者手動輸入總熱量的這項功能有需要額外收費。 ![](https://i.imgur.com/WhbeR4v.png) ![](https://i.imgur.com/Y5RKQjM.png) ![](https://i.imgur.com/UpdIzgo.png) ![](https://i.imgur.com/auemCK7.png) - 告知攝取以及消耗的熱量(可參考) ![](https://i.imgur.com/CD8XRTm.png) 2. [薄荷健康](https://apps.apple.com/tw/app/%E8%96%84%E8%8D%B7%E5%81%A5%E5%BA%B7-%E5%87%8F%E8%82%A5%E5%81%A5%E8%BA%AB%E8%BF%90%E5%8A%A8%E5%87%8F%E8%84%82%E4%B8%80%E7%AB%99%E8%A7%A3%E5%86%B3/id457856023) - 大陸的產品:缺少繁體字版 - 計算卡路里的方式較多元,甚至是提供衡量的標準(可參考) ![](https://i.imgur.com/pIwhNMU.png) ![](https://i.imgur.com/9RplXo6.png) - 詳細營養成分分析(可參考) ![](https://i.imgur.com/oWw8VDc.png) - 但忽略了烹調的方式也可能影響熱量 ![](https://i.imgur.com/zLetvhf.png) - 根據當日輸入的食物,計算個營養成分比例,提供營養分析報告(可參考) ![](https://i.imgur.com/V9YrlYV.png) ## 朱佳恩 ### 料理製作輔助app - 動機: 想自學做料理的新手大多是從網路上獲取食譜並按照食譜上的步驟一步一步照做,但因為是使用手機查看食譜,導致製作料理時必須反覆進行洗手、滑手機查看下一個步驟、動手處理食材這幾個動作。市面上的食譜app已有提供了十分豐富完善的查找食譜、逐步教學等的功能,但目前沒有app能夠解決使用者在製作過程中查看食譜時必須先進行洗手這一步驟的問題。這個料理輔助app提供聲控的功能,使用者可以透過語音指令控制app畫面進行上下滑動、換頁之類的功能,並且可以聲控指示app開始計時,app也提供食譜語音指示,讓使用者不必看向螢幕也能得知下一步該怎麼做。 - 目標受眾: 想自學做料理的人。必須一步一步照著食譜步驟做的新手。 - 功能: (其他app有的功能) 1. 透過料理名稱搜尋食譜 2. 透過食材搜尋食譜 3. 發布自己的食譜 4. 收藏/點讚食譜 5. 紀錄自己的料理結果 (其他app沒有的功能) 6. 食譜頁面可用聲控下拉頁面、播放或暫停影片 7. 用聲控開始計時 8. 料理時食譜語音指示 - 資料蒐集(同類產品比較): - Cookpad 以收藏、分享食譜為主 - ![](https://www.jyes.com.tw/data/editor/images/1(30).png) - 私廚 可以排定採購計畫和料理的計畫 - ![](https://www.jyes.com.tw/data/editor/images/3(20).png) - 愛料理 除了食譜的收藏、上傳以外,也可以透過app購買廚具、食材(廣告有點多很煩) - ![](https://www.jyes.com.tw/data/editor/images/2(28).png) - 參考連結 https://my-best.tw/115103 ### 偵測使用者是否睡著的自動關閉螢幕app - 動機: 有時用手機看影片、看劇時不知不覺就看到睡著,但由於影片正在播放中,螢幕保護程式不會啟動,因而造成手機持續消耗電力,直到使用者醒來時才發現。目前市面上手機的自動關閉螢幕功能都是透過計算閒置時間,當手機閒置一定時間以上時就關閉螢幕。但是播放影片的時候手機並不會被認定為閒置,因此即使使用者已經沒有在觀看影片了,手機也不會有任何自動關閉的動作。此app會以手機的前鏡頭偵測使用者是否看著螢幕,若使用者持續一定時間沒有看向螢幕則停止正在播放的影片並自動關閉螢幕。 - (實現方式可能是每五分鐘左右就偵測一次,如果偵測出使用者沒有看著螢幕就持續偵測一段時間,若這段時間內使用者都沒有看螢幕則將手機關閉) - 目標受眾: 經常看影片看到睡著的人。 - 資料收集(類似產品比較): - ipad的螢幕注視感知功能 當使用者注視手機時,顯示器就不會變暗。 參考連結: https://support.apple.com/zh-tw/HT208245