## 人機期末提案1

~~畫大餅的部分斟酌觀看~~

PROJECT NAME:
## 會議討論進行中MR助理

> 從學校內的小組討論到出社會的商業/工程各領域的對談，不論是1對1、1對多還是多對多，在對談中，總會有些資訊跟事件是無法同時進行，需要中斷某一方的注意力才能完成的，比如記筆記、查google、找翻譯甚至若是某些領域的話還會需要我們共同編輯一份無論是工程圖還是某個報表。
>
> 而hololens2的MR則突破了我們只有眼+手才能做一件事的限制，
> 因為他的互動方式包含eye gaze / voice input / hand gesture 並且藉由他同時是一台電腦之便，我們能夠有效優化一場會議的進行，舉凡功能如下。
>
## 功能：

* ### voice
* 自動顯示對話內容在畫面上
* ### eye gaze
* 畫重點 / 查google / 顯示該物件資料 (盯夠久就觸發) (根據不同會議性質有不同功能)
* ### hand gesture
* 筆記 / 操控介面的主要方式(按鈕/拖曳)
* ### UI(halogram)
* 顯示已紀錄會談內容/筆記/備忘講稿(3個是分開的)
* #### extra(optional)
* 自動翻譯(by azure)
* 對話內容/錄影存檔(可即時重播)
* 會議的每個人都帶hololens，則可以現場一起畫流程圖(3D)

> ## origin idea
> [https://learn.microsoft.com/en-us/training/modules/create-language-translator-mixed-reality-application-unity-azure-cognitive-services/](https://learn.microsoft.com/en-us/training/modules/create-language-translator-mixed-reality-application-unity-azure-cognitive-services/))

# design
* 系統
* 座標系統： X
* 房間掃描： X
* 空間mapping： X
* 場景辨識： X
* 空間錨點放置： X
* 互動
* eye gaze: V
* gesture: V
* voice: V
* UI元件
* hologram frame(by MRTK)

> source:
> https://learn.microsoft.com/en-us/windows/mixed-reality/design/core-concepts-landingpage

# develope
unity + MRTK3 + emulator(UWP) 開發(須在windows上才能)
> source:
[https://learn.microsoft.com/en-us/windows/mixed-reality/design/core-concepts-landingpage](https://learn.microsoft.com/en-us/windows/mixed-reality/develop/development)

# distribute(部署)
借hololens / emulator

> source
https://learn.microsoft.com/en-us/windows/mixed-reality/distribute/distribute-overview?tabs=hololens

## resources

[https://learn.microsoft.com/en-us/windows/mixed-reality/](https://learn.microsoft.com/en-us/windows/mixed-reality/)