# 虛擬執行長專案
***解決方案: Mediapipe + Metahuman + EasyMocap + Livelink + Deepfake + TTS***

## 1. 3D 模型製作

### 臉部 3D 重建
#### 方案一(已驗證失敗):
Facial Mesh extraction 執行臉部3D外型擷取、重建
工具：Mediapipe
***所需資料：執行長臉部圖片(正面高清、無表情)***

結果：失敗，因Mediapipe 精度遠遠不夠


#### 方案二(待驗證):
依照素材，手工建模
工具：Autodesk Maya
***所需資料(AIA 提供)：執行長正面、側面高清照片***

### 全身 3D 模型製作
重建全身模型 + rigging 控制項
工具：Autodesk maya
***所需資料：執行長 3D 臉部模型、執行長衣著圖片範例***

## 2. 3D 動畫製作

### 人物動態製作
臉部 + 全身動畫
工具：MOCAP、LiveLink
***所需資料：執行長演講影片(AIA提供)、執行長Avatar、演員模擬演出的執行長演講影片***

## 3. 執行長語音生成

### Text to speech
用 TTS 讓執行長發聲演講
工具：[TTS](https://github.com/coqui-ai/TTS)
所需資料(AIA 提供)：大量執行長演講音頻(12HR以上執行長演講素材 清晰無雜訊、單聲道、取樣率22050)
AI 運算需求：RTX 3090 * 2

### 4. 展示方案
#### 方案一:
3D 浮空投影
工具：[全息投影儀](http://www.simp4live.com/projection-mapping-small/fogscreen-projection-mkk9s-kww97-cds9b)
參考案例：[虛擬人物全息投影演唱會](https://www.youtube.com/watch?v=UZsMEX2jAQs)

#### 方案二:
螢幕顯示 or 投影顯示
工具：布幕、投影機