# VideoMark Summary 202304

## 機能概要

Web VideoMark で現在対応済みの機能と次に対応を検討している機能の概要。

### 既存機能概要

- 以下の情報を元に QoE を推定可能
- 解像度・ビットレート・FPS の変化
- 再生中の一時停止の発生
- QoE 推定に対応済みのサービス
- AbemaTV LIVE (最新 QoE 未対応や VOD 未対応など一部制限あり)
- Netflix (広告付きベーシックプランでの広告の扱いは未確認など一部制限あり)
- Paravi
- TVer
- TWILIGHT CONCERT
- YouTube (LIVE/VOD)
- YouTube Music も対応
- モバイルについては推定精度制限あり
- 動画 CDN とのスループットや通信量の計測
- 一部サービスでは未対応
- 再生中の各種イベントの記録
- 一時停止、シークなどのメディアイベントの記録
- CM の挿入などの検知 (YouTube など一部のみ)
- 再生中の解像度やビットレートの制限
- Amazon Prime Video, Paravi, YouTube ニコニコ動画等の一部サービスでのみの限定的対応

### 対応検討中/実装中の機能

- **Traceroute などの自動計測と集計**
- 試験的に定期自動実行・端末ローカルへの記録には対応済みであるが、結果をサーバに集約して集計する機能は未実装
- **QoE 計算の最適化**
- QoE 推計サーバの使い方を最適化し QoE 推計の失敗確率の削減や多数端末同時計測時の遅延の削減
- 長時間動画再生時は複数回の動画視聴として分割推定する？
- **QoE 推定対象の拡大**
- Abema TV VOD, Amazon Prime Video, ニコニコ動画 などについても需要があれば QoE 計測に対応する
- クライアントサイド QoE 推定
- ITU-P1203 の特許料を払ってクライアントサイド推定をすることで QoE 推計サーバの運用コストを減らす？(サーバ費用と特許使用料のバランスや推計サーバ提供のNCom様のご意向に応じて)
- 複数端末での同時視聴
- 再生動画・再生位置などを同期した「視聴パーティ」を可能にする。まずは YouTube の同時視聴から
- UI Refresh
- 最近見た動画を拡張機能メニューから表示
- 視聴履歴画面を刷新して絞り込みや結果の確認をしやすく
- スピードテスト・他ユーザとの比較
- 動画視聴時の計測結果の集計・共有・比較
- スピードテストサービス (iNonius など) の利用・連携

## 自動計測

計測専用端末を用いた自動計測が可能。

- Ubuntu OS 上の Docker 内の Chrome ブラウザで指定動画を分単位でスケジュール計測
- ISP 契約などの設置初期問題以外の計測障害はほとんどなし。SSH/Desktop などでの遠隔確認に対応し、計測障害時の遠隔調査を可能とし
- 現在 Quieter3Q/3C を採用 (当初利用の Jetson Nano から移行済み)
- Intel N5105 (Jasper Lake, UHD Graphics) 搭載: H.264 4K60p (HEVC/VP9 8K) 動画を GPU 利用で過負荷にならず再生可能
- 課金が必要なサービスも課金した上での自動ログインして計測可能 (Netflix に対応済み、他は必要に応じて対応)

### ISP や都道府県毎の QoE 変動

各動画配信サービス利用時の結果を自動計測・集計し、サービス品質の安定性の確認やネットワーク通信量などと比較しての分析、制御への反映が可能。

- ネットワークトラフィックと相関がある形で QoE 計測値が変化することを確認済み (予測プラットフォームにて)
- 高トラフィックイベントの発生時に他動画サービスへの品質影響なども確認


- ISP 側でのネットワーク経路設定、相互接続先 ISP/IX の変化、各動画配信サービスのキャッシュサーバの有無に応じて QoE 計測値が変化することを確認済み
- ISP でのネットワーク構成や相互接続先の変更による動画サービス視聴品質への影響を確認可能
- YouTube (Google Global Cache), Netflix (Open Connect Appliance), AbemaTV (Akamai Edge Server)
- 平均値を出す場合は数十サンプルが得られるような台数または計測回数を確保する


### 接続先 CDN サーバの割合の時系列推移

動画視聴時に動画ファイルを DL してくる CDN サーバがどのように切り替わっているか計測毎に記録したものから集計が可能。但し Akamai のように CDN サーバのホスト名が同一で接続先が切り替わるものについてはこの記録では判断が出来ないため Traceroute と併用した計測の実装が必要。


### ファイル DL 速度計測

- 自動計測端末でのファイル DL 速度計測
- curl を用いて指定 URL (ダミーゲームデータ等) からファイルをダウンロードして計測、集計


### その他

IPv4/v6 いずれで接続しているかによる違いの比較。