2019 年後半 海外動画技術動向
•
1 recomendación•1,078 vistas
The presentation is a report on IBC 2019 and Demuxed 2019. It describes BBC R&D's 5G experiments, the roadmap for DVB-I's technology components, next-gen codecs, Google's technical approaches for broadcasting, the evolution of ad insertion technology, browser-based video editing, etc.
Recomendados
Más contenido relacionado
La actualidad más candente
La actualidad más candente (20)
Similar a 2019 年後半 海外動画技術動向
Similar a 2019 年後半 海外動画技術動向 (20)
Más de Yusuke Goto
Más de Yusuke Goto (20)
Último
Último (8)
2019 年後半 海外動画技術動向
- 1. 2019 年後半 海外動画技術動向 AbemaTV 開発本部 五藤 佑典 IBC 2019 & Demuxed 2019 編 2019.12.17
- 3. IBC 2019 ／ Demuxed 2019 参加 アムステルダム ２０１９年９月１２日〜１７日 サンフランシスコ ２０１９年１０月２３日〜２４日
- 6. 6
- 7. アジェンダ ● BBC Research & Development による 5G 技術検証 ● DVB-I のロードマップ ● 次世代コーデック ● Google の放送事業へのアプローチ ● 広告挿入技術の動向 ● 進化するブラウザベースの動画編集 ● AI x 映像品質管理
- 8. Motivation AbemaTV を始めとするサイバーエージェントの動画事業を技術的に前進させる ● 業界トレンドの定点観測 ● アメリカを中心とする技術標準化の動向キャッチアップ ● 複数の海外パートナー会社との一挙ミーティング ● 業界先端企業の将来への見解や実践例などの情報収集 ● 汎用ソリューションの進化状況の確認 ● 以前に目をつけていた技術の進化状況の確認
- 9. BBC Research & Development による 5G 技術検証
- 10. BBC による 5G 生放送中継実験 背景：UK では Vodafone と EE が消費者向け 5G サービスを開始済 https://www.mirror.co.uk/tech/vodafone-launches-5g-network-uk-17375473
- 11. BBC による 5G 生放送中継実験 5G による生放送中継を本番実験 ● 慎重に条件を選んで実施 ○ 市街中心地 ○ アンテナのすぐ近く
- 12. BBC による 5G 生中継実験 実運用に向けて ● 専用の 5G 回線が必要 ○ Vodafone でも EE でもないパートナーを選択する可能性は十分にある ● 今後 2 年程で実運用する予定
- 13. BBC による 5G スマートツアリズム ● イングランドの観光地 ローマン・バス ○ 保存状態が良い古代 ローマの公衆浴場跡とし て有名 ● 2018 年 12 月 10 日〜 17 日 実施 https://www.romanbaths.co.uk/
- 15. BBC による 5G スマートツアリズム 公衆浴場の復元物上に AR で当時の光景を再現 ● スマートフォン Samsung S8 ● 360° 動画 ● リモートレンダリング ● 60 GHz / 5G メッシュネットワーク ● ローマン・バスとブリストル大学（物理サーバー）間を 10ms 以下で通信
- 17. DVB-I のロードマップ
- 18. DVB-I のロードマップ ● DVB-I Service List ○ 2019 年 11 月 published ● DVB-DASH with a low latency mode ○ 2019 年 6 月 finalized ○ 2019 年 7 月 published ● DVB mABR ○ 2020 年 1 月
- 19. DVB ？ ● 欧州のデジタルテレビ放送の標準規格 ● 放送方式ごとの DVB 規格 ○ DVB-T：地上デジタル放送 ○ DVB-S：衛生デジタル放送 ○ DVB-C：ケーブル放送 ○ DVB-I：インターネット放送
- 20. DVB ？ ● 欧州のデジタルテレビ放送の標準規格 ● 放送方式ごとの DVB 規格 ○ DVB-T：地上デジタル放送 ○ DVB-S：衛生デジタル放送 ○ DVB-C：ケーブル放送 ○ DVB-I：インターネット放送
- 21. DVB-I DVB-I DVB-DASH LL-DASH mABR DVB AV Codecs Signaling / Metadata Service Discovery https://www.slideshare.net/foerderverein/new-media-services-from-a-mobile-chipset-vendor-and-standardization-perspective
- 22. DVB-I Service List インターネット配信と放送によるコンテンツを同一に扱う ● 同じ EPG でグルーピング ● 番組情報取得方式の統一定義 ○ インターネットでも放送によるコンテンツでも同じ UI で番組情報が提供される 検索・発見・ナビゲーション体験の統一
- 23. ● インターネット／地上波／衛生放送 などが同一 UI 上で表示
- 24. DVB-I Service List Content Providers Internet Terrestrial / Satellite Broadcast DVB-I Service Portal Various Devices
- 25. DVB-DASH with a low latency mode ● DVB-I 版の LL-DASH ○ CMAF ○ 放送と同等の遅延（2 秒） ■ 通常の DVB-DASH は 20 秒程 ○ より低遅延は... ■ 視聴環境も相当良い条件が求められる ■ 限られたユースケースのみに求められる DVB では求めない方針
- 26. DVB-I mABR ● Multicast Adaptive Bitrate ● 放送局と通信事業者が協業して IP ベース配信の最適化 ● OTT とケーブル／DTH の良いとこ取り ○ Multicast ○ Managed network ○ High Scalability ○ Multi-screens ○ ABR ○ DRM ● アイデアのオリジナルは castLabs が米国で実装した例からとのこと ○ Broadpeak の nanoCDN multicast ABR を利用
- 27. DVB-I mABR ● Multicast Adaptive Bitrate ● 放送局と通信事業者が協業して IP ベース配信の最適化 ● OTT とケーブル／DTH の良いとこ取り ○ Multicast ○ Managed network ○ High Scalability ○ Multi-screens ○ ABR ○ DRM ● アイデアのオリジナルは castLabs が米国で実装した例からとのこと ○ Broadpeak の nanoCDN multicast ABR を利用
- 29. Broadpeak のソリューション例 Unicast ABR Unicast to Multicast server Operator’s IP network Multicast to Unicast agent Unicast ABR Multicast ABR Packager
- 30. Broadpeak のソリューション例（Mixed） Unicast ABR Packager Unicast to Multicast server Operator’s IP network Gateway w/ Multicast to Unicast agent Unicast ABR Public network Multicast ABR Unicast ABR
- 31. Broadpeak のソリューション例（DTH） Unicast ABR Packager Unicast to Multicast server Satellite Multicast ABR Gateway w/ Multicast to Unicast agent Unicast ABR Unicast ABR Public network Multicast ABR Multicast ABR
- 32. 次世代コーデック
- 33. 次世代コーデック ● LCEVC ● V-PCC ● VVC ● AV1
- 34. LCEVC Low-Complexity Enhancement Video Coding ● コーデックに依存しないコーデック強化 ● n 世代コーデックの符号効率を n+1 世代と同 等に強化 ● n 世代コーデックと同等の複雑性を保ちなが ら ● ソフトウェア実装可能でバッテリー消費が少 ない強化コーデック Guido Meardi (V-Nova) 氏
- 38. 38
- 41. 41 別の (HEVC) の結果では、 PSNR は同じで、 VMAF と MOS で差が 出るパターンも このパターンでは 主観上は明らかに 右の方が映像品質が 高く見える
- 44. V-PCC V = Video-based PCC = Point Cloud Compression ● V-PCC は Point Cloud Comression 向けの始めての MPEG コーデック ● 800,000 points per point cloud frame = 1.5 Gbps
- 45. Point Cloud ?
- 46. Point Cloud の使い道 ● 文化遺産／モデリング ● AR／VR 動画 ● 地図／自動運転車
- 47. Point Cloud の使い道 ● 文化遺産／モデリング ● AR／VR 動画 ● 地図／自動運転車
- 48. Point Cloud の使い道 ● 文化遺産／モデリング ● AR／VR 動画 ● 地図／自動運転車
- 49. Point Cloud の使い道 ● 文化遺産／モデリング ● AR／VR 動画 ● 地図／自動運転車
- 52. リアルタイム V-PCC デコード ● シームレスな MR 体験 ● リアルタイムで 自然なインタラクション ● AR に最適な立体映像
- 53. VVC VVC = Versatile Video Coding ● HEVC の 50% のビットレート 削減を目指す ● 2020 年に finalized 予定 ● Fraunhofer ブースで Live デコードのデモ
- 54. AV1 Google の AV1 ロードマップ ● 2020 Q1 - 4K デコーダー（消費者向け） ● 2020 Q2 以降 - 8K デコーダー
- 55. AV1 のステータス 品質ステータス ● 4K@30fps : Good ● 8K@30fps : Not good 実用ステータス ● 全 YouTube コンテンツのうち 5% が AV1 エンコードされて配信中 要改良
- 57. Widevine CAS ● CAS = Conditional Access System ● Widevine DRM 技術をベースに Android TV に CAS を搭載 ● 放送や OTT 事業者が既存インフラを使用して 安全に Android TV へのリーチ拡大が可能
- 58. Widevine CAS のメリット ● Google が無料提供 ○ 技術使用におけるロイヤルティなし ■ 通常は CAS 使用にはロイヤリティが必要 ○ デバイス使用に費用なし ● 煩雑になりがちなベンダーとの交渉が Google だけでワンストップ ○ SoC ベンダー ○ CAS ベンダー ○ OEM ベンダー ○ ハードウェアベンダー
- 61. Dyanamic Ad Substitution for HbbTV 2.0 後ほど紹介 x
- 62. HbbTV on Android TV Seraphic（上海）の HbbTV ソリューション ● Android 4.4.2 以上 ● HbbTV 2.0.2 サポート ● Linux ／ Android 両プラットフォームの機能をバランス良く最適化 ● 標準の Android Media framework とサードパーティ製のメディアプレイヤーのイン テグレーションのサポート
- 63. HbbTV on Android TV
- 64. HbbTV on Android TV https://www.seraphic-corp.com/Download.aspx?url=2018-06-29/201806291415494796.pdf%7CSERAPHIC_HbbTV_Android_datasheet.pdf&filer=/Upload/File/
- 65. 広告挿入技術の動向
- 66. Dynamic Ad Substitution ● HbbTV 2.0 向けのクライアントサイドでの広告置換 ● 放送による広告枠個別での置換を可能に ○ Google Ad Manager と HbbTV 2.0 の機能を使用してブロードバンドの広告に差し替える ○ 広告チャンス中の任意の広告枠のみ差し替え可能 ● フォールバック ○ HbbTV 2.0 が利用できない受信機ではデフォルトの広告
- 68. Dynamic Ad Substitution デモ PC (DekTec StreamXpress) DekTec DVB-T TEMI (Time and External Media Information) TV 放送と HbbTV 両者で使用可能
- 69. EMSS Enriched Media Streaming Solution 標準化している人
- 70. EMSS = SSAI の標準化 ● アノテーション ● UI ○ カウントダウン ○ スキップ ○ コンパニオン広告 ○ バナー ● ビジネスルール適用 ○ シーク時の強制ビジネスルール ● ビーコン ○ クライアントサイドでのトラッキング ○ アド・ブロッカーの回避
- 71. EMSS コンポーネント ● メタデータの標準化 ● 伝送手法の定義 ● メタデータ処理の普遍化 ● メディアプレイヤーのモジュール ○ UI ○ 設定項目 ○ オーバーレイ ○ インタラクション ○ ビーコン
- 74. Hulu と Ad Insertion ● Hulu は VOD で Client-Side Ad Insertion から開始 ○ サポートデバイスが増えるにつれて Server-Side Ad Insertion に ● Live を始めるにあたって異なる課題にぶつかっている
- 75. 75
- 76. 76
- 77. 77
- 78. パーソナライズド広告のメリット／デメリット ● メリット ○ 広告のセールスフローの単純化 ■ 常に見る広告が決まる ○ 広告体験の一貫性 ● 生配信特有の必要事項 ○ リアルタイムの変更検知（ポーリング） ○ ストリーム内の広告更新の一貫性を守る ストリームで一意に広告を決定する 78
- 81. 81
- 84. Server-Guided Ad Insertion MPEG-DASH の Patch ● サーバーはスティッチングしない ○ 更新情報をどこに取りに行くかガイドするだけ ● コンテンツと広告が分離される ○ スケーラビリティが高くなる ○ 適切な時間管理を必要とする 84
- 85. 85
- 86. 86
- 87. Server-Guided Ad Insertion 標準仕様では MPEG-DASH のみ ● PatchLocation 要素による更新情報ガイド ● 厳格な時間管理モデル 87
- 88. Server-Guided Ad Insertion 課題 ● クライアントで自身の状態を永続化するため クライアント側にスペック依存がある ○ コンテンツの尺が長くなればなる程 負荷がかかる ○ 現時点では 2 割程のユーザーにだけ 適用されている ● MPEG-DASH のみ ○ HLS でも可能だが、標準仕様からは逸脱す ることになるリスク CBS Interactive ミートアップで Hulu の John Schmiederer 氏に話を伺ってみる 88
- 89. 進化するブラウザベースの動画編集
- 90. ● Grabyo ● Vimond IO ● Tellyo ● Bluebird https://about.grabyo.com/
- 91. Grabyo ● AWS 上で動作する Browser-based editing ソリューション ○ エンコーダー ■ AWS Elemental ■ 他のエンコーダーもサポート予定 ○ Automatic Speech Recognition (ASR) ■ Amazon Transcribe? ● Live 編集 ○ インジェスト ■ RTMP / HLS
- 92. Vimond IO ● Live 編集 ○ インジェスト ■ RTMP / HLS ● 出力先サポート ○ Amazon S3 ● 編集機能 ○ 再編成 ○ トリミング ○ 音量キーフレーム ○ グラフィック追加 ○ ボイスオーバー
- 93. Tellyo ● AWS ● Live 編集 ○ インジェスト ■ RTMP / HLS / SRT / RTSP
- 95. Blackbird ● GCP / AWS / Azure サポート ● Live 編集 ○ インジェスト ■ RTMP / HLS / SDI ● File-based ○ 4K サポート ○ ProRes / MXF サポート
- 98. AI x 品質管理
- 99. DeepPerceive Deep Learning から MOS を生成する技術 青色 = フレームレベルの品質スコア｜ オレンジ = 知覚品質スコア
- 100. DeepPerceive Deep Learning から MOS を生成する技術 青色 = フレームレベルの品質スコア｜ オレンジ = 知覚品質スコア 3 回試して 3 回とも自分の主観評価と一致
- 101. まとめ ● 5G によるプロダクションも徐々に現実的なものになってきている ● DVB-I のコンポーネントにより、標準化されたインターネット放送の規格は 従来の放送同等かそれ以上の利便性を身につけてきている ● 既存コーデックと組み合わせるなど次世代コーデックのアイデアは多様 ● パーソナライズド広告挿入技術はスケーラビリティや放送との融合の方向で進化し てきている ● ブラウザベースの動画編集も汎用ソリューションとして実用化している