NTTドコモのAI映像自動構成で推しも全体演出も操作なしで楽しめる

ライブ配信を見ていて、推しのアップを追いたいのにステージ全体の演出も見逃したくない、と感じたことはないでしょうか。カメラの切り替えを自分で操作するほど、肝心の歌やダンスから目が離れてしまいます。NTTドコモが発表した「パーソナライズ映像自動構成技術」は、この小さな矛盾に、AIで正面から答えようとするものです。

目次

1. 核心をひとことで:推しも全体も、AIが自動で組み立てる

NTTドコモは、視聴者一人ひとりの好みに合わせてライブ映像を自動で構成する技術を発表しました。視聴者が事前に設定した出演者のアップ映像と、ステージ全体の演出や見どころを捉えた映像を、AIがバランスよく組み合わせて届ける仕組みです。

ポイントは、視聴中にカメラを切り替える操作がいらないことです。映像の判断には、映像と画像を組み合わせて理解するAIモデル「VLM(Vision Language Model)」が使われます。

PR
「王者性能」GEEKOM A7 ミニ PC

「王者性能」GEEKOM A7 ミニ PC

AMD Ryzen 7730U搭載 AI Agent・32GB 大メモリ・128GB 拡張でローカル LLM 対応|USB4×2|4 画面 8K|3 年保証|SD カードスロット|ケンジントンロック|在宅・クリエイター・ゲーミング向け mini pc 32GB+500GB

Amazonで見る

私は、この技術の価値は「画質」や「臨場感」より、視聴者の操作を減らすところにあるのではないかと思います。見る側が何もしなくても、自分向けの映像が出来上がる。そこが新しさの中心です。

画面の切り替えが課題になるのは音楽ライブだけではありません。私はサッカーの配信で推しの選手ばかり見ていて、いつの間にか点が入っていた、ということが何回かありました。結局、メイン画面で観ることが多いのですが、これは「自分で選ぶ」ことの落とし穴そのものだと感じます。

配信サービスの使い勝手は、機能の多さより「考えずに済むか」で決まることが少なくありません。メニューが増えるほど、見る人は選ぶ手間を背負います。今回の発想は、その手間を減らす方向に舵を切ったものだと読めます。

2. 仕組みと歴史的経緯:マルチアングルの「忙しさ」をどう解いたか

ライブ配信の見せ方は、大きく三段階で変わってきました。最初は、制作側が選んだ映像をそのまま流す固定の中継です。誰が見ても同じ映像で、推しが映る時間は制作側の判断に委ねられていました。

次に登場したのが、視聴者が複数のカメラ映像から選べるマルチアングルです。推しを追い続けられる自由度は生まれましたが、切り替えは自分で行う必要があります。見たい場面を逃さないために画面を操作し続けることになり、「自由」が「忙しさ」に変わる面がありました。

今回の技術は、その次の段階にあたります。視聴者が事前に推しを設定しておけば、AIが推しのアップとステージ全体の映像を組み合わせてくれます。数字だけ見ると「カメラの数は従来と同じ」ですが、実際は、選ぶ作業をAIに移したことで、視聴者の注意を映像そのものに戻せる点が違います。

映像の側に求めたいものは、人によって違うはずです。私の場合は、会場の雰囲気をもっと感じられる映像になってほしい、という思いがあります。アップや全体といった画角の切り替えだけでなく、その場の空気まで届くかどうかが、次の課題になりそうです。

VLMが映像の中身をどう判断し、どう構成を決めるのか、といった具体的な処理の中身は、発表内容からは分かりません。推測ですが、誰が映っているか、いまがサビなのか全体の演出が動く場面なのか、といった手がかりを映像から読み取っているのではないかとみています。

3. 比較:固定の中継・手動マルチアングル・今回の技術

三つの見せ方を、視聴者の立場から整理します。

項目固定の中継手動マルチアングルパーソナライズ映像自動構成
映像を決める人制作側視聴者AI(視聴者が推しを事前設定)
推しを追えるか制作側の判断しだい追える(自分で操作)追える(自動)
ステージ全体の演出見られる切り替えを忘れると見逃すアップと全体をバランスよく構成
視聴中の操作不要多い不要
提供状況広く普及一部の配信で提供体験デモの展示が予定された段階

表のとおり、今回の技術は固定の中継の気楽さと、マルチアングルの自由度を両取りしようとするものです。ただし、実際のライブ現場での運用や商用サービスの時期は、発表内容からは確認できません。現時点の情報だけでは判断しにくいところです。

AIに任せるとき、何を重視してほしいかは人それぞれでしょう。私は、ライブでもスポーツでも盛り上がりの瞬間を予測して、臨場感のある映像に仕上げてほしいと望んでいます。表の「ステージ全体の演出」の行は、まさにそこが問われる部分です。

4. シュナちゃんのコーナー🐾

  • Q. 結局、この技術で何が変わるの?
    A. ひとことで言うと、「見たい映像を自分で探さなくてよくなる」ことなんだワン! 推しのアップとステージ全体を、AIがいい感じに組み合わせてくれるワン。
  • Q. 音響XRって何をするワン?
    A. NTTの音響技術のことだワン。体験デモでは、この映像技術と組み合わせて展示される予定なんだワン。詳しい仕組みはまだ分からないけど、僕なら映像だけじゃなくて音の臨場感も楽しみたいワン!

5. 今後どう向き合うか

ドコモは、この技術の高度化を進めながら、音楽ライブにとどめず、スポーツ観戦やXR/ARグラスでの視聴への応用も検討しています。将来は、6G時代に求められる大容量・低遅延通信を使って、多数のユーザーへ一人ひとりの嗜好に合わせた映像と音響を届けることを見据えています。

私は、スポーツでの応用がいちばん面白そうだと思います。好きな選手のアップと試合全体の流れは、どちらも見たいのに両立しづらいからです。ただ、スポーツは次の展開が読めないぶん、AIの判断がどこまで追いつけるかは気になるところです。

自動で映像を選ばれることへの抵抗感は、精度しだいで変わると考えています。私自身は、技術の精度があがれば完全にお任せでいいと思っています。裏を返せば、精度が足りないうちは、手動で直せる逃げ道がないと不安が残る、ということでもあります。

読者としては、まず「自分は配信で何を見ていたいのか」を意識しておくのがよさそうです。推しのアップが中心なのか、全体の演出も味わいたいのか。その好みが、こうした技術の設定項目になる時代が近づいているのかもしれません。

編集後記

10点満点なら、5点くらいというのが正直なところです。スポーツ観戦で出番がありそうな技術だとは思うものの、期待よりも心配のほうが大きいからです。

気がかりなのは、AIの判断が自分の見たい場面に合うかどうかです。まずは、いつ使えるようになるのかを知りたいです。続報を待ちたいと思います。

PR

この記事が気に入ったら
フォローしてね!

よかったらシェアしてね!
  • URLをコピーしました!
  • URLをコピーしました!
目次