VTuberのリアルライブでは、モーションキャプチャーを別室で行い、その映像を舞台の大型スクリーンに投影するという方法が一般的です。しかし、現地でのライブ映像を多角度から配信するとき、特定の角度ではライバー本人の姿がスクリーンに映らず、影だけが表示されることがあります。ここでは、その仕組みについて推測を交えて解説します。
ライブ会場での映像とスタジオ映像の合成
多角度カメラ映像では、会場カメラの座標とスタジオのAR映像をリアルタイムで同期させ、合成しています。ライバーのモーションキャプチャーデータは、CGとして背景映像の前に重ねられる形で表示されます。
正面からの視点では、スクリーンに映るライバーの姿と影、さらに会場の環境が一体化して見えます。
横や斜めからの映像で本人が映らない理由
横や斜めの角度では、スクリーンに投影されたライバーの映像は、会場のスクリーンの透過や角度補正により見えなくなります。カメラは現地のスクリーンを撮影しますが、ライバーのCGは透過背景として合成され、スクリーン映像が重なると視覚的に本人が消えたように見えることがあります。
影は会場の照明に合わせてCG側で生成されるため、角度を変えても自然に表示されます。
リアルタイム合成の技術
無人の会場を事前撮影して背景を取得することもありますが、多くの場合は現地カメラ映像をリアルタイムで取り込み、AR映像と合成しています。これにより、観客や照明の変化、スクリーンの映像がリアルタイムで反映されます。
観客視点での理解
ライブ会場の最前列など、直接スクリーンを見る位置では、ライバーの映像と影、背景が一体となって表示されます。カメラ映像で見る角度とは異なる視覚体験となるのは、このためです。
まとめ
にじさんじなどのVTuberリアルライブでは、別室でキャプチャーしたモーションをリアルタイムでAR合成し、会場カメラ映像と同期させています。横や斜めの角度でライバーが映らないのは、CGの透過やスクリーン投影の角度補正による視覚効果であり、影や背景は適切に反映されます。会場で直接観覧すると、これらの映像処理の仕組みを体感することができます。
コメント