VRoidモデルを使った配信では、VSeeFaceの音声リップシンクによって話者の口の動きを自然に再現できます。しかし、ゲーム配信をしているとゲーム内キャラクターのセリフやBGM、配信ソフト経由の音声まで拾ってしまい、意図しないタイミングでアバターの口が動くことがあります。この記事では、VSeeFaceでゲーム音に反応してしまう原因と、自分のマイク音声だけでリップシンクさせるための設定方法を解説します。
VSeeFaceの口がゲーム音で動く主な原因
VSeeFaceの音声リップシンクは、指定した入力デバイスから取得した音声の大きさや特徴をもとに口の動きを生成しています。そのため、マイクではなくゲーム音や配信ミックス音声が入力されている場合、ゲームキャラクターの声にも反応します。
特にオーディオインターフェースを使用している場合、設定によってはマイク音声とPC音声が混ざった状態でVSeeFaceに送られることがあります。YAMAHA AG03MK2のようなミキサーでは、出力設定によって複数の音源が一つの入力として扱われる場合があります。
今回のようにPS5のゲーム音声をキャプチャーボード経由で取り込み、OBSで配信している環境では、VSeeFaceがゲーム音を含んだ音声ラインを参照している可能性があります。
VSeeFaceのマイク入力設定を確認する
まず確認したいのは、VSeeFaceで選択している音声入力デバイスです。VSeeFaceの設定画面にあるマイク入力が、本当に自分の声だけが入るマイクになっているか確認します。
例えば、現在「Line (Yamaha AG03MK2)」を選択している場合、そのLine入力がミックスされた音声を送る設定になっていると、ゲーム音もVSeeFaceへ届いてしまいます。
リップシンク専用にする場合は、可能であればAG03に接続しているマイク単体の入力を選択してください。Windowsのサウンド設定からも、使用するマイクが単独の入力デバイスとして認識されているか確認できます。
YAMAHA AG03MK2のSTREAMING OUT設定を見直す
AG03MK2を使用している場合、STREAMING OUTの設定は重要なポイントです。INPUT MIXでは、マイク音声だけでなく、PC音声やAUX入力など複数の音が混ざった状態で出力されます。
配信では便利な設定ですが、VSeeFaceのリップシンク用入力として使う場合には、ゲーム音まで拾う原因になることがあります。
例えば、OBSにはミックスされた音声を送りたい場合でも、VSeeFaceにはマイク単体の入力を指定するというように、配信音声とリップシンク用音声を分ける設定がおすすめです。
OBS用音声とVSeeFace用マイクを分ける方法
VTuber配信では、OBSに送る音声とアバターを動かすための音声入力を別々に管理すると安定します。
具体的には、以下のような構成にするとゲーム音による誤作動を防ぎやすくなります。
- OBS：AG03のINPUT MIXなど配信用のミックス音声を使用
- VSeeFace：自分のマイクだけが入力されるデバイスを使用
- ゲーム音：キャプチャーボードまたはOBSだけで管理
このように役割を分けることで、配信にはゲーム音を入れつつ、VRoidモデルの口だけは自分の声に反応させることができます。
VSeeFace側のリップシンク設定で確認する項目
VSeeFaceには複数のリップシンク方式があります。「音声リップシンク」「フルリップシンクアニメーション」「ハイブリッド音声リップシンク」などは、入力された音声を元に口の動きを作成する機能です。
これらの機能を有効にしていても、入力される音声自体がゲーム音を含んでいれば、ゲームキャラクターの発話でも口が動いてしまいます。そのため、設定を増やすよりも先に入力音源を正しく分離することが重要です。
また、マイクの音量設定が低すぎる場合は、ゲーム音のほうが大きく認識されやすくなることがあります。Windows側のマイク音量やAG03のゲインも確認すると改善する場合があります。
よくある改善例とチェック手順
例えば、PS5配信中にゲームキャラクターが話すたびにVRoidモデルが口を動かす場合、以下の順番で確認すると原因を特定しやすくなります。
- VSeeFaceの入力デバイスを確認する
- Windowsのサウンド設定で入力されている音声を確認する
- AG03のSTREAMING OUT設定を確認する
- ゲーム音を一時的にOFFにしてVSeeFaceの反応を見る
- マイク単体入力へ変更して改善するか確認する
ゲーム音を消すと問題が解決する場合は、ほぼ確実にVSeeFaceへゲーム音が入力されています。入力デバイスを分離することで改善できます。
まとめ
VSeeFaceでVRoidモデルの口がゲームキャラクターの声に合わせて動いてしまう場合、原因の多くはリップシンク用の音声入力にゲーム音が混ざっていることです。
YAMAHA AG03MK2のINPUT MIX設定は配信には便利ですが、VSeeFaceのリップシンク入力として使う場合は注意が必要です。OBS用の音声とVSeeFace用のマイク入力を分けることで、自分の声だけに反応する自然なリップシンクを実現できます。
VTuber配信では、映像トラッキング・配信音声・リップシンク用音声をそれぞれ適切に分離することが、安定した配信環境を作るポイントになります。
コメント