キャラクターモデラー
顔のメッシュはすでにありますが、すべてのショットで口がニュートラルなままです。閉じた唇、開いた母音、横に広い母音、丸めた口のシェイプキーを追加し、各ポーズでジオメトリが引き伸ばされないかテストします。
顔に短いリップシンク演技で再利用できるコントロールが備わり、音ごとに別のメッシュを用意する必要がなくなります。
リップシンク動画の作成方法アニメーションチュートリアル
3Dまたは2DキャラクターでBlenderのリップシンクを作る方法
Blenderでリップシンクを作る方法を学ぶには、まず実際に手元にあるキャラクターから始めましょう。可動するジオメトリを持つ3Dの顔か、口の描き分けがある2Dアートのどちらかです。どちらの方法でも、明瞭な音声、意図的に作った口のポーズ、最後のタイミング確認が重要になります。このガイドではBlenderで行うアニメーション作業を扱います。下の動画プロンプトは、話すキャラクターのコンセプトを別の方法で試すためのものです。
パートナーワークフロー：Vidioneでは、ログインしてサブスクリプションに登録すると、写真・台本・音声から有料のトーキングアバター動画を作成できます。または、AIによる単一の動画ショットを生成できます。すでに録画された動画の音声やリップシンクは変更できません。これらのリンクによって映像やプロンプトが転送されることはありません。
シーンを説明する
Vidioneでは、ログインしてサブスクリプションに登録すると、写真・台本・音声からトーキングアバターを生成できます。既存の動画を再ダビングすることはできません。このガイドによって映像やプロンプトが転送されることはありません。
別の動画サービスを開く
トーキングアバターを作成する
自分がどのケースに当てはまるかを判断する
完成した動画のスタイルではなく、口がどのように作られているかで方法を選びましょう。録音された音声ラインがあれば、どちらの方法でもタイミングの基準になります。
方法A 3Dの顔にシェイプキーを設定する
使いやすい口のトポロジーを持つメッシュで、ニュートラルなBasisシェイプキーと、いくつかのはっきり異なる発話ポーズを作成します。音声録音に合わせて、それぞれのValueスライダーにキーフレームを設定します。
短編映画のアニメーター
完成した音声ラインがあり、ミディアムショットで読みやすい会話を必要としています。音声をタイムラインに配置し、短い区切りで聞きながら、聞こえる子音や母音のピーク付近で口の変化にキーフレームを打ちます。
リップシンクは、すべての文字に固有の口のポーズを割り当てなくても、録音に沿って動きます。
リップシンク動画の作り方会話の演者
アニメーションの演技を機械的ではないものにしたいと考えています。まずセリフを声に出して言い、あごが止まる場所、唇が閉じる場所、キャラクターが息を吸う場所に注意します。
タイミングの選択が、音素ラベルの単なる連続ではなく、演技を反映するようになります。
インタビュー用のリップシンクを練習する方法ソロクリエイター
スタイライズされたアバター用に、自分でガイド音声を録音しています。リグを組み立てる間は話すセリフを短く保ち、その後、通常の再生速度で音声と口の動きを確認します。
長いシーンをアニメーション化する前に、明らかなリップシンクのずれを修正できます。
インタビュー用のリップシンクを練習する方法パスB 2Dアート用の口のフレーム切り替え
キャラクターがモデリングではなく描画で作られている場合は、位置とスケールを統一した口の画像をいくつか用意します。音声の再生に合わせて、表示する描画を切り替えます。
口のセットを準備する
閉じた口、力の抜けた開いた口、口を大きく開いた母音用の形、丸めた形を描きます。描画間であごと口角の位置を揃え、顔が飛び跳ねるのではなく、会話として切り替わって見えるようにします。これらをBlenderで選択した2Dセットアップに読み込み、意図した口だけが表示されることを確認します。
音声のビートをマークする
録音したセリフを編集タイムラインに追加し、繰り返し聞きます。強い音節、唇が閉じる箇所、短い無音をマークします。リップシンクでは、視聴者に見える音を優先します。M、B、Pなどの音では唇を閉じ、その後の母音で明確に開きます。
切り替えてプレビューする
2Dキャラクターの構成に応じて、マークしたビートで表示のキーフレームを打つか、描画フレームを切り替えます。孤立したフレームを見て判断するのではなく、通常の速度でプレビューします。短い母音で自然に見える場合はポーズを維持し、絶えず切り替えるのではなく、間では安静時の口に戻します。
最終チェック レンダリング前に2つのパスを比較する
どちらの方法も、それだけで説得力のある会話を作れるわけではありません。書き出した動画で、ポーズの明瞭さ、タイミング、音声を確認します。
3Dシェイプキーのパス
2D口切り替えのパス
1
開始アセット
3Dシェイプキーパス
きれいに変形できる口のジオメトリを備えたメッシュ。
2D口差し替えパス
1つの顔上で位置が揃う、個別の口の作画または描画可能なフレーム。
2
ポーズ制御
3Dシェイプキーパス
シェイプキーのValueプロパティをアニメーション化し、ポーズを慎重に組み合わせます。
2D口差し替えパス
発話の各タイミングで、どの口の作画を表示するか選択します。
3
最初に行う最も有用なテスト
3Dシェイプキーパス
開いたポーズと閉じたポーズで、唇や歯がつぶれないことを確認します。
2D口差し替えパス
作画間で口の位置が固定されていることを確認します。
4
タイミングの基準
3Dシェイプキーパス
録音音声で、唇を閉じる音や目立つ母音を聞き取ります。
2D口差し替えパス
同じ聞き取れるタイミングを使って、フレームの変更位置を決めます。
5
よくあるリップシンクのエラー
3Dシェイプキーパス
複数のキーがアクティブなままになり、意図しない混合された口になります。
2D口差し替えパス
タイミングが正確でも、素早く差し替えると発話がちらついて見えます。
6
エクスポート前
3Dシェイプキー方式
最初に発した音から、通常の速度でショットを再生します。
2D口替え方式
最初に発した音から、通常の速度でショットを再生します。
7
エクスポート後
3Dシェイプキー方式
レンダリングしたファイルを開き、音声と映像が一致していることを確認します。
2D口替え方式
レンダリングしたファイルを開き、音声と映像が一致していることを確認します。
このワークフローで修正できないこと
良好なリップシンクには、扱いやすいキャラクターと信頼できる録音が必要です。口のアニメーションだけでは、ショット内のほかの問題を修正できません。
- フェイシャルリグは作成できません
-
シェイプキーには、表情を読み取れる形にできるメッシュが必要です。正確なキーフレームを設定しても、口の位置が悪かったり、歯が交差していたりすると、見た目が不自然になることがあります。
回避策モデルを修正し、セリフのタイミングを調整する前に、口の極端なポーズをテストします。
- ノイズの多い音声はクリーンアップできません
-
背景音によって、特定に必要な子音が聞き取りにくくなることがあります。位置を推測すると、リップシンクの確認が難しくなります。
回避策より明瞭な音声を録音するか、アニメーションを作成する前に音声をクリーンアップします。
- エクスポート時の音声を保証することはできません
-
編集中に音が聞こえていても、レンダリングしたファイルに音声が含まれているとは限りません。レンダー設定と音声設定は、それぞれ確認する必要があります。
回避策シーン全体をレンダリングする前に、短いテストを書き出し、Blenderの外で生成されたファイルを再生します。
- すべての音素を見える形にできるわけではありません
-
多くの発話音は、特にカメラが遠い場合、口の形が似て見えます。音ごとに異なるポーズを作ろうとすると、顔が小刻みに動いて不自然になることがあります。
対処法読み取りやすい閉じ口、母音、間、そして演技全体のリズムを重視しましょう。
アイデアをBlenderのタイムラインの先へ広げる
話すキャラクターの動画コンセプトを探る
Blenderのリップシンクワークフローでは、既存のキャラクターの口のアニメーションを直接コントロールできます。別の動画コンセプトを検討している場合は、Lipsyncの動画サービスへのリンクを通じて、調べたい話者、画面構成、セリフを説明してください。Blenderでのリギングやアニメーションの代替として扱う前に、そのサービスの現在の機能を確認しましょう。
- キャラクターの口が見える状態にする
- 短いセリフを1つ用意する
- 完成した動画と音声を一緒に確認する
チュートリアルFAQ
音声録音を読み込むか準備し、キャラクター用に読み取りやすい口のポーズをいくつか作ります。3Dメッシュではシェイプキーをアニメーションさせ、2Dキャラクターでは口の絵を切り替え、聞こえる発話のビートに合わせて変化を配置します。通常の速度でプレビューし、音声付きで書き出した動画を確認しましょう。
いいえ。効果的なリップシンクでは、多くの音を少数の見える口のポーズにまとめます。明確な閉じ口、開いた母音、休止は、通常、書かれた文字を一つずつ一致させることより重要です。
セリフ全体に一定のオフセットを適用するのではなく、録音を基準にしてください。唇が実際に閉じる必要のある箇所に閉じ口を配置し、その後の母音へ開いていく動きをプレビューします。再生速度で目と耳を使って調整しましょう。
はい。口の絵を位置合わせして準備し、キャラクターが話すのに合わせて表示する絵やフレームを切り替えます。具体的な操作方法は2Dキャラクターの作り方によって異なりますが、タイミングの確認と再生時のチェックは同じです。
まず、Blenderの外で書き出したファイルを再生し、想定した音声が含まれていることを確認します。音声が入っている場合は、アニメーションのタイムラインと音声の開始位置やタイミングを比較し、レンダーのフレームレートと、再度書き出す前に音声ストリップへ加えた変更を確認してください。