音声と撮影を準備する
まず、最終的に使用する話し声の音声を決めます。撮影する場合は、出演者がリズムに合わせられるよう、テイク中にその音声を再生してください。顔を十分に明るく照らし、手やマイク、激しい動きで唇を隠さないようにします。
モバイル動画ワークフロー
リップシンクアプリは作業の一部にすぎません。クリアな音声、顔が見える状態、そして丁寧な最終確認も重要です。編集方法を選ぶ前に、何を録画するかを決めておきましょう。
パートナーワークフロー:Vidioneでは、サインインして購読すると、写真、台本、音声から有料のトーキングアバター動画を作成できます。また、AIによる1本の動画ショットを作成することもできます。すでに録画した動画の音声や唇の動きを変更することはできません。これらのリンクを通じて映像素材やプロンプトが転送されることはありません。
Vidioneでは、サインインして購読すると、写真、台本、音声からトーキングアバターを生成できます。既存の動画を再録音することはできません。このガイドを通じて映像素材やプロンプトが転送されることはありません。
まずは、自分で管理できる素材から始めましょう。すでに動画があるのか、写真があるのか、それとも音声トラックだけがあるのかによって、適切なワークフローは異なります。
話者が1人の短いクリップには、この手順を使いましょう。編集を始める前に、選択したツールで実際に利用できる入力形式と書き出しオプションを確認してください。
まず、最終的に使用する話し声の音声を決めます。撮影する場合は、出演者がリズムに合わせられるよう、テイク中にその音声を再生してください。顔を十分に明るく照らし、手やマイク、激しい動きで唇を隠さないようにします。
選択したワークフローに映像と音声を読み込みます。最初にはっきり発音された単語を合わせ、その後のフレーズも確認してください。冒頭の位置合わせがクリップ全体で維持されるとは限りません。素材が静止画の場合は、ツールが動画ではなく写真に対応しているか確認しましょう。
まず、口の形が止まっていたり、誇張されていたりしないかを確認します。次に音声付きで再生し、子音、間、最後に発話された単語を確認します。クリップ全体でずれが繰り返される場合は、小さな修正を加えるか、より鮮明な素材を使ってください。
アプリベースの録画編集とAI支援ワークフローは、それぞれ異なる問題を解決します。完成したサムネイルだけでなく、手元にある素材と必要な調整の自由度を比較してください。
録画したパフォーマンスの編集
音声に合わせて演じている人物の動画。
AI支援アニメーション
ツールに応じて、対応している画像または動画素材。
録画したパフォーマンスの編集
既存のパフォーマンスをトリミングして位置を合わせる。
AI支援アニメーション
発話に合わせて、見える口の動きを作成または変更する。
録画したパフォーマンスの編集
演者がカメラに正面を向いた、明るく照らされたテイク。
AI支援アニメーション
遮るもののない明瞭な顔と、クリアな発話音声。
録画したパフォーマンスの編集
クリップと音声の配置を手動で調整する。
AI支援アニメーション
生成されたタイミングを確認し、必要に応じて入力内容を修正する。
録画パフォーマンスの編集
言葉を言い間違えたり、テンポが変わったりするパフォーマー。
AI支援アニメーション
難しい音の周辺で表情や動きが不自然になる。
録画パフォーマンスの編集
トリミング後、すべてのフレーズを確認します。
AI支援アニメーション
冒頭と末尾を含め、すべてのフレーズを確認します。
最も残念な結果の多くは、素材や想定している視聴環境に原因があります。これらの例を参考に、別のバージョンを作る前に確認すべき点をチェックしましょう。
テンポの速い編集で最初の単語は隠れますが、オチの部分では口の動きの遅れが目立ちます。
字幕を追加したり投稿したりする前に、通常の速度でオチの部分を確認してください。
リップシンク tiktok冒頭のセリフは合っていますが、長めのセグメントでは次第に音声が映像より先行します。
後半の文は個別に確認してください。最初の1秒が正確でも、クリップ全体が正しいとは限りません。
YouTube向けリップシンク静止した顔の一部が隠れており、口の周りに見える情報が少なすぎます。
写真ベースのワークフローを試す前に、より鮮明なポートレートを選んでください。
写真リップシンク動画メーカー音ごとに口の形は変わりますが、あごと表情は硬いままです。
個々の音節が合っているかだけでなく、パフォーマンス全体を確認しましょう。
リップシンクアニメーション音声と、顔がはっきり映った素材を用意してから、利用可能な動画ワークフローを試してみましょう。タイミングが合っているか判断する前に、完成した結果を最初から最後まで確認してください。
まずは入力形式の互換性を確認しましょう。録画した動画を使うワークフローもあれば、静止画のポートレートを受け付けるものもあります。フルクリップの作成に時間をかける前に、結果をどのように確認し、タイミングを修正し、書き出せるかを確認してください。
従来型のパフォーマンス編集では、はい。映像内のテイクは音声に近い形で追従する必要があります。AI支援のワークフローでは、代わりに適切な素材をアニメーション化できる場合もありますが、不自然な動きがないか結果を確認する必要があります。
動画と音声が冒頭部分だけで同期されていたか、演者のペースが変わった可能性があります。タイムライン上の複数のフレーズを確認し、最初の言葉だけで判断するのではなく、素材または編集を修正してください。
そのためには、写真入力に対応したワークフローが必要です。一般的な動画編集ソフトだけでは、静止画を自動的に話しているパフォーマンスに変換することはできません。顔がはっきり見え、遮られていないポートレートを使い、結果全体を通して口元とその周辺の表情を確認してください。