【AIリップシンク】AIの口パク、ここまで来てるの？3つの検証で見えたリアル

私が興味をもっているAI技術の1つにリップシンク（Lip Sync）があります。

リップシンク（Lip Sync）とは？

音声（話し声・歌声）に合わせて、キャラクターや人物の口の動きを同期させる技術のことです。

💎その前にちょこっとご紹介💎

音楽企画が4月29日30日メインで行われます✨
私も運営で携わることになりました！

新曲でも過去曲でも、アレンジでも歌詞の1部でもOKです🌸
詳細は私も4月8日(水)あたりに公開予定ですが、
ちょこっとでも興味があれば、ぜひご参加くださいヾ(≧▽≦)ﾉ

ご本人様顔出しか！？と衝撃を受けた告知
これもリップシンクのようでビックリしてしまいましたΣ(ﾟДﾟ)

それでは本編へ

リップシンク（Lip Sync）は2026年に一気に技術が加速したような印象を受けました。

特徴：

• ほぼリアル人間レベルの口の動き

• 表情・感情・視線まで連動

• 多言語対応（英語→日本語でも自然になってきている）
  ※日本語は相当難しいようです。

• 既存動画の口パク修正も可能

できること：

• 画像1枚から自然に喋らせる

• 歌唱リップシンク（音程・リズム対応）

• 実在人物のようなAIアバター生成

• 映画レベルの吹き替え調整

最近検証したのがこちら▼

10秒ほどの動画でその技術を確認✨

検証には以下のセリフを使用しました！

働くことを選択しなくていいなら、人は何に時間を使うだろうか？
AI時代の新しい問いになるようです✨

【検証1】

私にとっては驚愕のレベルでした。
モデルはSeedance2.0です。

えっΣ(ﾟДﾟ)
もう本当にこんなにリップシンクって進んでいるの？

【検証2】

そこでPolloAIのキャンペーンでいただいたクレジットを使用しAIアバターで比較検証

か…カタコトの日本語と2046年言いづらい...？
でも筋肉の動きは違和感がなくなってきている気がします。

リップシンク参考動画

さらにリップシンクで参考にしている方が
某界隈では有名な動画クリエイター様です！

クリエイター様を次々と動画世界へ。
二次元ではなく3Dキャラがイキイキと話す、動く、踊る✨

メインはGrokを使用されているそうですが、本当に凄い💦

はんく・シュンタナさん

でもやっぱり人のあたたかみのある声…いいですよね✨

DAIさん

これが初デビュー✨凄いなぁ。

いかがだったでしょうか？

音声に合わせた筋肉の動きが精密になってきたように思います。
人間の自然な息つぎなど習得されたら本気で区別がつかなくなりそうですね💦

AI・ロボットの関連記事はこちら