エミー賞にノミネートされた視覚効果 （VFX） スタジオおよびAIテクノロジーのスタートアップであるMARZは本日、吹き替え業界に革命を起こす最先端のリップシンクソリューションであるLipDub AIの立ち上げを発表しました。LipDub AIは、ハリウッド級の結果を実現する世界初の完全自動リップシンクテクノロジーです。市場をリードするビジュアル品質とスケーラビリティを実現し、1分間のビデオ映像を数秒以内に任意の言語に変換できます。LipDub AIは20分未満の計算時間でハリウッドグレードの出力を提供します。「LipDub AIは吹き替え業界にとって大きな変革をもたらすものです」とMARZのCEO、ジョナサンブロンフマンは述べています。 「可能な限り最高品質のリップシンクを提供し、従来の吹き替え方法の数分の一のコストでそれを実現します。」LipDub AIは、俳優の唇の動きと表情を分析して、完全に同期したリップシンクを作成する独自の深層学習アルゴリズムを利用しています。このアルゴリズムは、ハリウッドの映画やテレビ番組の膨大なデータセットでトレーニングされており、あらゆる言語に正確にリップシンクできます。高品質のリップシンクに加えて、LipDub AIは拡張性も非常に優れています。1分間のビデオ映像をわずか数秒で処理できるため、最長の映画やテレビ番組でも数時間でダビングできます。このため、LipDub AIは、コンテンツを迅速かつ簡単に複数の言語に吹き替える必要があるスタジオや放送局に最適です。「LipDub AIは吹き替えの未来です」とMARZの主任研究員であるダニー・コーエン・オー氏は述べています。 「これは、誰もが買える価格でハリウッド級のリップシンクを実現できる初のテクノロジーです。」LipDub AIは現在ベータテストに利用できます。