Monsters Aliens Robots Zombies (MARZ)は、さまざまな業界のプロのコンテンツ制作者を対象とした、現在プライベートベータ版のLipDub AI™ ソフトウェアを発表した。このプラットフォームは、ビデオを自動的にダビングおよびリップシンクして世界中の視聴者に対応するビデオローカリゼーション ソリューションを提供し、高品質で表現力豊かな結果を迅速に約束する。

LipDub AI™ テクノロジーは、コンテンツローカリゼーションのための信頼できる高品質なツールを求めるハリウッドのスタジオ、広告主、マーケティング担当者、オンライン教育者などのニーズを満たすように設計されている。このソフトウェアは完全に自動化されたワークフローを備えており、クリエイターはVFXアーティストの介入を必要とせずに、ビデオをあらゆる言語にすばやくダビングしたりリップシンクしたりできる。

LipDub AI™ は、消費者向けアプリケーションとは異なり、複数のキャラクターのシーンや動的な照明などの複雑なビデオシナリオを処理できる。また、長いビデオのローカリゼーションを一度に行うことができ、オリジナルの声優の音声かAIが生成した音声のどちらかを選択できるようになり、全て高忠実度を維持し、AIアーティファクトを回避できる。

LipDub AI™ の背後にある革新は、主任研究員のダニエル・コーエン・オーと同僚のアリ・マハダヴィ・アミリが率いるMARZの機械学習専門家とVFX専門家とのコラボレーションから生まれました。LipDub AI™ のベータ版へのアクセスは現在独占的であり、興味のある人は順番待ちリストに参加し、プラットフォームで使用するクレジットを購入するよう招待されている。

出典:プレスリリース