Meta AIはリップシンク翻訳とジュディ・デンチやジョン・シナのような有名人の声を取得

Meta の AI アシスタント、Meta AI に、新たな音声モードが追加されます。

水曜日の朝、メンロパークで開催された開発者会議「Meta Connect 2024」において、MetaはMeta AIがInstagram、Messenger、WhatsApp、Facebookといった対応プラットフォームで、音声による質問への返答が可能になったと発表しました。Metaがこの目的のために採用した著名人のAIクローン（オークワフィナ、ジュディ・デンチ、ジョン・シナ、キーガン＝マイケル・キー、クリステン・ベル）を含む複数の音声から選択できます。

新しいMeta AI音声機能は、OpenAIのChatGPT向けAdvanced Voice Modeとは異なります。OpenAIのChatGPT向けAdvanced Voice Modeは、非常に表現力豊かで、人の声の感情的なトーンを拾うことができます。むしろ、Googleが最近リリースしたGemini Liveに似ています。Gemini Liveは、音声を書き起こしてからAIが回答し、合成音声で読み上げます。

Metaは、著名人の起用が変化をもたらすと確信しています。ウォール・ストリート・ジャーナルによると、Metaは著名人の肖像の使用料として数百万ドルを支払ったとのことです。私たちは懐疑的ですが、実際に試してみるまでは判断を保留します。

Meta AIのその他のアップデートでは、アシスタントの基盤となるAIモデルのアップグレードにより、画像分析が可能になりました。対応地域では、例えば、見かけた花の写真を共有して、Meta AIに種類を尋ねたり、料理の写真をアップロードして作り方を尋ねたりすることができます。（ただし、時折間違った答えが返ってくる場合があることをご承知おきください。）

Metaはまた、Instagram Reelsの音声を自動翻訳するMeta AI翻訳ツールの試験運用も開始したと発表しました。このツールは、クリエイターのスピーチを吹き替え、自動的にリップシンクを行い、別の言語での声のシミュレーションと唇の動きの一致を確認します。

Metaは、InstagramとFacebookでReelsの翻訳の「小規模なテスト」を開始しており、現時点では米国ではラテンアメリカの一部のクリエイターの動画のみを英語とスペイン語で配信しているという。