from Create Realistic Avatars from Audio Using Meta’s Audio2Photoreal.
Meta AIが開発した「Audio2Photoreal」という技術は、音声入力からリアルな3Dアバターを生成することができます。このオープンソースプロジェクトは、音声に合わせた顔の表情や身体の動きを再現することが可能で、複数人の会話においてもそれぞれのキャラクターをリアルに表現します。この技術は、音声データからカスタムキャラクターアバターを生成したり、歴史上の人物の音声からリアルなバーチャルイメージを合成したり、3Dゲームやバーチャル空間でのキャラクターボイスアクティングに適応させたりするなど、様々な用途に応用可能です。開発者やクリエイターは、提供された音声データを入力することで、リアルな人間のアバターを生成することができます。この技術は、音声と視覚合成の可能性を広げるものとして、バーチャルインタラクションを革新する可能性を秘めています。