🚀Meta FAIRの新機能:本日は、対人関係のダイナミクスのモデリングに特化した研究プロジェクトであるSeamless Interactionをご紹介します。 このプロジェクトは、MetaのCodec Avatars lab + Core AIラボと共同で開発された視聴覚行動モデルのファミリーを特徴としており、2人の個人間の会話を多様で表現力豊かな全身ジェスチャーとアクティブなリスニング行動に変換し、2Dおよび3Dで完全に具現化されたアバターの作成を可能にします。 これらのモデルは、さまざまな環境で人間のような社会的相互作用に参加できる、より自然でインタラクティブな仮想エージェントを作成する可能性を秘めています。 詳細情報：

また、4,000+人の参加者と4,000+時間のインタラクションを含むSeamless Interaction Datasetも公開しており、この種のビデオデータセットとしては最大規模となっています。 このデータセットは、視聴覚行動モデルが人間のような社会的行動を理解し、生成することを可能にし、人々が一緒にいるときにどのようにコミュニケーションを取り、行動するかを理解し、モデル化するための重要な足がかりとなります。 ここでは、研究コミュニティが研究を進めるのを支援するために、この翻訳を共有しています。

もう一つ。。。また、このテクニカル レポートでは、データセット上にモーション モデルを構築するための方法論と、このタイプのモデルの評価フレームワークについて詳しく説明しています。

私たちのブログにアクセスして、全文を詳しく見てください。