🚀Nou de la Meta FAIR: astăzi vă prezentăm Seamless Interaction, un proiect de cercetare dedicat modelării dinamicii interpersonale. Proiectul prezintă o familie de modele comportamentale audiovizuale, dezvoltate în colaborare cu laboratorul Codec Avatars + Core AI de la Meta, care redau vorbirea dintre doi indivizi în gesturi diverse, expresive ale întregului corp și comportamente de ascultare activă, permițând crearea de avatare complet încorporate în 2D și 3D. Aceste modele au potențialul de a crea agenți virtuali mai naturali, interactivi, care se pot angaja în interacțiuni sociale asemănătoare oamenilor într-o varietate de setări. Află mai multe:

De asemenea, lansăm public Setul de date de interacțiune fără întreruperi, cu 4.000+ participanți și 4.000+ ore de interacțiuni, făcându-l cel mai mare set de date video cunoscut de acest gen. Acest set de date permite modelelor noastre comportamentale audiovizuale să înțeleagă și să genereze comportamente sociale asemănătoare oamenilor și reprezintă o piatră de temelie crucială pentru înțelegerea și modelarea modului în care oamenii comunică și se comportă atunci când sunt împreună. Îl împărtășim aici pentru a ajuta comunitatea de cercetare să-și avanseze munca:

Încă ceva... De asemenea, puteți consulta acest raport tehnic care detaliază metodologia noastră de a construi modele de mișcare pe setul de date, împreună cu un cadru de evaluare pentru acest tip de model:

Accesați blogul nostru pentru a aprofunda povestea completă: