🚀Nuovo da Meta FAIR: oggi introduciamo Seamless Interaction, un progetto di ricerca dedicato alla modellazione delle dinamiche interpersonali. Il progetto presenta una famiglia di modelli comportamentali audiovisivi, sviluppati in collaborazione con il laboratorio Codec Avatars di Meta + il laboratorio Core AI, che traducono il discorso tra due individui in gesti corporei espressivi e comportamenti di ascolto attivo, consentendo la creazione di avatar completamente incarnati in 2D e 3D. Questi modelli hanno il potenziale di creare agenti virtuali più naturali e interattivi che possono impegnarsi in interazioni sociali simili a quelle umane in una varietà di contesti. Scopri di più:

Stiamo anche rilasciando pubblicamente il Seamless Interaction Dataset, con oltre 4.000 partecipanti e oltre 4.000 ore di interazioni, rendendolo il più grande dataset video conosciuto del suo genere. Questo dataset consente ai nostri modelli comportamentali audiovisivi di comprendere e generare comportamenti sociali simili a quelli umani, e rappresenta un passo cruciale per comprendere e modellare come le persone comunicano e si comportano quando sono insieme. Lo condividiamo qui per aiutare la comunità di ricerca a far progredire il proprio lavoro:

Un'altra cosa... puoi anche dare un'occhiata a questo rapporto tecnico che dettaglia la nostra metodologia per costruire modelli di movimento sul dataset, insieme a un framework di valutazione per questo tipo di modello:

Visita il nostro blog per approfondire l'intera storia: