🚀Novinka od Meta FAIR: dnes představujeme Seamless Interaction, výzkumný projekt věnovaný modelování mezilidské dynamiky. Projekt představuje rodinu audiovizuálních behaviorálních modelů vyvinutých ve spolupráci s laboratoří Codec Avatars společnosti Meta + laboratoří Core AI, které přeměňují řeč mezi dvěma jednotlivci na různorodá, expresivní gesta celého těla a aktivní chování při naslouchání, což umožňuje vytvářet plně ztělesněné avatary ve 2D a 3D. Tyto modely mají potenciál vytvořit přirozenější, interaktivnější virtuální agenty, kteří se mohou zapojit do sociálních interakcí podobných lidem v různých prostředích. Víc se uč:

Veřejně také vydáváme datovou sadu Seamless Interaction Dataset se 4 000+ účastníky a 4 000+ hodinami interakcí, což z ní činí největší známou video datovou sadu svého druhu. Tato datová sada umožňuje našim audiovizuálním behaviorálním modelům pochopit a generovat sociální chování podobné lidskému a představuje zásadní odrazový můstek k pochopení a modelování toho, jak lidé komunikují a chovají se, když jsou spolu. Sdílíme je zde, abychom pomohli výzkumné komunitě pokročit v jejich práci:

Ještě jedna věc... Můžete se také podívat na tuto technickou zprávu s podrobnostmi o naší metodologii vytváření pohybových modelů na datové sadě spolu s vyhodnocovacím rámcem pro tento typ modelu:

Zamiřte na náš blog a podívejte se hlouběji na celý příběh: