🚀Nowość od Meta FAIR: dzisiaj wprowadzamy Seamless Interaction, projekt badawczy poświęcony modelowaniu dynamiki interpersonalnej. Projekt obejmuje rodzinę audiowizualnych modeli behawioralnych, opracowanych we współpracy z laboratorium Codec Avatars Meta oraz laboratorium Core AI, które przekształcają mowę między dwiema osobami w różnorodne, ekspresywne gesty całego ciała oraz zachowania aktywnego słuchania, umożliwiając tworzenie w pełni uosobionych awatarów w 2D i 3D. Modele te mają potencjał do tworzenia bardziej naturalnych, interaktywnych wirtualnych agentów, które mogą angażować się w ludzkie interakcje społeczne w różnych kontekstach. Dowiedz się więcej:

Publicznie udostępniamy również Zbiór Danych Seamless Interaction, z ponad 4000 uczestników i ponad 4000 godzin interakcji, co czyni go największym znanym zbiorem wideo tego typu. Ten zbiór danych umożliwia naszym audiowizualnym modelom behawioralnym zrozumienie i generowanie ludzkich zachowań społecznych, a także stanowi kluczowy krok w kierunku zrozumienia i modelowania, jak ludzie komunikują się i zachowują, gdy są razem. Udostępniamy go tutaj, aby pomóc społeczności badawczej w postępach w ich pracy:

Jeszcze jedna rzecz… możesz również zapoznać się z tym raportem technicznym, który szczegółowo opisuje naszą metodologię budowy modeli ruchu na podstawie zbioru danych, wraz z ramami oceny dla tego typu modelu:

Przejdź do naszego bloga, aby zgłębić pełną historię: