🚀Novedades de Meta FAIR: hoy presentamos Seamless Interaction, un proyecto de investigación dedicado a modelar las dinámicas interpersonales. El proyecto cuenta con una familia de modelos de comportamiento audiovisual, desarrollados en colaboración con el laboratorio Codec Avatars + Core AI de Meta, que convierten el habla entre dos individuos en gestos diversos y expresivos de cuerpo completo y comportamientos de escucha activa, lo que permite la creación de avatares totalmente incorporados en 2D y 3D. Estos modelos tienen el potencial de crear agentes virtuales más naturales e interactivos que pueden participar en interacciones sociales similares a las humanas en una variedad de entornos. Aprende más:

También estamos lanzando públicamente el conjunto de datos de interacción sin interrupciones, con 4,000+ participantes y 4,000+ horas de interacciones, lo que lo convierte en el conjunto de datos de video más grande conocido de su tipo. Este conjunto de datos permite que nuestros modelos de comportamiento audiovisual comprendan y generen comportamientos sociales similares a los humanos, y representa un trampolín crucial para comprender y modelar cómo se comunican y se comportan las personas cuando están juntas. Lo compartimos aquí para ayudar a la comunidad investigadora a avanzar en su trabajo:

Una cosa más... También puedes consultar este informe técnico que detalla nuestra metodología para construir modelos de movimiento en el conjunto de datos, junto con un marco de evaluación para este tipo de modelos:

Dirígete a nuestro blog para profundizar en la historia completa: