🚀Novidade da Meta FAIR: hoje estamos apresentando o Seamless Interaction, um projeto de pesquisa dedicado à modelagem da dinâmica interpessoal. O projeto apresenta uma família de modelos comportamentais audiovisuais, desenvolvidos em colaboração com o laboratório Codec Avatars + Core AI lab da Meta, que renderizam a fala entre dois indivíduos em gestos diversos e expressivos de corpo inteiro e comportamentos de escuta ativa, permitindo a criação de avatares totalmente incorporados em 2D e 3D. Esses modelos têm potencial para criar agentes virtuais mais naturais e interativos que podem se envolver em interações sociais semelhantes às humanas em uma variedade de configurações. Saiba Mais:

Também estamos lançando publicamente o conjunto de dados de interação contínua, com 4.000+ participantes e 4.000+ horas de interações, tornando-o o maior conjunto de dados de vídeo conhecido desse tipo. Esse conjunto de dados permite que nossos modelos comportamentais audiovisuais entendam e gerem comportamentos sociais semelhantes aos humanos e representa um trampolim crucial para entender e modelar como as pessoas se comunicam e se comportam quando estão juntas. Estamos compartilhando aqui para ajudar a comunidade de pesquisa a avançar em seu trabalho:

Mais uma coisa... Você também pode conferir este relatório técnico detalhando nossa metodologia para construir modelos de movimento no conjunto de dados, juntamente com uma estrutura de avaliação para esse tipo de modelo:

Acesse nosso blog para se aprofundar na história completa: