Embody 3D: Um Grande Conjunto de Dados Multimodal de Movimento e Comportamento
Embody 3D: A Large-scale Multimodal Motion and Behavior Dataset
October 17, 2025
Autores: Claire McLean, Makenzie Meendering, Tristan Swartz, Orri Gabbay, Alexandra Olsen, Rachel Jacobs, Nicholas Rosen, Philippe de Bree, Tony Garcia, Gadsden Merrill, Jake Sandakly, Julia Buffalini, Neham Jain, Steven Krenn, Moneish Kumar, Dejan Markovic, Evonne Ng, Fabian Prada, Andrew Saba, Siwei Zhang, Vasu Agrawal, Tim Godisart, Alexander Richard, Michael Zollhoefer
cs.AI
Resumo
O Laboratório de Avatares Codec da Meta apresenta o Embody 3D, um conjunto de dados multimodal que contém 500 horas individuais de dados de movimento 3D de 439 participantes, coletados em um ambiente com múltiplas câmeras, totalizando mais de 54 milhões de quadros de movimento 3D rastreados. O conjunto de dados abrange uma ampla variedade de movimentos individuais, incluindo movimentos induzidos, gestos manuais e locomoção, além de dados comportamentais e conversacionais envolvendo múltiplas pessoas, como discussões, conversas em diferentes estados emocionais, atividades colaborativas e cenários de convivência em um espaço semelhante a um apartamento. Fornecemos o movimento humano rastreado, incluindo o rastreamento das mãos e a forma do corpo, anotações textuais e uma trilha de áudio separada para cada participante.
English
The Codec Avatars Lab at Meta introduces Embody 3D, a multimodal dataset of
500 individual hours of 3D motion data from 439 participants collected in a
multi-camera collection stage, amounting to over 54 million frames of tracked
3D motion. The dataset features a wide range of single-person motion data,
including prompted motions, hand gestures, and locomotion; as well as
multi-person behavioral and conversational data like discussions, conversations
in different emotional states, collaborative activities, and co-living
scenarios in an apartment-like space. We provide tracked human motion including
hand tracking and body shape, text annotations, and a separate audio track for
each participant.