V-IRL: Fundamentando a Inteligência Virtual na Vida Real
V-IRL: Grounding Virtual Intelligence in Real Life
February 5, 2024
Autores: Jihan Yang, Runyu Ding, Ellis Brown, Xiaojuan Qi, Saining Xie
cs.AI
Resumo
Existe um abismo sensorial entre a Terra que os humanos habitam e os domínios digitais nos quais os agentes de IA modernos são criados. Para desenvolver agentes de IA que possam sentir, pensar e agir com a mesma flexibilidade que os humanos em ambientes do mundo real, é imperativo preencher a lacuna de realismo entre os mundos digital e físico. Como podemos incorporar agentes em um ambiente tão rico e diverso quanto aquele que habitamos, sem as limitações impostas por hardware e controle reais? Com esse objetivo, apresentamos o V-IRL: uma plataforma que permite que os agentes interajam de forma escalável com o mundo real em um ambiente virtual, porém realista. Nossa plataforma serve como um campo de testes para o desenvolvimento de agentes capazes de realizar diversas tarefas práticas e como um vasto ambiente de avaliação para medir o progresso em habilidades que abrangem percepção, tomada de decisão e interação com dados do mundo real em todo o globo.
English
There is a sensory gulf between the Earth that humans inhabit and the digital
realms in which modern AI agents are created. To develop AI agents that can
sense, think, and act as flexibly as humans in real-world settings, it is
imperative to bridge the realism gap between the digital and physical worlds.
How can we embody agents in an environment as rich and diverse as the one we
inhabit, without the constraints imposed by real hardware and control? Towards
this end, we introduce V-IRL: a platform that enables agents to scalably
interact with the real world in a virtual yet realistic environment. Our
platform serves as a playground for developing agents that can accomplish
various practical tasks and as a vast testbed for measuring progress in
capabilities spanning perception, decision-making, and interaction with
real-world data across the entire globe.