V-IRL：仮想知能を現実世界に基づかせる

要旨

人間が住む地球と、現代のAIエージェントが生まれるデジタル領域との間には、感覚的な隔たりが存在します。現実世界の環境において、人間のように柔軟に感知し、思考し、行動できるAIエージェントを開発するためには、デジタル世界と物理世界の間のリアリズムのギャップを埋めることが不可欠です。現実のハードウェアや制約に縛られることなく、私たちが住むのと同じように豊かで多様な環境にエージェントを具現化するにはどうすればよいでしょうか？この目的に向けて、私たちはV-IRLを紹介します。これは、エージェントが仮想的でありながら現実的な環境で現実世界とスケーラブルに相互作用することを可能にするプラットフォームです。私たちのプラットフォームは、さまざまな実用的なタスクを達成できるエージェントを開発するための遊び場として、また、世界中の現実世界のデータにわたる知覚、意思決定、相互作用の能力の進歩を測定するための広大なテストベッドとして機能します。

English

There is a sensory gulf between the Earth that humans inhabit and the digital realms in which modern AI agents are created. To develop AI agents that can sense, think, and act as flexibly as humans in real-world settings, it is imperative to bridge the realism gap between the digital and physical worlds. How can we embody agents in an environment as rich and diverse as the one we inhabit, without the constraints imposed by real hardware and control? Towards this end, we introduce V-IRL: a platform that enables agents to scalably interact with the real world in a virtual yet realistic environment. Our platform serves as a playground for developing agents that can accomplish various practical tasks and as a vast testbed for measuring progress in capabilities spanning perception, decision-making, and interaction with real-world data across the entire globe.

V-IRL：仮想知能を現実世界に基づかせる

V-IRL: Grounding Virtual Intelligence in Real Life

要旨

Support