TripoSR: Ricostruzione Rapida di Oggetti 3D da una Singola Immagine

TripoSR: Fast 3D Object Reconstruction from a Single Image

March 4, 2024

Autori: Dmitry Tochilkin, David Pankratz, Zexiang Liu, Zixuan Huang, Adam Letts, Yangguang Li, Ding Liang, Christian Laforte, Varun Jampani, Yan-Pei Cao

cs.AI

Abstract

Questo rapporto tecnico introduce TripoSR, un modello di ricostruzione 3D che sfrutta l'architettura transformer per una generazione 3D rapida in feed-forward, producendo mesh 3D da una singola immagine in meno di 0,5 secondi. Basandosi sull'architettura di rete LRM, TripoSR integra miglioramenti significativi nell'elaborazione dei dati, nel design del modello e nelle tecniche di addestramento. Le valutazioni su dataset pubblici dimostrano che TripoSR offre prestazioni superiori, sia quantitativamente che qualitativamente, rispetto ad altre alternative open-source. Rilasciato sotto licenza MIT, TripoSR è progettato per fornire a ricercatori, sviluppatori e creativi gli ultimi progressi nell'ambito dell'IA generativa 3D.

English

This technical report introduces TripoSR, a 3D reconstruction model leveraging transformer architecture for fast feed-forward 3D generation, producing 3D mesh from a single image in under 0.5 seconds. Building upon the LRM network architecture, TripoSR integrates substantial improvements in data processing, model design, and training techniques. Evaluations on public datasets show that TripoSR exhibits superior performance, both quantitatively and qualitatively, compared to other open-source alternatives. Released under the MIT license, TripoSR is intended to empower researchers, developers, and creatives with the latest advancements in 3D generative AI.