低品質モデルからの高品質テクスチャとジオメトリの洗練による3Dモデルの品質向上

要旨

高品質な3Dアセットは、コンピュータグラフィックスや3Dビジョンにおける様々なアプリケーションにおいて不可欠ですが、その取得コストの高さから依然として不足しています。この不足を解消するため、我々はElevate3Dを提案します。これは、容易に入手可能な低品質の3Dアセットを高品質に変換する新しいフレームワークです。Elevate3Dの中核には、HFS-SDEditという特殊なテクスチャ強化手法があり、外観や形状を維持しながら劣化を修正し、テクスチャ品質を大幅に向上させます。さらに、Elevate3Dはビューごとに動作し、テクスチャとジオメトリの精緻化を交互に行います。従来の手法がジオメトリの精緻化をほとんど考慮していなかったのに対し、我々のフレームワークは、HFS-SDEditで精緻化された画像から幾何学的な手がかりを抽出し、最先端の単眼幾何予測器を活用します。このアプローチにより、強化されたテクスチャとシームレスに整合する詳細で正確なジオメトリが保証されます。Elevate3Dは、3Dモデルの精緻化において最新の競合手法を凌駕し、高品質なオープンソース3Dアセットの不足を効果的に解消します。

English

High-quality 3D assets are essential for various applications in computer graphics and 3D vision but remain scarce due to significant acquisition costs. To address this shortage, we introduce Elevate3D, a novel framework that transforms readily accessible low-quality 3D assets into higher quality. At the core of Elevate3D is HFS-SDEdit, a specialized texture enhancement method that significantly improves texture quality while preserving the appearance and geometry while fixing its degradations. Furthermore, Elevate3D operates in a view-by-view manner, alternating between texture and geometry refinement. Unlike previous methods that have largely overlooked geometry refinement, our framework leverages geometric cues from images refined with HFS-SDEdit by employing state-of-the-art monocular geometry predictors. This approach ensures detailed and accurate geometry that aligns seamlessly with the enhanced texture. Elevate3D outperforms recent competitors by achieving state-of-the-art quality in 3D model refinement, effectively addressing the scarcity of high-quality open-source 3D assets.

低品質モデルからの高品質テクスチャとジオメトリの洗練による3Dモデルの品質向上

Elevating 3D Models: High-Quality Texture and Geometry Refinement from a Low-Quality Model

要旨

Support