Pixal3D2つの画像から 3D を生成するツールです。ピクセル特徴を 3D に引き上げて、視覚一貫性のある、PBR 対応 GLB アセットを生成する

Pixal3Dは、シングルビューまたはマルチビューの2D画像をGLB形式でテクスチャ化された3D資産に変換することができるイメージ・トゥー・3D生成ツールです。本ツールは、中国・清華大学とテンセント・ARCのグループから研究が生まれたものであり、SIGGRAPH 2026に採択されたアカデミック・コンtributionの周りを回っています。GitHub上でコードが公開され、モデルはHugging Faceにホストされており、ローカルセットアップなしで試すことができるホストWebデモも用意されています。 Pixal3Dは、多くの3Dネイティブジェネレータとは異なり、2Dから3Dの対応性問題に取り組むアプローチを特徴としています。 形状を一般的なcanonical姿勢で自由に注意付ける代わりに、ピクセルを戻して(PIXEL BACK-PROJECTION)、マルチスケールの2D画像特徴を3Dの特徴ボリュームに引き上げるスキームを使用します。 目標は、入力画像に近い形状を生成し、正確な比例、 silhouettes、細かい詳細を保って、その結果が視点によらず一致するものを生み出すことです。 生成は、Trellis.2の骨格に基づいて構築されています。このプロジェクトは、推論速度と.feature extractionの質を信用しています。 生成された出力は、Base Color、Normal、Roughnessのマップを備えたPhysically Based Renderingの素材となり、assetsはUnityやUnrealのエンジンへの直接入力が可能となり、Blenderの手作業UV作業やテクスチャペインティングが不要になります。 パイプラインは1つの画像から複数のビューまで拡張している: 画像の角度が何種類もある場合、生成された特性は360度の連続性と被覆された領域の埋め込みを改善するために回帰プロジェクトします。そうするとキャラクターのターンアラウンドシート用に適したものになる。 Pixal3D は個別のプロパティのみの生成に限定されていない、モジュラーなパイピングを提案しています。このパイピングは複雑な画像をオブジェクトを分離した 3D シーンとして認識し、概念絵や参考絵と同等の精度を持つ環境の prototyping には向くため、開発が急激であり、単一のオブジェクトの生成にとどまらない環境の prototyping に利用されます。この製品は 3D アーティスト、ゲーム開発者、その他、空間を計算する作家など、技術的背景と 3D の知識を持ち合わせたユーザーが対象です。 Pixal3Dはオープンソース、研究に裏付けられたプロジェクトであり、その主な差別化要素は、入力ビューの正確さよりもクリエイティブの多様性に重点を置いているということです。 これは、Meshy、Tripo、Rodin、Trellis自身のようなツールと対立するものであり、この焦点は、3次元オブジェクトとその表面の描写を生成する際の精度を重視するユーザーにとって魅力的な利点となる。 しかし、Pixal3Dの強力な結果が得られるのは、与えられた特定の画像を正確にマッチングすることに焦点を当てているため、それ以外のケースでは精度は低くなっている。 また、Pixal3Dは非常に新しい研究リリースであるため、実世界でのrobust性、オクルードされたジオメトリ、完全なシーンシンセシスの場合には、diverseなinputに対して、実際に確認するにはユーザーの個々のアセットを使用する必要がある。 価格設定や使用制限、販売のライセンス条件などの詳細情報は、利用可能な資料に記載されていない。