1枚の画像から3Dモデルを生成するAIが、従来の作業工程をどう変えたか
1枚の画像から3Dモデルを生成するAIは、写真1枚を入れるだけでメッシュが出来上がるため、あまりに便利に聞こえるかもしれません。実際、実物から3Dアセットを作る従来の方法は、カメラリグ、回転台、そして大量の重なり合う写真を必要としていました。このページでは、その従来の工程とこの新方式の違い、そしてそれぞれが今でも適している場面を解説します。
従来の方法:多角度フォトグラメトリ
ワンショット再構築が登場する前、実物を3Dアセットにするといえばフォトグラメトリでした。被写体の周囲をあらゆる角度から撮影した、数十枚から場合によっては数百枚に及ぶ重なり合う写真が必要であり、通常は均一で安定した照明の下、回転台に載せて撮影します。専用ソフトウェアが全フレームに共通する点を照合して高密度ポイントクラウドを構築し、それをメッシュに変換していました。真に計測された幾何形状、つまり一切の推測を交えない正確な形状を生み出せたものの、機材、調整された撮影環境、そして1つのオブジェクトにつき数時間に及ぶ処理時間が必要となり、手軽な単発の画像アセットには現実的ではありませんでした。
今日、1枚の画像がどう3Dメッシュになるのか
この画像から3Dメッシュ変換パイプラインを支えるモデルは、基準となる画像を1枚だけ必要とします。自分の写真でも、テキストプロンプトから生成したコンセプト画像でも構いません。多数の写真の間で点を三角測量する代わりに、膨大な実在の3Dオブジェクト群を学習して得たパターンを手掛かりに、被写体の見えない側面がどのように見えるかを推定します。その推定結果にテクスチャベイクを施すことで、リグも回転台もフォトグラメトリソフトも使わず、約1分で閉じた3Dメッシュを.glb形式で出力します。
違いが実際に表れる部分
並べてみると、そのトレードオフは大まかな話ではなく具体的なものです。
| 項目 | フォトグラメトリ(多角度) | 1枚画像AI(このパイプライン) |
|---|---|---|
| 必要なもの | 数十枚の写真、リグまたは回転台、照明の整った環境 | 写真1枚、またはテキストプロンプト1つ |
| 見えない面 | 実際に撮影・計測される | 学習した形状の事前知識から推定される |
| 所要時間 | 撮影と処理で数時間かかることも | 開始から完了まで約1分 |
| 最適な用途 | 寸法の正確さが必須のものをスキャンする場合 | 手軽な3D小道具、コンセプト、単発のアイデア |
ワンショット再構築に切り替えた人々と、その理由
移行した人々には共通する制約があります。フォトグラメトリの機材がなく、そのための時間もない、という点です。インディーゲーム開発者は小道具のプロトタイプ作成に、スキャン級の精度よりもスピードを求めます。3Dプリント愛好家は既存の商品画像が1枚しかないことが多く、オブジェクトを再現して全角度から撮影するわけにはいきません。そしてコンセプトアーティストは元々1枚のイラストを参考に仕事をしており、最初から本格的なフォトグラメトリの入力などありません。画像だけで完結するツールこそ、彼らの既存のワークフローにぴったり合う最初の選択肢なのです。
Questions
Frequently Asked Questions
はい。多角度フォトグラメトリのように隠れた形状を計測するのではなく、多数の実在する3Dオブジェクトから学習したパターンに基づいて妥当な形状を推定し、その結果にテクスチャを焼き付けます。
カメラが見ていない面に関しては、そうとは言えません。そこは計測ではなく、根拠のある推測です。寸法の厳密さが重要ではない手軽な小道具、コンセプトモデル、3Dプリント用途であれば、その違いは通常気にならない程度です。
いいえ。このパイプラインは1枚の画像を前提に設計されています。同じオブジェクトの写真を複数枚渡すことは想定しておらず、曖昧な複数枚よりも、クリアで構図の整った1枚のほうが良い結果が得られます。
モデルが、類似オブジェクトのその面が通常どのように見えるかに基づいて補完します。これはスキャンではなく妥当な再構築なので、厳密な対称性を前提にする前に、完成したメッシュの背面を確認することをおすすめします。
はい。このジェネレーターにはCADソフトもモデリング経験も必要ありません。プロンプトを入力するか、写真を1枚アップロードすれば、テクスチャ付きのメッシュをダウンロードできます。
Keep reading
画像を3Dモデルに変換する、その他の方法
Turn Your Image Into a 3D Model — Free
登録不要、ソフト不要、モデリング経験も不要。画像をドロップするか説明を入力するだけで、テクスチャ付きの .glb を約1分でダウンロードできます。