ホームブログスケッチから3Dへ:AIで手描きを3Dモデルに変換する方法
SKETCHAICONCEPT ARTGUIDE

スケッチから3Dへ:AIで手描きを3Dモデルに変換する方法

5 min2026年5月10日

コンセプトアーティストは絵を描く。ゲーム開発者は3Dを必要とする。何十年もの間、この2つの世界をつなぐ橋はタブレットと大量の忍耐を持つモデラーでした。AIがそのギャップを埋め始めています——いまや粗いスケッチから使える3Dモデルまで数分で行けます。

ただし、写真から3Dよりは難しい。鉛筆画は写真より情報が少ない:照明なし、視差なし、線の奥に明確なシルエットがないことも多い。このガイドでは実際にうまくいくワークフローを解説します。

なぜ直接スケッチから3Dは写真から3Dより難しいのか

TRELLISやHunyuan3Dのような現代の画像から3Dモデルは、主にレンダリング画像と写真で訓練されています。それらはしっかりした陰影、パースの手がかり、明確なマテリアル境界を期待します。線画にはこれらがありません。平らな鉛筆スケッチを人気の画像から3Dモデルのどれかに与えると、たいていドロドロした半形成のメッシュが返ってきます——ネットワークは表面が実際どこにあるか分からないのです。

解決策は、ネットワークに訓練データに近いものを与えること。つまり、スケッチをまずレンダリングされた画像に変換します。

2ステップパイプライン(推奨)

信頼できるワークフローは2段階:

  1. スケッチからレンダリング画像——線画をStable Diffusion + ControlNetやImagenなどの画像から画像モデルに通し、陰影のついた写真風のリファレンスを生成。
  2. レンダリング画像から3D——そのレンダリング画像を通常の画像から3Dパイプラインに入力。

これがうまくいくのは、各ステップが各モデルの得意分野を活かしているから。ControlNetのscribbleまたはlineartプリプロセッサは、シルエットを保ちつつ絵を写真級の出力に変換するために設計されたものです。そして3Dモデルは実際に理解できる画像を受け取ります。

ステップ1の実践

スケッチをStable DiffusionのUI(Automatic1111、ComfyUI、Forge——好みで)にロード。lineartまたはcannyプリプロセッサでControlNetユニットを有効化。欲しい見た目をプロンプトに:「3D render, studio lighting, neutral grey background, octane」。プロンプトはシンプルに——シルエットがほとんどの仕事をします。

ステップ2の実践

レンダリング出力をHiGen3Dジェネレーターにドロップ。ここからは任意の写真を3Dに変換するのと同じ:品質モードを選び、約30秒待ち、GLBをダウンロード。

AIに渡すスケッチのベストプラクティス

  • 明確なシルエット——一番外側のアウトラインが内部のディテールより重要。人間がシルエットだけで何か分からないなら、AIにも分かりません。
  • 単一オブジェクト、シンプルな背景——白い紙、陰影の雑音なし、フレーム内に他の形なし。
  • 良好なコントラスト——白紙に黒インクは薄い鉛筆より良い。均一な光でスキャンか撮影。
  • 3/4ビュー——純粋な正面や側面ビューはAIに三角測量する材料を与えません。カメラを軸から30-45度傾けて。
  • 軽い陰影が助けになる——柔らかい鉛筆でササッと明暗を入れるだけでも、モデルに奥行きの手がかりを与えます。

ワンステップの代替案

いくつかの新しめのモデルは線画を直接受け付けます。まだ2ステップパイプラインほど堅牢ではありませんが、素早い結果が欲しくて対象がシンプルなときは試す価値があります。車両、プロップ、その他シルエットが強いハードサーフェスのオブジェクトでは、ワンパスのスケッチから3Dで70%まで行けることが多いです。有機的な形——キャラクター、クリーチャー、毛や布のあるもの——はやはりレンダリング画像の中間ステップが効きます。

用途別の例

キャラクターコンセプト——3/4ポーズ、基本的な明暗、シンプルな衣装。2ステップパイプライン。顔は好きなDCCで作り直すつもりで;AIはボディと衣装はそこそこ近づけますが、スケッチからの顔はまだ粗いです。

車両デザイン——車両はAI 3Dが最も輝く分野。側面ビューと3/4ショット、2ステップパイプラインで、運転可能な形が手に入ります。車をUnityに持っていくガイド参照。

プロップと武器——通常もっとも簡単なカテゴリ。くっきりしたシルエット、シンプルなマテリアル、ワンパスでも十分なことが多いです。

スケッチ由来ジオメトリのクリーンアップのコツ

スケッチ由来のメッシュは写真由来よりも少し多くのクリーンアップが必要です。よくある問題:

  • 非対称——「対称」な手描きでも実際には完全には対称ではありません。対称性が重要ならBlenderでよりきれいな半分にMirrorモディファイアを。
  • 浮遊する細部——曖昧な線からAIが幻覚した小さな特徴。削除するか距離でマージ。
  • テクスチャの継ぎ目——AIは単一ビューからテクスチャをベイクするので、背面が濁って見えることがあります。PBRマテリアルでさっと再テクスチャすればたいてい直ります。

GLBをツールに持ち込む方法はBlenderインポートガイドを参照。

これは誰のためか

Mayaを学ばずに自分のデザインを3Dで見たいコンセプトアーティスト。紙でデザインしてプレイ可能なアセットを素早く必要とするインディーゲーム開発者——これについてはインディーアセットパイプラインガイドがまるごとあります。previsをやるアニメスタジオ。アイデアでいっぱいのスケッチブックがあって手作業でモデリングする時間がない全ての人。

手元のスケッチでジェネレーターを試すか、コミュニティギャラリーで他の人の作品を見てください。コンセプトのバックログを処理しているなら料金ページに量割引があります。

試してみませんか?

写真から3Dモデルを生成する

生成を開始