概念艺术家画画。游戏开发者需要3D。几十年来,连接这两个世界的桥梁是一位带着数位板和大量耐心的建模师。AI正在开始填平这个鸿沟——你现在可以在几分钟内从粗略草图到可用的3D模型。
不过这比照片转3D更难。铅笔画携带的信息比照片少:没有光照,没有视差,通常线条背后也没有清晰的轮廓。本指南介绍真正有效的工作流程。
为什么直接草图转3D比照片转3D更难
TRELLIS或Hunyuan3D这类现代图像转3D模型主要在渲染图和照片上训练。它们期望实体阴影、透视线索和清晰的材质边界。线条画没有这些。把平面铅笔草图喂给任何流行的图像转3D模型,通常得到糊状、半成形的网格——网络根本不知道表面到底在哪。
修复方法是给网络一些更接近它训练数据的东西。也就是先把草图变成渲染图像。
两步流程(推荐)
可靠的工作流分两个阶段:
- 草图到渲染图——将线条画通过Stable Diffusion加ControlNet或Imagen等图像到图像模型,生成带阴影的照片级参考图。
- 渲染图到3D——把渲染图喂给正常的图像转3D管线。
这之所以有效,是因为每一步都发挥了相应模型的强项。ControlNet的scribble或lineart预处理器就是为了在保留轮廓的同时将绘画转换为照片级输出而设计的。然后3D模型收到一张它真正能理解的图像。
第1步实操
把草图载入Stable Diffusion UI(Automatic1111、ComfyUI、Forge——挑你喜欢的)。启用ControlNet单元,使用lineart或canny预处理器。提示词写你想要的效果:"3D render, studio lighting, neutral grey background, octane"。保持提示词简单——轮廓已经在做大部分工作。
第2步实操
把渲染输出拖进HiGen3D生成器。从这里开始流程与将任何照片转换为3D完全一样:选质量模式,等约30秒,下载GLB。
送进AI的草图的最佳实践
- 清晰的轮廓——最外层的轮廓比内部细节更重要。如果人类仅凭轮廓认不出来,AI也认不出来。
- 单一物体、纯净背景——白纸,没有阴影杂物,画面里没有其他形状。
- 良好的对比度——白纸黑墨比淡铅笔好。在均匀光线下扫描或拍摄。
- 四分之三视角——纯正面或侧面视图无法让AI做三角测量。把相机角度从轴线偏移30-45度。
- 轻微的阴影有帮助——即使用软铅笔快速过一遍明暗,也能给模型提供深度线索。
一步走的替代方案
一些较新的模型直接接受线条画。它们还没有两步流程那么稳健,但当你想要快速结果而主体又简单时值得一试。对于车辆、道具和其他轮廓鲜明的硬表面物体,一步式草图转3D通常能完成70%的工作。有机形态——角色、生物、任何带毛发或布料的——仍受益于中间的渲染图步骤。
按用例分类的示例
角色概念——四分之三姿势、基本明暗渲染、简单服装。两步流程。预计要在自己的DCC中重做脸部;AI能把身体和服装做得接近,但从草图来的脸还是粗糙的。
车辆设计——车辆是AI 3D最闪光的领域。一张侧视图加一张四分之三视图,两步流程,你就有一个可驾驶的形状了。参见把车导入Unity的指南。
道具和武器——通常是最简单的类别。轮廓清晰,材质简单,一步式通常就够。
草图衍生几何体的清理技巧
来自草图的网格比来自照片的需要稍多清理。常见问题:
- 不对称——即使"对称"的手绘也不是真正对称的。如果对称性重要,在Blender中对较干净的一半使用Mirror修改器。
- 漂浮的细节——AI从模糊线条幻觉出的小特征。删除它们或按距离合并。
- 纹理接缝——AI从单一视图烘焙纹理,所以背面可能看起来糊。用PBR材质快速重贴一遍可以修复大多数情况。
关于把GLB导入工具,参见Blender导入指南。
这是给谁用的
想看到自己的设计变成3D又不想学Maya的概念艺术家。在纸上设计、急需可玩资产的独立游戏开发者——有一整篇独立资产管线指南讲这个。做previs的动画工作室。任何有一本满是创意的速写本却没时间手动建模的人。