本指南提供了使用 "Stable Fast 3D" 模型创建 3D 内容的全面介绍,利用 "ComfyUI 3D Pack" 节点的高级功能来简化工作流程并提高输出质量。
ComfyUI 3D Pack 是一个广泛的节点套件,使 ComfyUI 能够使用前沿算法和模型处理 3D 输入,例如 Mesh 和 UV Texture。它集成了先进的 3D 处理算法,如 3DGS (Gaussian Splatting) 和 NeRF (Neural Radiance Fields),以及最先进的模型,包括 Hunyuan3D、StableFast3D、InstantMesh、CRM、TripoSR 等。
使用 ComfyUI 3D Pack,用户可以在直观的 ComfyUI 界面中导入、操作和生成高质量的 3D 内容。它支持广泛的 3D 文件格式,如 OBJ、PLY、GLB,便于集成现有的 3D 模型。该包还包括强大的网格处理工具,用于编辑、清理和优化 3D 几何。
其中一个关键亮点是 NeRF 技术的集成,允许从 2D 图像进行逼真的 3D 重建。3DGS 节点支持点云渲染和风格化。InstantMesh 和 TripoSR 模型允许高分辨率的放大和 3D 网格的超分辨率。CRM (Convolutional Reconstruction Model) 能够从多视图图像恢复 3D 形状和 CCM (Color Correction Map)。
ComfyUI 3D Pack 由 MrForExample 开发,所有功劳归于 MrForExample。有关详细信息,请参见 ComfyUI 3D Pack。
现在 ComfyUI 3D Pack 已完全设置并可以在 RunComfy 网站上使用。用户无需安装任何额外的软件或依赖项。所有必需的模型、算法和工具都已预配置并优化为在基于 Web 的 ComfyUI 环境中高效运行。
Stable Fast 3D (SF3D) 是一种先进的单视图 3D 网格重建技术,可以从单个图像生成高质量、带纹理的 3D 网格。Stable Fast 3D 基于 TripoSR 模型,但结合了多个关键增强功能,以生成适合各种下游应用(如游戏、电子商务和 AR/VR)的卓越 3D 资产。
Stable Fast 3D 由 Stability-AI 开发,所有功劳归于 Stability-AI。有关详细信息,请参见 Stable Fast 3D
Stable Fast 3D 采用了一种新的方法,明确训练模型进行网格生成。它集成了一种快速的 UV 展开方法,以便快速生成纹理,而不是依赖于顶点颜色。此外,Stable Fast 3D 学习预测材料参数和法线贴图,这显著提高了重建 3D 网格的视觉质量。Stable Fast 3D 的一个关键特性是其去光照步骤,有效去除低频照明效果,确保生成的网格可在不同的光照条件下轻松使用。
然而,Stable Fast 3D 可能在处理高度复杂或详细的对象时存在限制,因为它依赖于单个输入图像进行重建。
ComfyUI 3D Pack 提供了 Stable Fast 3D 工作流的无缝集成,使用户能够轻松地从单个图像生成高质量的 3D 网格。工作流程包括以下步骤:
使用 "[Comfy3D] Load SF3D Model" 节点加载预训练的 Stable Fast 3D 模型。
使用 "LoadImage" 和 "InvertMask" 节点准备输入图像和遮罩。
使用 "[Comfy3D] Resize Image Foreground" 节点调整大小并预处理输入图像和遮罩。
将预处理的图像、遮罩和加载的 Stable Fast 3D 模型输入到 "[Comfy3D] StableFast3D" 节点以生成 3D 网格。
如有需要,使用 "[Comfy3D] Switch Mesh Axis" 节点调整网格的轴和比例。
保存生成的 3D 网格,并使用 "[Comfy3D] Preview 3DMesh" 节点预览最终的 3D 网格。
通过利用 ComfyUI 3D Pack 节点,用户可以轻松地将 Stable Fast 3D 工作流集成到他们的项目中,使他们能够通过简单的点击生成高质量、带纹理的 3D 网格。这种强大的 Stable Fast 3D 和 ComfyUI 组合为 AI 辅助的 3D 内容创作开辟了新的可能性,使艺术家、设计师和开发人员的工作更加便捷和高效。
有关使用 Stable Fast 3D 模型时的详细许可信息,请参见 Stable Fast 3D License。
RunComfy 是首选的 ComfyUI 平台,提供 ComfyUI 在线 环境和服务,以及 ComfyUI 工作流 具有惊艳的视觉效果。 RunComfy还提供 AI Playground, 帮助艺术家利用最新的AI工具创作出令人惊叹的艺术作品。