ComfyUI-Sharp:单图 3D 高斯溅射重建,基于苹果SHARP 模型的 ComfyUI 封装节点

插件3天前发布 小马良
15 0

ComfyUI-Sharp 是对 Apple 研究项目 SHARP(Single-view High-quality 3D Reconstruction with Priors)的 ComfyUI 集成节点,可在 不到 1 秒内 从单张 RGB 图像生成高质量的 3D 高斯溅射(3D Gaussian Splatting) 表示。

安装与模型管理

  • 自动下载:首次运行时,模型 sharp_2572gikvuh.pt 会自动下载。
  • 离线使用:如需离线部署,请手动将模型文件放入:
    ComfyUI/models/sharp/sharp_2572gikvuh.pt
    

💡 模型文件较大,请确保网络畅通或提前准备。

节点功能说明

节点名称功能
加载 SHARP 模型加载预训练的 SHARP 模型(.pt 文件)
SHARP 预测输入图像 + 焦距 → 输出 3D 高斯溅射数据(PLY 格式)
加载含 EXIF 的图像自动从图像 EXIF 中提取 等效 35mm 焦距,无需手动输入

提供的示例工作流

  • 标准工作流
    • 用户手动指定相机焦距(单位:mm)
    • 适用于无 EXIF 或自定义焦距场景
ComfyUI-Sharp:单图 3D 高斯溅射重建,基于苹果SHARP 模型的 ComfyUI 封装节点
  • EXIF 自动工作流
    • 使用 “加载含 EXIF 的图像” 节点
    • 系统自动解析焦距,提升重建精度
    • 推荐用于手机/相机拍摄的原始照片
ComfyUI-Sharp:单图 3D 高斯溅射重建,基于苹果SHARP 模型的 ComfyUI 封装节点

可视化支持

  • 生成的 PLY 文件可直接用于 3D 高斯溅射查看器
  • 注意:若需在 ComfyUI 内预览 3D 高斯模型,请额外安装配套可视化节点:
    🔗 ComfyUI-GeometryPack

✅ ComfyUI-GeometryPack 提供 Preview Gaussian Splat 等节点,支持实时交互式 3D 渲染。

使用建议

  • 输入图像质量越高,重建效果越好(建议分辨率 ≥ 512px)
  • 焦距准确性直接影响 3D 几何比例,优先使用带 EXIF 的原图
  • 生成的 PLY 文件包含位置、颜色、协方差等高斯参数,可直接用于 3D Gaussian Splatting 渲染器

性能亮点

  • 单图推理时间 < 1 秒(RTX 4090 / M2 Max 等现代 GPU)
  • 无需多视角、无需深度图、无需训练
  • 开箱即用,适合快速原型、AR/VR 内容生成、3D 数字资产创建等场景
© 版权声明

相关文章

暂无评论

none
暂无评论...