Stability AI联合Tripo AI发布TripoSR丨快速图生3D模型

标记狮私有云部署
一键部署标记狮至私有服务器,构建快速,安全,高效,私密的UI设计团队云协作

Stability AI联合Tripo AI发布TripoSR_2.jpg

3月5日,Stability AI联合Tripo AI发布了TripoSR,可以在极短的时间内,从单张图片生成高质量的3D模型,大大降低了3D生成对算力的依赖。

TripoSR在神经网络3D重建模型的基础上,实现了前所未有的生成速度和质量。在Nvidia A100 GPU上,它只需要0.5秒就可以输出草图级质量的3D模型,明显快过类似的Pix2Mesh或DVR算法。更重要的是,即使没有专业图形处理器,TripoSR也可以在CPU上流畅运行,大幅降低了用户的硬件门槛。

该模型使用Objaverse数据集的子集进行训练,并采用增强的数据渲染流程来提高泛化能力。相比原始的LRM架构,研究人员进行了通道优化、掩码监督以及高效裁剪等多项改进,输出的3D模型细节更丰富,质感也更逼真。

TripoSR采用宽松的MIT许可协议开源,用户可以在GitHub和HuggingFace上免费获取模型权重、源代码和使用示例。研发团队也热情欢迎社区反馈和协作来推进项目。他们还提供了线上Demo和Colab代码,帮助新用户快速上手。

可在huggingface上体验demo:

Stability AI联合Tripo AI发布TripoSR_3.png

上传想要转换的图片到Input Image区域,可以选择是否使用Remove Background选项来自动去除图片背景,可通过旁边的Foreground Ratio滑动条调整前景与背景的分割阈值。

设置完成后,点击Generate按钮开始转换过程,处理后的图片将显示在右侧Processed Image区域,而最终的3D模型则在界面右侧的Model区域展示,可以在这里预览模型的3D效果。如果满意,还可以下载这个模型,格式为.obj。

底部还提供了一些示例图像点击示例就可以将2D图像无缝转换为3D模型。

demo:https://huggingface.co/spaces/stabilityai/TripoSR

模型:https://huggingface.co/stabilityai/TripoSR/tree/main

GitHub:https://github.com/VAST-AI-Research/TripoSR

标记狮私有云部署
一键部署标记狮至私有服务器,构建快速、安全、高效、私密的UI设计团队云协作
立即部署>>
标记狮私有云部署-一键部署标记狮至私有服务器,构建快速,安全,高效,私密的UI设计团队云协作