Stability AI推出了一款名为Stable Zero123的新型AI模型,该模型能够基于单张图片生成高清晰度的3D物体图像。Stable Zero123在生成效果上大幅超越了其前身Zero123-XL,这主要归功于三项关键创新。

image.png

Stable Zero123采用了经过精心筛选的训练数据集,这些数据集来源于Objaverse,保留了高质量的3D物体。这一改进使得生成的3D物体更加真实。

image.png

在模型的训练和推理过程中,Stable Zero123利用了估计的相机角度进行“升高条件”处理,这项技术使得模型预测更加精确,显著提高了图像生成质量。此外,Stable Zero123还引入了预计算数据集和优化的数据加载器,使训练效率提升了40倍。

Stable Zero123已在Hugging Face平台上线,供研究人员和非商业用户下载试用。需要注意的是,该模型的使用受到授权限制,分为Stable Zero123和Stable Zero123C两个版本。Stable Zero123包含了一些CC-BY-NC授权的3D物体,仅限研究用途;而Stable Zero123C则使用了CC-BY和CC0授权的物体,允许Stability AI会员进行商业使用。

此外,Stable Zero123还与开源项目threestudio相结合,支持3D物体生成的开源研究。目前,简化版的Stable3D流程正处于私密预览阶段。通过这种方法,用户可以利用Score Distillation Sampling(SDS)优化神经辐射场(NeRF),从Stable Zero123模型生成的图像中构建出丰富的纹理3D模型。

Stable Zero123的发布不仅推动了3D物体生成领域的技术进步,还为研究和商业应用开辟了新的可能。

官方博客:https://stability.ai/news/stable-zero123-3d-generation

重点摘要:

🌟 Stable Zero123可基于单张图片生成高质量3D物体视图,大幅提升生成效果。

📈 模型通过优化数据集和升高条件技术,实现了更精确的图像生成。

🆕 Stable Zero123分为研究版和商业版,后者需持有Stability AI会员资格。