在近期落幕的CES展会上，Stability AI公司发布了革命性的SPAR3D（Stable Point Aware3D）技术，这是一种两阶段的3D生成方法，能在短短一秒内从单一图像中精确构建3D对象。这一创新技术为游戏开发者、产品设计师和场景构建师带来了全新的3D原型设计手段。
SPAR3D的显著特点在于，它能够分别建模物体的可见和不可见部分。在生成3D对象时，该方法提供了精确的几何形状和全方位360度的视图，包括物体背面的细节。用户还可利用实时编辑功能，直接对生成的3D对象进行修改，如删除、复制、拉伸和重新着色点云，大幅提升了操作灵活性和创意空间。
SPAR3D的工作流程分为两个阶段。第一阶段使用轻量级点扩散模型生成稀疏的3D点云，样本提取速度极快；第二阶段则利用这些点云和输入图像构建高细节的网格模型。这种设计不仅提升了计算效率，还确保了输出质量，克服了传统单图像3D重建方法的限制。
在性能测试中，SPAR3D在GSO和Omniobject3D数据集上表现出色，优于当前许多最先进的算法。研究团队通过多项实验验证了该技术的有效性，尤其是在处理图像遮挡和细节重建方面的优势。SPAR3D采用显式的点云作为中间表示，使用户能够对3D模型进行进一步的编辑，提升了用户体验。
SPAR3D的主要功能包括：
实时生成能力
快速生成：从单张图像中快速生成完整的3D对象结构，生成时间不足一秒。
高效编辑：编辑后的点云转换为最终网格的速度仅需0.3秒。
先进的编辑功能
点云编辑：用户可直接对点云进行操作，包括删除、复制、拉伸和添加特征。
重新着色：提供对3D模型颜色的调整功能，增强创作灵活性。
精确的结构预测
完整结构预测：能够提供准确的几何形状和详细的360度视图预测，包括隐藏区域。
高分辨率输出：通过三平面变换器生成高分辨率的三平面数据，捕捉图像的纹理和光照。
开放的使用政策
广泛的应用许可：支持商业和非商业用途，用户可在多个平台上获取和使用该模型。
开发者友好：可通过Hugging Face下载权重，获取代码在GitHub上使用，或通过API访问。
官方介绍: https://stability.ai/news/stable-point-aware-3d
划重点:
🌟 SPAR3D能够在短时间内从单张图像生成精确的3D对象，并支持实时编辑功能。
🔍 该技术采用两阶段方法，分别生成点云和高细节网格，提高了计算效率和输出质量。
🚀 SPAR3D在多个数据集上优于现有的3D重建算法，展示了出色的性能与用户编辑能力。
暂无评论