Stable Video 3D震撼发布：3D生成引入视频扩散模型，4090可跑，权重全开放
站长
· 阅读数 2
前言
近日，Stability AI携最新力作Stable Video 3D (SV3D) 强势登场，该模型基于先进的视频扩散技术，标志着3D生成技术的一大飞跃。与之前的Stable Zero123相比，SV3D在模型质量、功能强度上都有显著提升，真正实现了从单一图像到复杂3D模型的高效转换。
技术背景
在计算机视觉领域，将2D图像转化为3D模型一直是一个极具挑战性的任务。Stability AI通过引入视频扩散模型（Stable Video Diffusion），为这一领域带来了创新性的解决方案。相较于传统图像扩散模型，视频扩散模型在生成过程中能更好地维持输出的多视角一致性，从而显著提升3D生成的质量和真实性。
- Huggingface模型下载： huggingface.co/stabilityai…
- AI快站模型免费加速下载：aifasthub.com/models/stab…
SV3D核心优势
- 高质量3D模型生成：利用视频模型的独特功能，SV3D能够基于单张图像生成高质量的3D模型，大幅超越同类模型的生成效果。
- 模型权重开放：为了促进技术共享和行业进步，Stability AI将SV3D模型的权重在huggingface平台全面开源，为研究人员和开发者提供了极大的便利。
- 4090显卡可运行：考虑到模型的普适性和易用性，SV3D经过优化，可以在NVIDIA 4090等主流显卡上运行，降低了用户的使用门槛。
技术细节深入
SV3D模型的设计细节体现了Stability AI在视频扩散技术上的深入研究。模型通过引入动态轨道和三角形CFG缩放技术，有效解决了多视图一致性和视图过度锐化的问题，实现了从单个图像到3D视频的高效转换。
- 动态轨道：通过在方位角和仰角上引入随机噪声和正弦曲线，SV3D模型能够生成更加自然和连贯的3D轨道视频，提升了视角转换的平滑性。
- 三角形CFG缩放：为了避免生成过程中的过度锐化现象，SV3D采用三角形CFG缩放技术，优化了模型在不同时间步的生成效果，确保了最终输出的质量。
此外，SV3D模型还结合了解纠缠照明优化和掩蔽分数蒸馏采样损失功能，进一步增强了模型在3D网格生成方面的能力，为用户呈现出更加精细和真实的3D模型。
下图为使用 Stable Video 3D生成的效果：
应用前景
SV3D模型的发布，不仅是Stability AI在技术上的一大突破，也为3D内容创作、游戏开发、AR/VR技术等领域带来了新的可能性。通过开放模型权重，Stability AI期待与全球的开发者和研究人员共同推动3D生成技术的发展，激发更多创新的应用场景。
模型下载
Huggingface模型下载
AI快站模型免费加速下载