Stability AI 发布突破性 3D 模型 Stable Fast 3D,速度大幅提升

admin 2024-08-04 阅读:2

8月,生成式人工智能(AI)明星创业公司Stability AI发布了其最新突破性3D模型Stable Fast 3D,大幅提升了由单张图片生成3D图像的速度。

生成模型gan__生成模型vae

Stability AI 介绍,Stable Fast 3D 仅需 0.5 秒便可将单张输入图像转换为详细的 3D 资产,并认为这一创新模型为 3D 重建领域的速度和质量树立了新标杆。它可以快速生成完整的 3D 资产,包括 UV 分割网络、材质参数和反照率颜色,以减少照明烘焙,而且用户可以选择四边形或三角形重新网格划分,处理时间只会增加 100 到 200 毫秒。

Stable Fast 3D的推出,代表着Stability AI在缩短AI模型处理时间方面迈出了一大步。

今年 3 月,Stability AI 发布了 3D 模型 Stable Video 3D(SV3D),这是 Stable Video Diffusion 的改进,仅用一张图片就能生成相应的 3D 模型,适用于新型视角合成任务和 3D 生成任务。SV3D 生成 3D 资产需要长达 10 分钟,而 Stable Fast 3D 只需 0.5 秒即可完成相同任务,速度提高了 1200 倍。

Stability AI 在发布 Stale Fast 3D 时特别提到,该模型在几个关键方面超越了竞争对手,其中之一是在具有 7GB 显存 VRAM 的 GPU 上每次生成 3D 资源仅需 0.5 秒,而在 Stability AI API 上则需要近一秒。此外,该模型拥有高质量的 UV 分割网络和材质参数,可以减少纹理中的纠缠光照,并可以生成额外的材质参数和法线贴图。

生成模型gan_生成模型vae_

_生成模型gan_生成模型vae

Stability AI 声称,Stable Fast 3D 基于 TripoSR,这是该公司与 Tripo AI 合作开发的模型,它显著改善了架构并增强了功能。该模型适用于游戏和虚拟现实 (VR) 开发人员,以及零售、建筑、设计和其他图形密集型行业的专业人士。游戏和电影制作中有多种用例:

目前,Stable Fast 3D 可通过 Stability AI 的聊天机器人 Stable Assistant 和 Stability AI API 使用。用户可以在 AI 开源社区 Hugging Face 上使用该模型,Stability AI 在 Stability AI Community License 下发布,可免费用于研究、非商业和商业用途。

在 Stability AI 官方宣布推出 Stable Fast 3D 后,社交媒体上的网友们迅速回应了这条帖子。有网友问到模型生成的 UV 网络有多清晰,有多少个多边形。还有网友表示,很喜欢 Stability AI 发布模型时附带的动图,里面是机器吐出一个通用的 AI 图像模型,然后直接扔进垃圾桶。还有网友问到生成的 3D 结果能不能打印出来。

生成模型vae_生成模型gan_

_生成模型vae_生成模型gan

生成模型vae_生成模型gan_

有评论称,目前 3D 世界的内容创作是一个瓶颈。我们不想花钱请人手工制作 Metaverse。自动资产生成应该是默认设置,就像在现实世界中一样。Stability AI 的新模型是朝着正确方向迈出的一大步。

生成模型gan_生成模型vae_

评论(0)