73
AI资讯

Stability AI 的新 AI 模型将照片变成 3D 场景


Stability AI 发布了一种新的 AI 模型——稳定虚拟相机,该公司声称该模型可以将 2D 图像转换为具有逼真深度和透视的“沉浸式”视频。


虚拟摄像机是数字电影制作和 3D 动画中经常使用的工具,用于实时捕捉和导航场景。Stability 在一篇博文中表示,借助 Stable 虚拟摄像机,Stability 寻求将生成式 AI 添加到组合中,以提供更好的控制和可定制性。


稳定虚拟相机可根据用户指定的摄像机角度,从一张或多张图像(最多 32 张)生成场景的“新奇视图”。该模型可以生成沿“动态”摄像机路径或预设(包括“螺旋”、“推拉变焦”、“移动”和“平移”)移动的视频。



Stable Virtual Camera 的当前版本(研究预览版)可以生成正方形(1:1)、纵向(9:16)和横向(16:9)纵横比的视频,长度最多可达 1,000 帧。不过 Stability 警告称,该模型在某些情况下可能会产生质量较低的结果,尤其是针对以人类、动物或水等“动态纹理”为特色的图像。


Stability 在其博客文章中指出:“高度模糊的场景、与物体或表面相交的复杂摄像机路径以及形状不规则的物体都可能导致闪烁伪影,尤其是当目标视点与输入图像有显著差异时。”


稳定虚拟相机可在非商业许可下用于研究。可从 AI 开发平台 Hugging Face 下载。


Stability 是一家陷入困境的公司,其热门图像生成模型 Stable Diffusion就是 其背后的产品。去年, 埃里克·施密特 (Eric Sc​​hmidt) 和 Napster 创始人肖恩·帕克 (Sean Parker) 等投资者试图扭转公司局面,Stability 筹集了新的资金。据报道,Stability 联合创始人兼前首席执行官埃马德·莫斯塔克 (Emad Mostaque) 管理不善,导致 Stability 陷入财务困境,导致员工辞职、与 Canva 的合作关系破裂,投资者对公司前景感到担忧。


在过去的几个月里,Stability 聘请了一位新首席执行官,任命《泰坦尼克号》导演詹姆斯·卡梅隆为董事会成员,并 发布了几款新的图像生成模型。今年 3 月,该公司 还与芯片制造商 Arm 合作,为运行 Arm 芯片的移动设备带来了一种可以生成音频(包括音效)的 AI 模型。

79446
文章来源于网络,如有侵权请联系本站删除
二手好课
更多>>
年卡|有意转让
素描漫画
¥1500
次卡|北京【转让中关村柒音音乐课程】
音乐课
¥2000
年卡|南京韵琴邦成人钢琴零基础课程转售
钢琴课
¥2200
次卡|深圳海橙星琴行钢琴课程转让
钢琴课
¥2400
次卡|北京转让青桔音乐的课程!
钢琴课
¥2700
次卡|哈尔滨雅马哈钢琴课程
钢琴课
¥2700
次卡|贵阳雅马哈成人一对流行钢琴课
钢琴课
¥3000
次卡|上海7折出钢琴私教一对一课程
钢琴课
¥3400
年卡|常州音乐课程—吉他、钢琴、架子鼓、小提琴
音乐课
¥3500
年卡|深圳童话音乐课程转让
钢琴课
¥3900