5分钟让你用上Runway的免费开源平替 - AI视频新秀Stable Video Diffusion

原创 数字生命卡兹克 数字生命卡兹克 2023-11-27 22:33 天津

原文地址: https://mp.weixin.qq.com/s/il3YahMQyw55KdQ7acxIow

互动数据

  • 阅读:5125
  • 点赞:101
  • 转发:488
  • 喜欢:26
  • 留言:13

前几天,AI届开源先锋,Stability终于对视频下手了。

他们在开源了AI绘图大模型(大名鼎鼎的Stable  Diffusion)和AI文本大模型(Stable LM)之后,终于集齐了自己的全部多模态,开源了AI视频大模型Stable Video Diffusion

效果还非常离谱。

很强,非常强,甚至在很多方面,可以直接对标Runway和PIKA。

重要的是,他不要钱啊!!!

但是其性能超高的要求,直接把大部分人拒之门外。

当然也包括我(笑)。

毕竟,不仅要各种部署,还要20G显存起步的玩意,真不是普通人能玩的起。。。

所以我一直在等,等那种有手就行,还不需要显卡可以上云的项目,再安利给大家。

直到我在老朋友∶仙宫云上看到有个大佬做了这么一个镜像

春天来了~

打开仙宫云:

https://www.xiangongyun.com/register/V76GG5

正常去租一张4090的卡,然后在社区镜像这块,搜索SVG。选择第一个,2毛钱1小时的这个。

虽然作者要收费,但是这价格,相比Runway的使用成本,还是低了不少。

然后直接部署。

大概几秒钟后,就部署好了,可以直接点开右边的WebUI那个按钮,你就可以看到SVG的页面了。

非常简单,直接把图拖到顶部,然后点击启动,下面就可以直接生成视频了。需要注意的事,图片只能支持1024*576的尺寸,所以一定要只扔这个尺寸的图进来。

大概70s以后,你就可以得到你的4s的视频了~

比如我的这个火箭,极其轻易的就实现了RunwayGen2之前死活做不了的火箭升空的画面。

再放几个用SVD做的例子:

但是SVD强归强,也不是万能的。

尺寸有限制,不支持摄像机运动,可控性较差,清晰度较差等等。

但是嘛,AI这玩意,你懂的。

能列出来的这些已经被前辈Runway解决的问题,那都不叫问题。

估计要不了两个月,就能看到翻天覆地的变化。

同时,stability自己也快出他们的在线AI视频生成工具了。可以去排队一下,地址:https://stability.ai/contact

希望大家都能愉快的玩起来~