AI绘图 - 生成视频实验

原创 卡兹克 数字生命卡兹克 2023-03-02 19:19 天津

原文地址: https://mp.weixin.qq.com/s/tNZyPN8RUM9vr0dcth0y7w

互动数据

  • 阅读:1599
  • 点赞:16
  • 转发:17
  • 喜欢:2
  • 留言:1

最近又有大佬开发了stable-diffusion的插件,AI绘图继续升级,可以直接视频转视频。

其实以前就设想过场景,因为stable-diffusion有神器级的Controlnet插件,可以固定动作直接将某一张图渲染另一张图,视频嘛,其实也就是24张/秒或60张/秒拼起来的东西,那完全可以把视频渲染成序列帧用Controlnet插件固定姿势,Lora模型固定脸部,一帧一帧的渲染出来,最后再用PR或者AE拼成一个视频。

当然想想也就是想想,一张一张的渲染,10秒钟的24帧视频,就有240张图片了。。。工作量太大了。

但是感谢B站@瑟瑟发抖的小丁同学,开发了mov to mov的插件,太猛了,解放双手,导进去视频,出来是一个生成好的视频。

下面这个就是AI生成的实验。

效果其实还是不太稳定,求精致的话需要达芬奇去做后期稳定处理,并且对算力邀请还是挺高的,十几秒的视频,我3060渲了2个小时才完事。

即使效果一般,但是往后看,未来的空间,这想像力再一次被拉高。

我觉得就以现在的进化速度,生成稳定的AI视频要不了多久了,换脸换衣服换人可能成为未来不太新鲜的技术。

只能说,新技术固然好玩,但现在我看到的大多数生态,都在违法的边缘游走。

警惕吧。控制住自己。

关于ChatGPT的兄弟 - AI绘图的小思考

AI绘图傻瓜指南 - 5分钟带你生成你的专属AI妹子