AI绘图 - 生成视频实验
原创 卡兹克 数字生命卡兹克 2023-03-02 19:19 天津
互动数据
- 阅读:1599
- 点赞:16
- 转发:17
- 喜欢:2
- 留言:1
最近又有大佬开发了stable-diffusion的插件,AI绘图继续升级,可以直接视频转视频。
其实以前就设想过场景,因为stable-diffusion有神器级的Controlnet插件,可以固定动作直接将某一张图渲染另一张图,视频嘛,其实也就是24张/秒或60张/秒拼起来的东西,那完全可以把视频渲染成序列帧用Controlnet插件固定姿势,Lora模型固定脸部,一帧一帧的渲染出来,最后再用PR或者AE拼成一个视频。
当然想想也就是想想,一张一张的渲染,10秒钟的24帧视频,就有240张图片了。。。工作量太大了。
但是感谢B站@瑟瑟发抖的小丁同学,开发了mov to mov的插件,太猛了,解放双手,导进去视频,出来是一个生成好的视频。
下面这个就是AI生成的实验。
效果其实还是不太稳定,求精致的话需要达芬奇去做后期稳定处理,并且对算力邀请还是挺高的,十几秒的视频,我3060渲了2个小时才完事。
即使效果一般,但是往后看,未来的空间,这想像力再一次被拉高。
我觉得就以现在的进化速度,生成稳定的AI视频要不了多久了,换脸换衣服换人可能成为未来不太新鲜的技术。
只能说,新技术固然好玩,但现在我看到的大多数生态,都在违法的边缘游走。
警惕吧。控制住自己。