AI搞视频生成,已经进化到这个程度了?!
对着一张照片随手一刷,就能让被选中的目标动起来!
![“神笔马良”真的来了!涂哪哪就动,Gen-2继续放大招!](https://pic.rmb.bdstatic.com/bjh/down/c2001d8395dd8c2ccc49efb69310f3c2.gif)
明明是一辆静止的卡车,一刷就跑了起来,连光影都完美还原:
![“神笔马良”真的来了!涂哪哪就动,Gen-2继续放大招!](https://pic.rmb.bdstatic.com/bjh/down/2f63439f7e3d46ded2ba74f75ffa5558.gif)
原本只是一张火灾照片,现在随手一刷就能让火焰直冲天际,热度扑面而来:
![“神笔马良”真的来了!涂哪哪就动,Gen-2继续放大招!](https://pic.rmb.bdstatic.com/bjh/down/e0e22550fea558766fb816a88b547b2f.gif)
这样下去,哪还分得清照片和实拍视频!
虽然只是个功能预热,不过效果一出就在网上爆火:
![“神笔马良”真的来了!涂哪哪就动,Gen-2继续放大招!](https://pic.rmb.bdstatic.com/bjh/down/a929cbba235c8682206bb1b49b0887e0.gif)
看得网友一个个变身急急国王,直呼“等不及想要尝试一波”。
Runway同时还放出了更多功能预热效果,一起来看看。
照片变视频,指哪就动哪
这个Runway新出的功能,叫做运动笔刷(Motion Brush)。
顾名思义,只需要用这个笔刷对着画面中的任意对象“涂”一下,就能让他们动起来。
不仅可以是静止的人,连裙摆和头部的动作都很自然:
![“神笔马良”真的来了!涂哪哪就动,Gen-2继续放大招!](https://pic.rmb.bdstatic.com/bjh/down/6fb1b7b628777c4229413000d6ba8047.gif)
还可以是流动的液体如瀑布,连雾气都能还原:
![“神笔马良”真的来了!涂哪哪就动,Gen-2继续放大招!](https://pic.rmb.bdstatic.com/bjh/down/2e7dde04134bed077006e14ae4d16448.gif)
或者是一根还没熄灭的烟:
![“神笔马良”真的来了!涂哪哪就动,Gen-2继续放大招!](https://pic.rmb.bdstatic.com/bjh/down/5563fd99cfc9198bc51862738d3676f6.gif)
一团正在众人面前燃烧的篝火:
![“神笔马良”真的来了!涂哪哪就动,Gen-2继续放大招!](https://pic.rmb.bdstatic.com/bjh/down/84ab344cdbbb163f143ed0ce79f04e58.gif)
更大块的背景也能做成动态的,甚至改变画面的光影效果,例如正在飞速移动的乌云:
![“神笔马良”真的来了!涂哪哪就动,Gen-2继续放大招!](https://pic.rmb.bdstatic.com/bjh/down/c1f48c0ca56338e3702c1140ca4b7084.gif)
当然,上面这些都还是Runway“亮明牌”,主动告诉你他们对照片“做了手脚”。
下面这些没有涂抹痕迹的视频,更是几乎完全看不出有AI修饰的成分在里面:
![“神笔马良”真的来了!涂哪哪就动,Gen-2继续放大招!](https://pic.rmb.bdstatic.com/bjh/down/f17c29f00bf678bebf08486d116b9404.gif)
一连串效果炸出,也导致功能还没正式放出来,网友已经迫不及待了。
不少人试图理解这个功能究竟是怎么实现的。也有网友更关注功能啥时候出,希望到时候直接321上链接(手动狗头)
确实可以期待一波了。
不过,不止是Runway推出的这个Motion Brush新功能。
最近一连串的AI生成进展似乎都在表明,视频生成领域似乎真要迎来技术大爆发了。
AI生成视频真要崛起了?
就像在这几天,还有网友开发了很火的文生动画软件Animatediff的新玩法。
只需要结合最新的研究LCM-LORA,生成16帧的动画视频只需要7秒钟的时间。
LCM-LORA是清华大学和Hugging Face新出的一个AI图片生成技术,可以让Stable Diffusion的图片生成速度大幅提升。
其中,LCM(Latent Consistency Models)是基于今年早些时候OpenAI的“一致性模型”提出来的一种图像生成新方法,能快速生成768×768的高分辨率图片。
但LCM不兼容现有模型,因此清华和抱抱脸的成员又新出了一版LCM-LORA模型,可以兼容所有Stable Diffusion模型,加速出图速度。
结合Animatediff软件,生成一个这样的动画只需要7秒钟左右:
![“神笔马良”真的来了!涂哪哪就动,Gen-2继续放大招!](https://pic.rmb.bdstatic.com/bjh/down/d5fdd71303298d070904e0e820903560.gif)
目前LCM-LORA已经在抱抱脸上开源。
你感觉最近的AI视频生成进展如何,距离可用上还有多远?
(转自:量子位)
© 版权声明
文章版权归作者所有,未经允许请勿转载。
相关文章
暂无评论...