有阵子没分享AI视频生成类工具了,这不,最近我又看了下视频生成大牛——可灵的功能,效果炸裂,能够实现以前很多不能想象的功能。
一、多模态编辑
所谓多模态编辑,顾名思义,就是可以通过一些AI手段来实现视频中置指定元素的替换、增加或者删除。
以前我可能没太理解这个功能有啥用,直到有一个我接到了一个这样的需求:
制作一个小孩手势比划的视频,有如说话一样,但是嘴巴不能动。
我起初以为,这个通过提示词控制一下就行,但试了几版效果之后,放弃了。
要么就是说话动作自然,但就是嘴巴动了。
提示词: 小沙弥站立着,嘴巴不动,但是两只手开始比划。
要么就是嘴巴虽然没动,但动作不像说话,还低头看自己手去了。
提示词: 这个人双手做出细致的手势变化,专注地做计划动作,身体保持稳定姿势,嘴巴自然闭合不发声,固定镜头。可灵积分本来就比较精贵,可得省着点用,我不敢再继续这样像撞大运一样roll下去了。
得想一个一步到位,更靠谱的方法。
于是我发现了今天这个非常牛的功能。
我们先来看看做出来的效果,这是对比第一个视频的效果,嘴巴完全闭合了,手部动作还是跟之前一模一样的,关键整体非常自然,没有任何二次编辑过的痕迹。
图片局部修复的功能我见多了,视频还能这样局部修复的,我这真是头一回见到。
这么牛的功能,没想到使用起来居然非常容易,我下面来教你方法,保证一教就会。
1.进入到与“图生视频”同一行的“多模态编辑”中。
可以看到有“替换元素”、“增加元素”、“删除元素”三种,我这次用到的是“替换元素”。
2.上面第一个格子里是上传要修改的视频。上传了之后,点击"增加选区",点击头部,是可以自动识别区域并自动选中的,非常智能。
3.接下来第二个格子就只需要上传图片了,这里采用的是框选矩形的方式,选中头部即可。
4.重中之重来了,写提示词,其实创意描述中已经写好了框架,即:
“使用@图片1中的【】,替换@视频中的【】”
我们只要在【】中填词即可,我尝试着用自然语言描述,使用@图片1中的【闭嘴表情】,替换@视频中的【说话表情】。
没想到效果就如前面所示,特别好。
有了这个功能,咱们的想象空间一下子扩大了很多,比如,你想把某个人手上拿的东西替换成另外一个,给人换个装,在人身上加一个外饰,减少一个外饰都是信手拈来。不过,你想干什么不合理的事情,呵呵,那可没门~~~
二、动作控制
除了多模态编辑功能,此次可灵还更新了多个新功能。首先就是可以在生成视频的同时可以带音频,终于不再是默片的感觉了。
AI模型版本也从1.6升级到了2.1。
1.6版本还新增了一个“动作控制”功能。我们现在就来看看这个功能有什么神奇之处。
这个功能是藏在“图生视频”中的。
1、上传一张图片后,你可以看到,“创意描述”下面就是“动作控制”了。
2、点击“动作控制”右侧的“控制按钮”。会进行一番角色分析。然后就生成了一个木头人模型,这个居然是3D效果的。
除了有预置的6个动作,像跑步、滑步、哪吒动作、科目三等。
我们先试一个“哪吒”动作。选择之后点击右下角“确认使用”即可。
有了这么精准的动作控制,连提示词都不用输入了。我们直接看看效果,实在是生动,哪吒动作栩栩如生。
3、不满足这几个预置动作,我们还可以上传视频。看到了右上角那个“上传视频”了嘛。上传自己的动作视频,然后就可以复刻任何动作了。
如今,有了AI的加持,视频创作者们仿佛有了一把利器,高手们可以极大地降低创作成本,普通小白只要有创意也可以实现自己心中天马行空的各式想法。
这是一个最好的时代,人人皆因AI而放大能力。