可灵多模态编辑玩疯了:给人换装、学动作、换表情,视频 PS 时代正式开启!

有阵子没分享AI视频生成类工具了,这不,最近我又看了下视频生成大牛——可灵的功能,效果炸裂,能够实现以前很多不能想象的功能。


一、多模态编辑

所谓多模态编辑,顾名思义,就是可以通过一些AI手段来实现视频中置指定元素的替换、增加或者删除。

以前我可能没太理解这个功能有啥用,直到有一个我接到了一个这样的需求:

制作一个小孩手势比划的视频,有如说话一样,但是嘴巴不能动。

我起初以为,这个通过提示词控制一下就行,但试了几版效果之后,放弃了。

要么就是说话动作自然,但就是嘴巴动了。

提示词: 小沙弥站立着,嘴巴不动,但是两只手开始比划。

要么就是嘴巴虽然没动,但动作不像说话,还低头看自己手去了。

提示词:  这个人双手做出细致的手势变化,专注地做计划动作,身体保持稳定姿势,嘴巴自然闭合不发声,固定镜头。

可灵积分本来就比较精贵,可得省着点用,我不敢再继续这样像撞大运一样roll下去了。

得想一个一步到位,更靠谱的方法。

于是我发现了今天这个非常牛的功能。

我们先来看看做出来的效果,这是对比第一个视频的效果,嘴巴完全闭合了,手部动作还是跟之前一模一样的,关键整体非常自然,没有任何二次编辑过的痕迹。

图片局部修复的功能我见多了,视频还能这样局部修复的,我这真是头一回见到。

这么牛的功能,没想到使用起来居然非常容易,我下面来教你方法,保证一教就会。

1.进入到与“图生视频”同一行的“多模态编辑”中。

可以看到有“替换元素”、“增加元素”、“删除元素”三种,我这次用到的是“替换元素”。

2.上面第一个格子里是上传要修改的视频。上传了之后,点击"增加选区",点击头部,是可以自动识别区域并自动选中的,非常智能。

3.接下来第二个格子就只需要上传图片了,这里采用的是框选矩形的方式,选中头部即可。

4.重中之重来了,写提示词,其实创意描述中已经写好了框架,即:

“使用@图片1中的【】,替换@视频中的【】”

我们只要在【】中填词即可,我尝试着用自然语言描述,使用@图片1中的【闭嘴表情】,替换@视频中的【说话表情】。

没想到效果就如前面所示,特别好。

有了这个功能,咱们的想象空间一下子扩大了很多,比如,你想把某个人手上拿的东西替换成另外一个,给人换个装,在人身上加一个外饰,减少一个外饰都是信手拈来。不过,你想干什么不合理的事情,呵呵,那可没门~~~

二、动作控制

除了多模态编辑功能,此次可灵还更新了多个新功能。首先就是可以在生成视频的同时可以带音频,终于不再是默片的感觉了。

AI模型版本也从1.6升级到了2.1。

1.6版本还新增了一个“动作控制”功能。我们现在就来看看这个功能有什么神奇之处。

这个功能是藏在“图生视频”中的。

1、上传一张图片后,你可以看到,“创意描述”下面就是“动作控制”了。

2、点击“动作控制”右侧的“控制按钮”。会进行一番角色分析。然后就生成了一个木头人模型,这个居然是3D效果的。

除了有预置的6个动作,像跑步、滑步、哪吒动作、科目三等。

我们先试一个“哪吒”动作。选择之后点击右下角“确认使用”即可。

有了这么精准的动作控制,连提示词都不用输入了。我们直接看看效果,实在是生动,哪吒动作栩栩如生。

3、不满足这几个预置动作,我们还可以上传视频。看到了右上角那个“上传视频”了嘛。上传自己的动作视频,然后就可以复刻任何动作了。


如今,有了AI的加持,视频创作者们仿佛有了一把利器,高手们可以极大地降低创作成本,普通小白只要有创意也可以实现自己心中天马行空的各式想法。

这是一个最好的时代,人人皆因AI而放大能力。

©著作权归作者所有,转载或内容合作请联系作者
平台声明:文章内容(如有图片或视频亦包括在内)由作者上传并发布,文章内容仅代表作者本人观点,简书系信息发布平台,仅提供信息存储服务。

推荐阅读更多精彩内容