首尾帧是一个AI视频创作者经常会用到的功能,最近爆火的山海经神兽变身、万物有灵各种精变身,其核心技术就是这个首尾帧功能。
它可以用于创建各种视觉效果,如物体的变形、场景的转换、角色的动作等。
不仅能精确地控制视频的开头和结尾状态,使视频内容与预设相匹配;还能凭借AI的超能力构建连贯的过渡,使视频整体非常流畅;再也不用手动一帧一帧构建画面,就可以让我们的创意快速变成视频。
禾刀学习群里的小伙伴经常问禾刀:都有哪些AI工具有这个首尾帧功能?到底哪个效果更好?
于是,禾刀今天汇总了目前能找到的国内外7款具备首尾帧功能的AI工具,分享给大家。不仅有工具的访问链接和实操教程,禾刀还选了一个典型的狐狸变身作为样例,让朋友们直观地感受一下每个工具的特点和能力。
科普小课堂:啥是首尾帧
首尾帧功能,就是用户指定一段视频的开始画面(首帧图片)和结束画面(尾帧图片),中间的动态通过提示词让AI来自动生成,从而创建一个从首帧平滑过渡到尾帧的视频。
实操案例简介
禾刀准备了两张图片,一张狐狸,一张美女。
又准备了一段变身提示词:
狐狸转身羽化变成人物,丝滑过渡,烟雾缭绕,充满了奇幻和神秘感极致细节,超真实动态捕捉
后面每个工具都用这两张图片和这段提示词来生成,只生成一次。
说明一下,每个工具禾刀都只抽了一次卡,也许多抽一下能抽出效果更好的视频片段也不一定,效果仅供参考。
国产工具大汇总
1
可灵AI
网址:https://klingai.kuaishou.com/
首页——左侧菜单“AI视频”。
模型切换到“可灵1.5”,选“图生视频”,上传两张图片,填写提示词,点“立即生成”即可。
模型只能选“可灵1.5”,可灵1.6暂时不支持首尾帧。
非会员等待时间会很长。
可灵的动效转换都非常自然,最后美女的画面有点短暂。
2
通义万相
网址:https://tongyi.aliyun.com/wanxiang/
首页,左侧菜单“视频生成”,选“图生视频”,打开“首尾帧”开关,上传两张图片,填写提示词,打开“智能扩写”,打开“灵感模式”和“视频音效”,点“生成视频”即可。
通义万相生成的视频可以自带音效。
通义完全免费无限制,生成效果相当能打。人物外貌比较稳定,动效弱一点。
3
即梦AI
网址:https://jimeng.jianying.com/ai-tool/home
首页,点左侧“视频生成”或点上面的“视频生成”,进入视频生成页面。
依次点视频生成、图片生视频,打开“使用尾帧”开关,上传两张图片,填写提示词,视频模型需要切换到“视频1.2”,点击“生成视频”。
后面还有运镜控制、运动速度、模式选择、生成时长等更多的参数设置:
1、视频模型需要切换到“视频1.2”,其他模型暂时不支持首尾帧;
2、流畅模式会比标准模式更丝滑一些。
即梦的效果也很不错,动效转换都比较丝滑,就是尾帧感觉略微仓促了一些,没完全固定住。
4
Vidu
网址:https://www.vidu.com/zh/create
首页,点左侧“图生视频”或点右边的“图生视频”里的“创作”,进入视频生成页面。
选模型,点“图生视频”,上传两张图片,填写提示词,设置时长等参数,点“创作”即可。
三个不同版本都支持首尾帧功能,新上线Vidu 2.0速度更快、画面更稳,也支持首尾帧。
Vidu 2.0新模型确实非常稳定,尤其是狐狸和美女的外貌特别稳,对提示词中“烟雾”的部分也到位,但没有理解到“狐狸转身”。
国外工具大汇总
国外工具都需要特殊网络,懂得都懂。
且提示词需要预先翻译成英文。
5
Haiper
网址:https://haiper.ai/
点上面“Image to Video”或者点下面“Click to create”都可以打开对话窗口。
打开“Keyframe Conditioning”开关,支持上传首帧、中帧、尾帧三个图片,也可以只上传其中某张或某两张,填写提示词(需要翻译成英语),点“Create”就行。
新账户只有30积分,只能用Haiper 1.5,新上的2.5模型也支持首尾帧,但会报“余额不足”用不了,感兴趣可以充值试试。
不仅支持首尾帧,还支持在中间增加一个过渡关键帧。
不是护犊子,真觉得没有国内的效果好,不禁有点扭曲,中间还出现了欧美脸。
6
Runway Gen-3 Alpha
网址:https://runwayml.com/
首页——右上角“Get Started”进入Dashbord,点左边菜单的“Generate Video”
上传第一张图片后,就会出现三个图片的位置,支持上传三张图片,也可以只上传其中2张,填写提示词,点“Generate”生成。
不仅支持首尾帧,还支持在中间增加一个过渡关键帧。
提示“由于需求量大,免费计划的生成服务暂时不可用。”…………我也没舍得充值……所以没有生成效果,不过据其他博主实测,貌似效果至少不惊艳。
7
Luma
网址:https://dream-machine.lumalabs.ai/
首页,点中间的“Start a board”。
点右下角的“KEYFRAME”,依次点“Keyframe”-“Videos”,左边会出现两张图片的位置。
点+上传两张图片,填写提示词,提交即可。
网页版一直是“Waiting for your turn”。用手机上的MolicaAI的会员生成了一个。除了中间会出现欧美脸,其他还可以。
汇总对比
禾刀把国内4款工具生成的视频放到这里给大家做个直观对比。(国外的不足以拿来对比……好吧,实际情况是排版实在是没弄好……)。
第一排从左到右是可灵、通义。第二排从左到右是即梦、Vidu。
不知道你们发现没有?每个AI工具其实都有自己的特点。单从禾刀测试的这个场景来看,通义和Vidu在角色形象的稳定性上比较突出,即梦和可灵在动效上比较突出,国外的嘛在费用上比较突出。
所以如果遇到一个难题,不妨每个工具都试一下,说不定哪一个就更擅长一些。
一点感受
看完了禾刀分享的这几款有首尾帧功能的AI工具(国内4款、国外3款),朋友们有什么感受?
禾刀自己的感受就是,真不必觉得“月亮都是国外的圆”,现在国内也相当猛,AI工具不仅多,而且效果棒!不仅不会逊色于国外,甚至都已经超越。关键对国人还友好,不需要解决复杂的网络问题,不需要翻译成外语,最关键是大部分也不需要充值!
大家按需选用吧~~我的分享就到这里了,你们喜欢用哪个工具呢?欢迎评论区告诉禾刀~~~
公众号『副业普拉斯』
专注网络赚钱/副业项目/教程
扫码关注不迷路
站长微信:860056696