扬帆创投微信小程序
更聚焦的出海投融资平台
精准高效领先的融资对接服务
微信扫一扫进入小程序

文生视频比起图生视频还有差距。

图片

 
作者丨周可
编辑丨火狐狸
 
近日,快手可灵AI网页端正式上线所有功能限时免费此前,可灵AI突然上线引发广泛关注,不少参与内测的用户放出来的内测视频效果惊艳,但当时使用可灵AI只能通过下载快影APP,在其内置的AI创作功能栏中申请内测资格。
 
最新数据来看,快影APP上,排队申请可灵AI内测的人数已经超过68万。此前,我们已经申请到可灵AI的内测资格。
 

图片

 
可灵AI网页版上线之后,在首页已经有“立即体验”入口,在网页端,用户可以使用“AI图片”功能(限免),“AI视频”功能支持最长3分钟的视频生成,不过,使用AI视频功能目前仍需申请排队等待。
 

图片

 
本次可灵AI网页端上线,我们综合测试了其文生图图生视频的效果。
 
首先是文生图功能,可灵AI目前文生图功能对外是免费的,且测试不限次数。
我们主要通过给出提示词来了解可灵AI在对提示词的理解,以及信息抓取表现方面的特点。
 
我们给出的一个提示词为:宫崎骏动画风格,远景,一位可爱的小女孩坐在树下,她大大的眼睛,长长的头发,戴着可爱的帽子,她快乐的微笑,身旁有厚厚的草地,布满鲜花,蝴蝶围绕在她身边,远处有一条小河,河水静静地流淌。
 
可灵生成的图片效果如下:
 

图片

 
可以看出,这张图片中对于“宫崎骏动画风格”以及小女孩,草地,鲜花,帽子,大眼睛,蝴蝶,小河等提示词中的元素表现的都非常丰富,包括面部表情的“微笑”也表现出来。
 
目前,可灵AI支持最多生成9张图
 
我们再次测试,在同一个提示词中表现出两个人物,这一次,我们给出的提示词是:插画风格,一位小女孩,短发,卷发,大大的眼睛,穿着粉红色的裙子,坐在树上,她背后有一双透明的翅膀,像个小天使一样坐在树上。树下有另一位小女孩,树下的小女孩有长长的头发,穿着黄色的碎花裙,她站在满是鲜花的草坪里,面对着树上的小女孩。远方有一座古老的城堡,城堡门口有一条石头铺成的小路。
 
可灵AI生成的图片如下:
 

图片

 
从图片质量上来看,两个小女孩的相关元素表现出来,和提示词的要求契合度都非常高,包括衣服的颜色,细节,发型等。
 
但是在这次可灵生成的9张图中,有一张图出现了明显的bug,图中居然出现了三位小女孩,这个信息识别的错误表现的过于明显,不知道是不是本次生成图片数量过多的原因,导致出现了如此明显的识别失误,不过好在其他8张图生成的效果都让人很满意,对于用户来说,并不影响挑选出合适的图片来使用。
 

图片

可灵AI生成的图片中多出一位小女孩
 
抛开这张bug图,其他8张图生成的效果,以及风格都相当不错,人物的面部表情,景物的排列,风景元素的特点呈现出来的都很唯美。
 
从商用的角度来说,这种效果对比小红书等自媒体上一些同类风格的AI作品,已经算是比较领先的。
 
当然了,比起文生图,可灵的文生视频和图生视频效果是用户们更期待的。
 
可灵的文生视频功能目前提供5秒和10秒两种选择,不过10秒视频生成的效果,每个内测用户每天仅限3次机会。
 
我们使用了和文生图一样的提示词,都是两个小女孩和城堡等元素,分别生成了5秒普通视频和10秒高质量视频,效果如下:
 
 
这段视频生成的效果比较一般,5秒钟的视频里,比较明显的动态画面就是树叶的随风摆动,但是人物动态表现并不明显
 
接下来我们继续以此提示词生成了10秒高质量风格视频,如下:
 
 
这段10秒的视频中,动态画面的表现效果不是很突出,整体画面的精致度并不好,对提示词元素的表达也不如文生图生成的画面那样优质,在视频动态表达方面,仅仅体现了:一位女孩回头,向前走了几步,即结束
 
无论是整体的画面效果,还是动态表现,这两个文生视频生成的视频效果都不是很出色。
 
我们尝试将可灵文生图生成的视频来做图生视频,同样使用可灵AI,这一次,我们给出了一句简单的提示词:穿黄色裙子的小女孩向城堡走去。
 
 
这次的视频,最明显的效果表现在人物活动上,穿黄色裙子的小女孩正常走路,身体的一致性表现出来的效果很不错,包括头发的飘动也都能看出有明显的动态效果。
 
在最新的可灵AI中,关于动态视频的运镜效果有所提升,针对于此,我们测试的另一条视频,即在可灵AI中先生成一条“女孩在海边骑自行车”的图片,再通过图生视频功能生成动态视频,这次生成的效果可以用“惊艳”来形容。
 
 
在这条视频里,女孩骑自行车的动作非常流畅,包括双腿运动的一致性表现很好,女孩运动时腿部的光影效果这种细节的表现也非常明显,其头发随风飘动的过程也非常符合现实场景特点,更让人感觉惊艳的是,随着女孩骑车向前,视频中女孩周围场景的运镜也表现出很明显的连贯性,包括左边的植物向后移动,右边的大海海平面的变化等,都非常符合现实场景环境。
 
可以说,这条视频中表现出来的场景和动画效果已经非常突出。
 
综合测试使用可灵AI视频生成功能可以发现,其视频生成动态性和人物动作一致性方面表现算是非常不错,目前来看,使用可灵生成视频,比较好的方式是借助可灵AI先做好文生图,其生成图片的效果,对信息的表现能力已经非常成功。
 
而其文生视频功能,无论是生成视频的画质,还是视频的动态效果,和图生视频生成的效果还有很大的差距。
 
在商业化运用方面,如果是进行设计,自媒体创作等场景运用,目前来看,可灵文生图功能表现非常让人满意,在进一步生成视频的时候,使用图生视频功能生成的效果更突出,整体的视频连贯性也比较好。
 
目前可灵AI的使用依然处于申请内测阶段,除了关注度最高的AI生成视频,可灵AI还覆盖AI舞王、AI情感视频、AI小说转漫画、AI头像壁纸等功能。

原文链接:点击前往 >

文章作者:周可

版权申明:内容仅供网友参考学习。如有侵权,请联系客服,扬帆出海欢迎行业优质稿件投稿。扬帆出海为您提供中国互联网出海权威资讯,提升出海认知;对接全球企业合作资源,构建企业本地化壁垒;10万+出海从业者社群,帮助打通行业人脉。 更多资讯关注扬帆出海官网:https://www.yfchuhai.com/

{{likeNum}}

好文章,需要你的鼓励

请前往扬帆出海小程序完成个人认证
认证通过后即可申请入驻
扫码添加小助手
微信扫描二维码,添加小助手
微信号:yfch24
扫码添加小助手
微信扫描二维码,添加小助手
微信号:yfch24
APP
小程序
微信公众号
微信小程序
扬帆出海APP
扬帆出海APP
微信
公众号
微信公众号
关注扬帆出海
专注服务互联网出海!
出海人
社群
微信公众号
扫码进群
与10万+出海人同行!