大家好,我是花生~
最近拿到了 AI 创作平台 Dreamina 视频生成性能的内测资格,这也是暂时首个支援中文生成视频的 AI 工具,体验下来感觉很是不错,今天就带大家看看它具体的生成成果。
相关推荐:
Dreamina
官网: https://dreamina.jianying.com/ai-tool/home (AI 视频生成性能暂时处于内测阶段)
Dreamina 暂时支援文生图和图生图 2 项性能,提醒词支援中英文,2-3 分钟就能生成一个 3 秒的视频,这与暂时大部分的 AI 视频生成工具差不多。其文生图性能暂时的参数配置包括:
有静止、推进、拉远、向左转动、向右转动 5 种镜头静止可选;
可配置 5 种不同的视频比例,1:1/16:9/9:16/4:3/3:4;
快、中、慢 3 种静止速率可选。
文生视频的成果总体来说很是的清晰稳定,特别是在生成一些偏静物或者行动幅度不太大的视频时,成果很是做作,感觉间接做为视频素材使用都没有问题。
提醒词:特写镜头,一只熊蜂在花丛中飞舞
提醒词:夕阳下的田野,被风吹散的蒲公英
提醒词:一个粉色的笑脸气球向上漂浮
Dreamina 对动静的处置是很是到位的。比如生成 “飞奔的汽车” 时,可以通过轮胎的滚动和迅速倒退的背景较着感受到静止的速率,没有 “车轮在动但是背景不动” 的虚假感。
提醒词:一辆红色跑车在高速路上飞奔
提醒词:一个海龟在游动
人物行走姿势的生成成果最令我惊讶,虽然视频只有 3 秒,但 Dreamina 很是正确地呈现出模型双腿交叠向前、髋部扭动和双臂摆动的行动,总体做作流畅,相比之下 runway、morph 和 pika 行动就很像 “慢行动” 。
当然暂时文生图也存在一些比较较着的问题,比如在生成人物时,人物的面部五官以及手指的成果不太好,容易模糊或者出现残缺;以及生成静止幅度较大的视频时,画面内容也容易歪曲错误,不能保持很好的一致性。
提醒词:一位马拉松选手跑向终点,她举起双手庆祝
再来看一下图生视频的成果。图生视频的参数与文生图片基本是一致的,还是先通过一组对比直观感受一下 Dreamina 的动静处置成果。依旧是之前尝试用的小柴犬,提醒词都是 “一只柴犬,带着贝雷帽,穿着黑色高领毛衣”。虽然在提醒中没有增加行动描述,但 Dreamina 生成的视频有较着的摇头、瞬间行动,总体成果与 Runway 不相上下。
我还尝试了多种不同的风格的图象,Dreamina 的处置成果都不错。生成人物时会加上瞬间以及身体的做作晃动;生成物体静止的场景时,会自动增加环境细节,让动静能较着;以及生成之前大热的 “动物模特走 T 台” 视频,走路行动处置起来更是得心应手。
从尝试结果来看,静止速率以及提醒词对生成成果都有较着的影响。静止速率过高会让主体形象以及行动出现歪曲,调低之后成果会有较着改善;有时候加上提醒词反而会影响视频成果,不如间接用图片生成。
此外图生视频还支援配置结束帧,让用户可以更正确地控制视频变化成果。比如间接用图象+加提醒词 “一个小苗 向上生长”,视频并没有较着的动静;而如果在结束帧配置一个已经长大的树苗图片,那么生长动静会较着很多。