感谢腾讯和清华大学、香港科技大学联合推出全新图生视频模型 “Follow-Your-Click”,目前已经上架 GitHub(代码四月公开),同时还发表了一篇研究论文(IT之家附 DOI:2403.08268)。
这款图生视频模型主要功能包括部分动画生成和多东西动画,反对多种作为表达,如头部调整、翅膀拍动等。
据介绍, Follow-Your-Click 可以通过用户的点击和冗长作为提醒生成部分图像动画。用户只需点击对应地区,加上少量提醒词,就可以让图片中原本动态的地区动起来,一键转换成视频,比如让物体微笑、舞蹈或飞舞。
除了能够控制单个东西的动画,这个框架还反对同时对多个东西进行动画处理,增加了动画的复杂性和丰富性。用户可以通过简单的点击和短语提醒轻松地指定希望动画化的地区和作为类型,无需复杂的操作或详细描述。