即梦AI推全新“动作模仿” 功能:人物图片+参考视频生成同款动作视频

即梦 AI 发布了一项全新的 “动作模仿” 功能,旨在为用户提供更加生动和真实的 AI 视频创作体验。 这项功能由字节跳动的智能创作数字人团队提供技术支持,允许用户只需通过即梦 AI 的数字人入口,上传一张人物图片和一条参考视频,即可生成动态视频,让图片中的人物能够模仿参考视频中的动作,并准确还原情绪。 根据即梦 AI 的官方介绍,该 “动作模仿” 功能支持肖像、半身及全身等多种画幅类型,能够同步还原不同画幅下的肢体动作和人脸表情。

即梦 AI 发布了一项全新的 “动作模仿” 功能,旨在为用户提供更加生动和真实的 AI 视频创作体验。

这项功能由字节跳动的智能创作数字人团队提供技术支持,允许用户只需通过即梦 AI 的数字人入口,上传一张人物图片和一条参考视频,即可生成动态视频,让图片中的人物能够模仿参考视频中的动作,并准确还原情绪。

即梦AI推出“动作模仿”:图片人物一键动起来

根据即梦 AI 的官方介绍,该 “动作模仿” 功能支持肖像、半身及全身等多种画幅类型,能够同步还原不同画幅下的肢体动作和人脸表情。在人脸表情的控制上,即梦 AI 采用了自主研发的 face motion tokenizer 技术,能够精准提取驱动视频中的表情细节,从而大幅提升生成视频的生动性和真实感。

为进一步丰富用户的创作方式,即梦 AI 还提供了三种动作模板供用户选择。此外,用户还可以自行上传本地文件,生成的视频时长最长可达30秒。该功能的推出,不仅拓宽了 AI 技术在内容创作领域的应用场景,也为用户带来了更多的创作灵感和可能性。

为了确保平台内容的安全性与合规性,即梦 AI 承诺对用户上传的视频内容进行严格的安全审核。同时,在输出的视频上会添加 “AI 生成” 水印,以确保所有生成的内容符合平台规定。

划重点:

🌟 即梦 AI 推出 “动作模仿” 功能,用户可轻松将静态人物图片转变为动态视频。

🎨 该功能支持多种画幅类型,能够精准还原人物动作和表情。

🔒 平台将对内容进行严格审核,并添加 “AI 生成” 水印以保障合规性。

相关资讯

即梦 AI 上线 “动作模仿” 功能:一键让图片人物动起来

3月5日,即梦 AI 上线 “动作模仿” 功能,用户从“数字人”入口进入,只需上传一张人物图片和一条参考视频,就能生成一条动态视频,让图片里的人物模拟参考视频中的人物动作,连情绪都能一比一还原。 该功能支持包括肖像、半身以及全身在内的不同画幅,为用户提供更广阔的创作空间,更好地满足其创作需求。 图说:即梦“动作模仿”功能入口和玩法示意据介绍,即梦AI“动作模仿”功能由字节跳动智能创作数字人团队提供技术支持。

ASQuery:基于Query的时序动作分割新架构

1. 前言北京邮电大学与EVOL创新团队和ACG工业算法组针对时序动作分割任务共同提出了基于query新架构的模型ASQuery。ASQuery包含了动作及边界两种query,利用动作query将原先的帧维度分类过程转化为query与视频帧的相似度计算过程,提高了分类精度;利用边界query预测动作的边界,进一步平滑了原先的预测结果,大大缓解了过分割现象。论文ASQuery: A Query-based Model for Action Segmentation 已被ICME2024接收。论文地址:。2. 背景和动

ICCV 2023 | 重塑人体动作生成,融合扩散模型与检索策略的新范式ReMoDiffuse来了

来自南洋理工大学和商汤科技的研究者联合提出了一种全新的文本驱动动作生成框架——ReMoDiffuse。