AI 根据声音内容帮照片“对口型”,蚂蚁集团开源 EchoMimic 项目

蚂蚁集团 10 日开源了名为 EchoMimic 的新项目,其能够通过人像面部特征和音频来帮人物“对口型”,结合面部标志点和音频内容生成较为稳定、自然的视频。该项目具备较高的稳定性和自然度,通过融合音频和面部标志点(面部关键特征和结构,通常位于眼、鼻、嘴等位置)的特征,可生成更符合真实面部运动和表情变化的视频。其支持单独使用音频或面部标志点生成肖像视频,也支持将音频和人像照片相结合做出“对口型”一般的效果。据悉,其支持多语言(包含中文普通话、英语)及多风格,也可应对唱歌等场景。 AI在线附相关链接:项目地址: G

蚂蚁集团 10 日开源了名为 EchoMimic 的新项目,其能够通过人像面部特征音频来帮人物“对口型”,结合面部标志点和音频内容生成较为稳定、自然的视频。

AI 根据声音内容帮照片“对口型”,蚂蚁集团开源 EchoMimic 项目

该项目具备较高的稳定性和自然度,通过融合音频和面部标志点(面部关键特征和结构,通常位于眼、鼻、嘴等位置)的特征,可生成更符合真实面部运动和表情变化的视频。

其支持单独使用音频或面部标志点生成肖像视频,也支持将音频和人像照片相结合做出“对口型”一般的效果。据悉,其支持多语言(包含中文普通话、英语)及多风格,也可应对唱歌等场景。

AI在线附相关链接:

项目地址:https://badtobest.github.io/echomimic.html

Github:https://github.com/BadToBest/EchoMimic

给TA打赏
共{{data.count}}人
人已打赏
应用

这些VLM竟都是盲人?GPT-4o、Sonnet-3.5相继败于「视力」测试

2024-7-11 16:39:00

应用

GitHub 8k Star,一作实习生,字节这个大模型成果被苹果选中了

2024-7-11 16:49:00

0 条回复 A文章作者 M管理员
    暂无讨论,说说你的看法吧
个人中心
今日签到
搜索