腾讯混元联合港科大、清华大学推出肖像动画生成框架“Follow Your Emoji”，只需给定一张照片，“Follow Your Emoji”就能将其转化为“活龙活现”的面部动画，同时能够捕捉微妙心情变化。IT之家附论文地址：：，“Follow Your Emoji”可以支撑对面部进行精细化的控制，包括眉毛，眸子，翻白眼等细节，植物心情包也可以轻松“拿捏”。此外，Follow Your Emoji 不仅支撑单个心情多肖像的生成，也支撑单个肖像多心情的生成。▲ 最左为原始图片“Follow Your Emoji”有
腾讯混元联合港科大、清华大学推出肖像动画生成框架“Follow Your Emoji”，只需给定一张照片，“Follow Your Emoji”就能将其转化为“活龙活现”的面部动画，同时能够捕捉微妙心情变化。
IT之家附论文地址：https://arxiv.org/html/2406.01900v1
项目地址：https://follow-your-emoji.github.io/
基于算法革新和数据积累，“Follow Your Emoji”可以支撑对面部进行精细化的控制，包括眉毛，眸子，翻白眼等细节，植物心情包也可以轻松“拿捏”。此外，Follow Your Emoji 不仅支撑单个心情多肖像的生成，也支撑单个肖像多心情的生成。
▲ 最左为原始图片
“Follow Your Emoji”有以下特点：
身份保持：在动画生成过程中，保证参考头像的身份特征不会丢失。
心情丰富：生成各种夸张和纤细的心情，如大幅度的瞳孔运动。
作风多样：支撑多种作风的头像动画，包括卡通、现实、雕塑或植物作风。
稳定持久：使用渐进生成策略，保证长时间动画的稳定性和一致性。
▲ 论文过程图，上半部分为训练过程，下半部分为测试过程