Follow-Your-Emoji 是一个基于扩散模型的头像动画生成框架。可以将参考头像(例如照片、卡通人物、雕塑甚至动物)的表情和动作转换为动画。其主要特点是能够在保持原始头像身份特征的同时,生成自由风格和丰富表情的动画。
Follow-Your-Emoji通过使用MediaPipe提取面部的3D关键点生成2D表情感知标志,这些标志包含面部特征和瞳孔点但排除面部轮廓,作为运动表示引导动画生成过程,确保目标运动与参考肖像对齐,避免身份泄露,同时捕捉微妙表情变化,实现高保真、自然生动的肖像动画。
Support authors and subscribe to content
This is premium stuff. Subscribe to read the entire article.
Login if you have purchased
画宇宙,无限画板 + 无限创意支持画宇宙系列模型、百度文心 AI 绘画大模型、Draft、社区大模型等多种模型