真实感3D人脸表情合成技术研究进展 被引量：10

1

作者 万贤美 金小刚 《计算机辅助设计与图形学学报》 EI CSCD 北大核心 2014年第2期167-178,共12页

文中综述了真实感3D人脸表情合成技术的研究进展.根据所采用的技术,将人脸表情合成方法划分为混合样本人脸表情合成、直接表情迁移、基于sketch的人脸表情合成与编辑、基于机器学习的真实感人脸表情合成、高分辨率人脸表情和细节的提取... 文中综述了真实感3D人脸表情合成技术的研究进展.根据所采用的技术,将人脸表情合成方法划分为混合样本人脸表情合成、直接表情迁移、基于sketch的人脸表情合成与编辑、基于机器学习的真实感人脸表情合成、高分辨率人脸表情和细节的提取与合成5类,介绍了各类方法的研究现状,并比较了它们的优缺点.最后进行了总结,并对人脸表情合成技术未来的研究方向予以展望. 展开更多

关键词 表情合成 表情编辑 混合样本 表情迁移 人脸细节

下载PDF 职称材料

基于2D几何与纹理信息分离模型的表情分析与合成 被引量：4

2

作者 林学■ 洪鹏宇 《电子学报》 EI CAS CSCD 北大核心 1998年第11期124-127,共4页

本文提出一种用于特定人逼真表情图像合成的新方法该方法利用二维网格描述脸部呈现不同表情时的几何变化，并使用主分量分析方法将该网格序列用参数化模型表示，从而极大地压缩了数据在重构表情图像时利用参考帧提供的场景纹理信息，结... 本文提出一种用于特定人逼真表情图像合成的新方法该方法利用二维网格描述脸部呈现不同表情时的几何变化，并使用主分量分析方法将该网格序列用参数化模型表示，从而极大地压缩了数据在重构表情图像时利用参考帧提供的场景纹理信息，结合网格参数模型提供的几何信息，使用图像卷曲与插值技术，生成逼真表情图像．目前使用该方法对人脸下半部表情图像分析及合成进行了初步的实验。 展开更多

关键词 表情图像 表情分析 表情合成 主分量分析

下载PDF 职称材料

非线性联合学习的三维人脸表情合成方法 被引量：7

3

作者 黄晓钦 林裕旭 +2 位作者 宋明黎 卜佳俊 陈纯 《计算机辅助设计与图形学学报》 EI CSCD 北大核心 2011年第2期363-370,376,共9页

针对人脸表情数据的非线性分布特性,提出一种基于非线性联合学习的三维人脸表情合成方法.首先提出非线性联合学习理论,通过无监督回归将具有相同属性的三维人脸映射到相同的低维表达;其次,基于三维人脸的低维表达对低维表达进行重建操作... 针对人脸表情数据的非线性分布特性,提出一种基于非线性联合学习的三维人脸表情合成方法.首先提出非线性联合学习理论,通过无监督回归将具有相同属性的三维人脸映射到相同的低维表达;其次,基于三维人脸的低维表达对低维表达进行重建操作,为给定的三维人脸合成表情,或基于样例表情进行表情的重定向.另外,非线性联合学习方法还能有效地处理带噪声及不完整的人脸数据,获得完整的表情人脸.实验结果表明,文中方法的表情重定向合成结果及合成效率优于已有方法. 展开更多

关键词 表情重定向 表情合成 非线性联合学习 无监督回归

下载PDF 职称材料

基于MPEG-4的融合多元素的三维人脸动画合成方法 被引量：7

4

作者 尹宝才 王恺 王立春 《北京工业大学学报》 EI CAS CSCD 北大核心 2011年第2期266-271,共6页

为了实时合成真实感的可视语音,提出了一种融合口型、表情等多种运动元素的三维人脸动画合成方法.以MPEG-4人脸动画标准为基础,建立了汉语音节口型库和人脸基本表情库,通过在人脸动画参数上对共同影响面部运动的多种元素进行加权融合,... 为了实时合成真实感的可视语音,提出了一种融合口型、表情等多种运动元素的三维人脸动画合成方法.以MPEG-4人脸动画标准为基础,建立了汉语音节口型库和人脸基本表情库,通过在人脸动画参数上对共同影响面部运动的多种元素进行加权融合,合成出最终的动画序列.实验结果表明,该方法有效融合了面部运动的多种元素,同时具有真实感和实时性的优点. 展开更多

关键词 人脸动画 可视语音合成 表情合成 MPEG-4

下载PDF 职称材料

利用Bézier曲面的面部表情和口型几何造型 被引量：3

5

作者 尹宝才 高文 《计算机学报》 EI CSCD 北大核心 1998年第S1期347-350,共4页

本文主要介绍-汉语文本驱动的基本表情和口型的合成系统中的面部表情和口型几何造型．通过对面部曲面结构和面部各器官分布结构的分析，建立了面部曲面的几何模型和模拟人脸面部曲面的分片二次直积形Bezier参数曲面计算格式．应用此模... 本文主要介绍-汉语文本驱动的基本表情和口型的合成系统中的面部表情和口型几何造型．通过对面部曲面结构和面部各器官分布结构的分析，建立了面部曲面的几何模型和模拟人脸面部曲面的分片二次直积形Bezier参数曲面计算格式．应用此模型和算法，依据面部表情和汉语口型特征，实现基本表情和口型的造型． 展开更多

关键词 表情合成 口型合成 BEZIER曲面 几何连续

下载PDF 职称材料

基于自注意力机制和谱归一化的GAN表情合成 被引量：5

6

作者 苏梦晶 王波 刘本永 《智能计算机与应用》 2022年第4期121-125,129,共6页

为实现更具真实感的表情图像合成,探讨一种基于自注意力机制和谱归一化的生成式对抗网络(GAN)表情合成方法。通过在生成器中引入2层自注意力模块,使生成器能够在局部建立丰富的上下文关系,输出更加真实的表情细节;同时,在鉴别器中引入... 为实现更具真实感的表情图像合成,探讨一种基于自注意力机制和谱归一化的生成式对抗网络(GAN)表情合成方法。通过在生成器中引入2层自注意力模块,使生成器能够在局部建立丰富的上下文关系,输出更加真实的表情细节;同时,在鉴别器中引入谱归一化,使鉴别器的训练更加稳定。实验结果表明,该模型在主观视觉和FID图像评价指标上均优于其他典型算法,图像质量和表情细节有明显提高。 展开更多

关键词 表情合成 生成对抗网络 自注意力机制 谱归一化

下载PDF 职称材料

时空人脸表情动画编辑 被引量：4

7

作者 万贤美 金小刚 《计算机辅助设计与图形学学报》 EI CSCD 北大核心 2013年第8期1183-1189,共7页

为了提高计算机合成人脸表情动画的后期制作效率,提出一种基于时空的人脸表情动画编辑方法.首先使用基于拉普拉斯的网格变形技术将用户的编辑效果在空间域传播到整个人脸模型,很好地保留了中性人脸模型的几何细节特征,从而提高合成表情... 为了提高计算机合成人脸表情动画的后期制作效率,提出一种基于时空的人脸表情动画编辑方法.首先使用基于拉普拉斯的网格变形技术将用户的编辑效果在空间域传播到整个人脸模型,很好地保留了中性人脸模型的几何细节特征,从而提高合成表情的真实感;然后使用高斯函数将用户编辑效果在时间域传播到邻近表情序列,保持人脸表情动画的平滑过渡,所合成人脸表情动画与初始给定数据保持一致.该方法为用户提供了人脸表情动画编辑的局部控制,可由用户指定编辑的影响范围,使得编辑效果在指定范围内自然传播.实验结果表明,文中方法所合成人脸表情动画自然、真实,有效地提高了数据驱动人脸表情动画的编辑效率. 展开更多

关键词 人脸动画 表情编辑 表情合成 运动传播

下载PDF 职称材料

文本驱动下的表情合成系统 被引量：2

8

作者 赵震 王普 卢增祥 《计算机工程》 CAS CSCD 北大核心 2003年第9期152-154,共3页

阐述了一种通过文本来实时驱动表情合成的系统的工作原理：在给表情进行基本分类后，将这些分类与具有感情色彩的词形成对应关系。然后在对句子的切词过程中找到这些词，并判断它们在句子中的性质，由一定的修饰关系和主谓关系讨论它们... 阐述了一种通过文本来实时驱动表情合成的系统的工作原理：在给表情进行基本分类后，将这些分类与具有感情色彩的词形成对应关系。然后在对句子的切词过程中找到这些词，并判断它们在句子中的性质，由一定的修饰关系和主谓关系讨论它们对虚拟人物的表情的影响。最后利用表情与肌肉运动的对应关系，驱动虚拟人物面部表情，呈现给使用者。该文希望通过对文本驱动表情技术的研究，完善交互系统和虚拟系统，解决虚拟人物表情实时合成问题，并降低虚拟人物的制作费用，提高制作效率。 展开更多

关键词 表情合成 文本驱动 表情顺延 虚拟人物 情绪提取

下载PDF 职称材料

单张照片输入的人脸动画系统 被引量：4

9

作者 杜志军 王阳生 《计算机辅助设计与图形学学报》 EI CSCD 北大核心 2010年第7期1188-1193,共6页

人脸动画不仅包括表情的变化,同时涉及眼睛和头部的动作.为了方便、逼真地生成这些丰富的动画效果,提出一个基于单张照片的人脸动画系统.首先利用梯度场修改的方法将样本表情映射到输入人脸上,为了避免样本人脸上斑点等非表情信息的映射... 人脸动画不仅包括表情的变化,同时涉及眼睛和头部的动作.为了方便、逼真地生成这些丰富的动画效果,提出一个基于单张照片的人脸动画系统.首先利用梯度场修改的方法将样本表情映射到输入人脸上,为了避免样本人脸上斑点等非表情信息的映射,采取WLS算子对样本表情进行滤波;然后对输入图像的眼睛部分进行纹理合成处理,利用合成的眼球和眼白纹理来生成眼睛的动作;最后借助一个3D人脸模型来实现输入图像头部姿态的改变.实验结果表明,该系统能够实时地生成逼真、自然的动画效果. 展开更多

关键词 人脸动画 表情合成 眼睛处理 头部姿态

下载PDF 职称材料

基于改进CycleGan模型和区域分割的表情动画合成 被引量：4

10

作者 叶亚男 迟静 +2 位作者 于志平 战玉丽 张彩明 《计算机科学》 CSCD 北大核心 2020年第9期142-149,共8页

针对现有人脸表情合成大多依赖于数据源驱动,且存在生成效率低、真实感差的问题,提出一种基于改进CycleGan模型和区域分割的表情动画合成新方法。新方法可实时地合成新表情动画,且具有较好的稳定性和鲁棒性。所提方法在传统CycleGan模... 针对现有人脸表情合成大多依赖于数据源驱动,且存在生成效率低、真实感差的问题,提出一种基于改进CycleGan模型和区域分割的表情动画合成新方法。新方法可实时地合成新表情动画,且具有较好的稳定性和鲁棒性。所提方法在传统CycleGan模型的循环一致损失函数中构造新的协方差约束条件,可有效避免新表情图像生成时出现的色彩异常和模糊不清等现象;提出分区域训练的思想,用Dlib人脸识别数据库对人脸图像进行关键点检测,通过检测到的关键特征点将源域和目标域的人脸分割成左眼、右眼、嘴部和剩余人脸部分共4个区域块,并利用改进的CycleGan模型对每块区域单独进行训练;最后将训练结果加权融合成最终的新表情图像。分区域训练进一步增强了表情合成的真实感。实验数据来自英国萨里大学的语音视觉情感(SAVEE)数据库,在Tensorflow框架下,用python 3.4软件进行实验结果的展示。实验表明,新方法无需数据源驱动,可直接在源人脸动画序列上实时地生成真实、自然的新表情序列,且对于语音视频可保证新面部表情序列与源音频同步。 展开更多

关键词 表情合成 区域分割 CycleGan 协方差约束 深度学习

下载PDF 职称材料

人脸表情合成算法综述 被引量：2

11

作者 郭迎春 王静洁 +4 位作者 刘依 夏伟毅 张吉俊 李学博 王天瑞 《数据采集与处理》 CSCD 北大核心 2021年第5期898-920,共23页

人脸表情合成技术旨在保留人脸身份信息的情况下,对人脸表情进行重建,从而生成具有新表情的源人脸图像。深度学习的发展为表情合成提供了全新的解决方案,本文从特征提取、生成对抗网络的表情合成和实验评估方面综述了人脸表情合成技术... 人脸表情合成技术旨在保留人脸身份信息的情况下,对人脸表情进行重建,从而生成具有新表情的源人脸图像。深度学习的发展为表情合成提供了全新的解决方案,本文从特征提取、生成对抗网络的表情合成和实验评估方面综述了人脸表情合成技术的发展。首先,介绍了人脸特征的提取,这是表情合成任务中的一项关键技术,人脸特征可客观全面地描述人脸表情状态。其次,分析了表情合成领域中主流的基于深度学习的方法,主要针对生成对抗网络(Generative adversarial network,GAN)的发展现状,探讨了基于生成对抗网络的表情合成方法。通过对人脸数据集及实验评估方法的深入研究,总结出广泛使用的人脸表情合成数据集以及多种客观评价方法。最后根据现有方法所存在的问题,提出了未来工作的研究方向。 展开更多

关键词 表情合成 深度学习 生成对抗网络 表情数据库 客观评价方法

下载PDF 职称材料

基于XML的面部表情快速重构方案

12

作者 贾文晋 王志良 刘冀伟 《计算机工程》 CAS CSCD 北大核心 2004年第20期164-166,共3页

计算机人脸表情重构在人机情感交互中起着非常关键的作用。该文阐述了基于XML的面部表情快速重构设计方案及其实现。通过实践检验,该方案能够实现在网络上快速重构面部表情、实时性好且面部表情特征的数据处理方式,具备较好的通用性。

关键词 表情合成 表情重构 XML 表情识别 人脸检测

下载PDF 职称材料

基于NURBS曲面的三维人脸表情合成算法 被引量：1

13

作者 伍菲 《沈阳工业大学学报》 CAS 北大核心 2021年第6期688-691,共4页

针对三维人脸表情合成精度较低的问题,提出一种基于NURBS曲面拟合技术的三维人脸表情合成算法.基于NURBS曲面的优化控制原理,将二维人脸图像转化为连续的三维表情参考模型,通过增加整体几何约束和局部平滑约束,提高了人脸表情形状的平... 针对三维人脸表情合成精度较低的问题,提出一种基于NURBS曲面拟合技术的三维人脸表情合成算法.基于NURBS曲面的优化控制原理,将二维人脸图像转化为连续的三维表情参考模型,通过增加整体几何约束和局部平滑约束,提高了人脸表情形状的平滑程度和嘴部拟合的精确度,生成了更加精细的三维人脸表情形状.仿真结果表明,该算法对不同环境、姿势和光照条件的二维人脸图像,具有一定的稳定性和泛化性,合成效果比较理想. 展开更多

关键词 NURBS曲面 表情合成 特征点 人脸轮廓 二阶偏导 鲁棒性 泛化性 平滑约束

下载PDF 职称材料

基于合成的通用头部网格模型的表情合成 被引量：1

14

作者 黄军伟 侯进 雷腾 《计算机应用研究》 CSCD 北大核心 2015年第4期1240-1243,1247,共5页

针对当前通用脸部网格模型的可操控性和逼真性难以同时兼顾的问题,提出了一种新的通用网格模型合成方法,该方法基于Candide-3模型和从建模软件中导出来的模型进行简化得到的模型进行结合来合成通用头部模型。在此模型的基础上合成出六... 针对当前通用脸部网格模型的可操控性和逼真性难以同时兼顾的问题,提出了一种新的通用网格模型合成方法,该方法基于Candide-3模型和从建模软件中导出来的模型进行简化得到的模型进行结合来合成通用头部模型。在此模型的基础上合成出六大基本表情,对输入人脸正面照片使用ASM(active shape model)算法自动提取出特征点,利用特征点和径向基函数来调整合成的通用模型得到特定的表情。实验结果显示,该通用网格模型具有良好的操控性,且能完整表示整个头部结构,还能表达六大基本表情和特定表情。 展开更多

关键词 Candide-3模型 简化模型 通用头部网格模型 表情合成

下载PDF 职称材料

基于表情分解-扭曲变形的人工表情合成算法 被引量：1

15

作者 余重基 李际军 《中国图象图形学报》 CSCD 北大核心 2006年第3期372-378,共7页

为了能快速有效地生成任意强度的人脸表情图像,提出了一种鲁棒的可以生成带任意强度表情图像的人工表情合成算法,该算法首先通过施加高阶奇异值分解(HOSVD)来把训练集分解为个人、表情和特征3个子空间,并把它们映射到表情子空间中,用来... 为了能快速有效地生成任意强度的人脸表情图像,提出了一种鲁棒的可以生成带任意强度表情图像的人工表情合成算法,该算法首先通过施加高阶奇异值分解(HOSVD)来把训练集分解为个人、表情和特征3个子空间,并把它们映射到表情子空间中,用来合成任意人脸正面照片的任意强度、任意表情的图像;在生成图像时,不采用通常所使用的线性组合基图像生成法,而是对源图像进行扭曲变形,这不仅能使训练数据和计算量大为减少,还可以生成任意尺寸、任意背景、任意光照、任意色彩或任意姿势的表情图像,且通过二次插值,还可以得到任意强度的表情图像。实验证明,该算法效率较高,且生成的图像效果很好。 展开更多

关键词 表情合成 HOSVD 表情分解 框架

下载PDF 职称材料

以假乱真,AI新闻主播来了 被引量：1

16

作者 程醉 《第二课堂（初中版）》 2019年第5期10-11,共2页

一2018年11月7日,在第五届世界互联网大会上,搜狗与新华社联合展示了全球首个全仿真智能AI主持人。'他'以中国新闻主播邱浩为原型,一经亮相便引起了巨大的轰动。这名AI主持人之所以成了最耀眼的明星,主要是因为'他'除... 一2018年11月7日,在第五届世界互联网大会上,搜狗与新华社联合展示了全球首个全仿真智能AI主持人。'他'以中国新闻主播邱浩为原型,一经亮相便引起了巨大的轰动。这名AI主持人之所以成了最耀眼的明星,主要是因为'他'除了口型稍微有点儿对不上之外,不论是表情还是声音都达到了以假乱真的地步。那么,到底什么是全仿真智能AI主持人呢? 展开更多

关键词 新闻主播 表情合成 AI 人工智能技术

原文传递

基于特征点预测的三维表情人脸合成

17

作者 舒文 傅钰雯 杨健晟 《智能计算机与应用》 2022年第2期158-164,169,共8页

对于三维人脸表情合成,基于设备的方法成本高、灵活度低,表情的重建依赖人脸扫描过程中原始人脸表情;基于图像的方法大部分以面部行为编码系统(FACS)为基础,存在FACS兼容性较好的部分模型表现粗糙问题、合成真实度较低等问题。针对于此... 对于三维人脸表情合成,基于设备的方法成本高、灵活度低,表情的重建依赖人脸扫描过程中原始人脸表情;基于图像的方法大部分以面部行为编码系统(FACS)为基础,存在FACS兼容性较好的部分模型表现粗糙问题、合成真实度较低等问题。针对于此,本文提出一种基于特征点预测的三维表情合成方法。在三维人脸重建效果较好的3DMM算法基础上,引入加权K近邻算法构建表情特征点预测模型,结合BFM表情模型与线性插值算法模型处理纹理遮挡问题。实验表明:该方法较于FACS结合简单模型方法细节表现更强、真实度更高;较于设备方法成本更低、自动化程度更高、整体效果良好。 展开更多

关键词 三维人脸重建 表情合成 特征点预测 三维形变模型 加权K近邻算法

下载PDF 职称材料

带眼球细节的情感虚拟人面部表情合成 被引量：1

18

作者 曹宁哲 侯进 马文超 《计算机应用研究》 CSCD 北大核心 2016年第12期3839-3842,3867,共5页

针对当前三维头部重建中使用的网格模型不能完整表达头部拓扑结构或者模型过于复杂的问题,提出了一种完整头部网格模型合成方法。该方法首先以Candide-3模型为基础加入后脑勺模型,对面部Candide-3模型的眼睑部分进行重新建模,并加入比... 针对当前三维头部重建中使用的网格模型不能完整表达头部拓扑结构或者模型过于复杂的问题,提出了一种完整头部网格模型合成方法。该方法首先以Candide-3模型为基础加入后脑勺模型,对面部Candide-3模型的眼睑部分进行重新建模,并加入比例合适的眼球模型,得到一个完整头部网格模型。然后结合人脸特征点信息和局部最小二乘法匹配原理对模型进行调整,并对模型进行纹理贴图合成真实感的虚拟人头部模型。最后,在该模型上用分段线性插值的方法,合成带眼球细节的情感虚拟人表情。实验结果表明,基于该模型合成的虚拟人表情不仅逼真而且情感丰富。 展开更多

关键词 完整网格模型 眼球细节 纹理贴图 表情合成

下载PDF 职称材料

人脸面部表情自动生成系统

19

作者 张莉莉 李灵华 《电脑知识与技术》 2013年第2期858-860,共3页

详细介绍开发一个人脸面部表情自动生成系统所用到的相关技术,包括人脸三维建模、面部表情合成、系统用户界面实现等技术。系统开发的目的是建立一个具有真实感和实用性的三维人脸面部表情自动生成系统,其中,三维人脸建模技术包括3DMAX... 详细介绍开发一个人脸面部表情自动生成系统所用到的相关技术,包括人脸三维建模、面部表情合成、系统用户界面实现等技术。系统开发的目的是建立一个具有真实感和实用性的三维人脸面部表情自动生成系统,其中,三维人脸建模技术包括3DMAX使用关键技术以及人脸特征提取技术,基于人脸建模的表情生成技术主要介绍通过肌肉运动来描述表情的技术,系统界面的设计采用MFC技术。对各技术全面而系统的介绍,将为人脸面部表情自动生成系统的开发与实现提供一个有效途径,为系统的应用者提供便利。 展开更多

关键词 面部表情 三维建模 表情合成

下载PDF 职称材料

表情比例图的鲁棒性增强算法

20

作者 刘剑毅 《西安交通大学学报》 EI CAS CSCD 北大核心 2006年第8期919-922,927,共5页

针对表情比例图(ERI)方法的光照条件及对准误差的鲁棒性较差的问题,提出了一种新的比例图滤波方法,该方法利用形态学膨胀算子提取对准误差所致的噪声区域及其过渡带,然后利用线性插值恢复出平滑的比例图,同时还提出了基于商图理论的光... 针对表情比例图(ERI)方法的光照条件及对准误差的鲁棒性较差的问题,提出了一种新的比例图滤波方法,该方法利用形态学膨胀算子提取对准误差所致的噪声区域及其过渡带,然后利用线性插值恢复出平滑的比例图,同时还提出了基于商图理论的光照校准方法,并应用于照明条件不一致下的表情绘制,即通过求解空间3个独立点光源的组合系数,实现了样本图从任意光照向期望光照的校准.实验结果表明,所提方法能够探测并消除对准误差带来的比例图噪声,能够实现不同照明条件下的样本图像光照校准,从而提高了ERI算法应用于表情合成时的鲁棒性. 展开更多

关键词 表情比例图 形态学膨胀 光照校准 表情合成

下载PDF 职称材料