人脸表情的自动生成算法概述

1

作者 查诚 邱瑜晨 《科技与创新》 2024年第8期130-132,135,共4页

人脸表情生成技术是人机接口的重要应用之一,从特征提取、单张人脸表情的生成算法和基于视频序列的人脸表情生成算法3个方面出发,简要概述了相关的概念、理论和技术,为开展相应的研究工作提供基础和参考。

关键词 人脸表情 表情生成 表情比例图 人脸特征

下载PDF 职称材料

基于组残差块生成对抗网络的面部表情生成

2

作者 林本旺 赵光哲 +1 位作者 王雪平 李昊 《计算机工程与应用》 CSCD 北大核心 2024年第5期240-249,共10页

面部表情生成是通过某种表情计算方法生成带有表情的人脸图像,在人脸编辑、影视制作和数据扩增等方面应用广泛。随着生成对抗网络的出现,面部表情生成取得了显著的进步,但是生成的面部表情图像会出现重叠、模糊等现象,缺乏真实感。为了... 面部表情生成是通过某种表情计算方法生成带有表情的人脸图像,在人脸编辑、影视制作和数据扩增等方面应用广泛。随着生成对抗网络的出现,面部表情生成取得了显著的进步,但是生成的面部表情图像会出现重叠、模糊等现象,缺乏真实感。为了解决上述问题,提出了一种带有混合注意力机制组残差块的生成对抗网络(group residuals with attention mechanism-generative adversarial network,GRA-GAN)用于生成高质量的面部表情图像。在生成网络进行下采样前和上采样后,分别嵌入混合注意力机制来自适应地学习关键区域特征,增强对图像关键区域的学习。将分组的思想融入到残差网络中,提出了带有混合注意力机制的组残差块来实现更好的生成效果。在公开数据集RaFD进行了实验验证。实验结果表明,GRA-GAN模型在定性评估和定量分析指标上均优于相关方法。 展开更多

关键词 生成对抗网络 表情生成 注意力机制 组残差块

下载PDF 职称材料

虚拟数字人能否取代播音员和主持人

3

《镇江社会科学》 2024年第2期46-47,共2页

张亮在《中国传媒科技》2023年第12期撰文指出,虚拟数字人是指利用计算机图形学和人工智能技术,打造具有自然语言交互、情绪表达能力的虚拟形象。目前的虚拟数字人技术已经能够实现精细外形塑造、逼真的语音合成、面部与身体微表情生成... 张亮在《中国传媒科技》2023年第12期撰文指出,虚拟数字人是指利用计算机图形学和人工智能技术,打造具有自然语言交互、情绪表达能力的虚拟形象。目前的虚拟数字人技术已经能够实现精细外形塑造、逼真的语音合成、面部与身体微表情生成,并能进行简单对话。从优势来看,虚拟数字主播能够减少人力成本;提高时间效能,提供全时服务;保持形象统一. 展开更多

关键词 计算机图形学 人工智能技术 虚拟数字 虚拟形象 语音合成 表情生成 自然语言 人力成本

下载PDF 职称材料

基于方法的表情生成技术综述 被引量：2

4

作者 齐敏 李大健 +2 位作者 王毅 樊养余 郝重阳 《中国图象图形学报》 CSCD 北大核心 2009年第11期2181-2190,共10页

表情生成技术是智能人机接口领域的重要研究内容之一。基于方法的表情生成技术多数以图像为研究对象,不需要3维建模,同时又具有丰富的纹理细节,在表情生成的逼真度和降低复杂性方面具有相当的优势,一些方法也可扩展至3维应用。本文根据... 表情生成技术是智能人机接口领域的重要研究内容之一。基于方法的表情生成技术多数以图像为研究对象,不需要3维建模,同时又具有丰富的纹理细节,在表情生成的逼真度和降低复杂性方面具有相当的优势,一些方法也可扩展至3维应用。本文根据各种算法的技术本质将已公开发表的研究总结归纳为渐变技术、表情映射技术、统计学方法、2维网格法、面色表情和表演驱动技术等几类,从概念、理论和技术方法等方面对典型成果进行讨论,分析了不同算法的特点和存在的问题以及今后的发展方向,为开展相关研究提供参考。 展开更多

关键词 表情生成 渐变 表情映射 表情比例图 面色表情 表演驱动

下载PDF 职称材料

一种基于RBF网络生成人脸表情的算法 被引量：3

5

作者 余重基 李际军 《计算机应用》 CSCD 北大核心 2005年第7期1611-1615,共5页

提出了只需确定少量标定点就能高精度实现人脸表情生成的算法。此方法并不直接利用标定点,而是通过自动生成的扭曲控制点来进行2D图像扭曲变形;为了保证精度,最大程度地减少人工输入标定点的数目。根据脸部肌肉的解剖特点和人脸的对称... 提出了只需确定少量标定点就能高精度实现人脸表情生成的算法。此方法并不直接利用标定点,而是通过自动生成的扭曲控制点来进行2D图像扭曲变形;为了保证精度,最大程度地减少人工输入标定点的数目。根据脸部肌肉的解剖特点和人脸的对称性定义了一个信息冗余很小的脸部特征点集(FCPS);通过径向基函数神经网络(RBFNetwork)来确定FCPS的移动与表情变化的映射关系;RBF网络输出的FCPS通过数据映射,自动生成一个矫正的扭曲控制点集;2D径向基函数图像扭曲算法(RBFWarpingAlgorithm)利用这些扭曲控制点扭曲图像,产生指定的表情,有效地降低了扭曲控制点误差带来的负面影响;为了避免病态数据的影响并减少计算量,训练网络时采用了递推正则最小二乘算法。实验显示,该算法具有良好的实用性。 展开更多

关键词 表情生成 标定点 扭曲控制点 脸部特征点集

下载PDF 职称材料

基于StarGAN的人脸表情数据增强研究

6

作者 王俊杰 贾东立 《电脑知识与技术》 2023年第34期9-12,共4页

StarGAN网络在生成人脸表情图片时存在局部细节模糊、重叠、整体质量不佳等问题,针对上述问题,对基础StarGAN网络提出了以下3项改进:对生成器加入CBAM注意力模块;改变生成器的网络结构为Attention U-Net网络;对原来的损失函数加入上下... StarGAN网络在生成人脸表情图片时存在局部细节模糊、重叠、整体质量不佳等问题,针对上述问题,对基础StarGAN网络提出了以下3项改进:对生成器加入CBAM注意力模块;改变生成器的网络结构为Attention U-Net网络;对原来的损失函数加入上下文损失函数。对于实验结果使用定性和定量的评价标准,通过与其他模型的FID图像评价指标数值比较,文章提出的方法生成的图片在图像整体质量和局部细节都有显著的效果。 展开更多

关键词 计算机视觉 表情生成 数据增强 StarGAN 注意力机制

下载PDF 职称材料

基于单张人脸图像的表情生成方法 被引量：3

7

作者 马禹骞 钟宝江 《数据采集与处理》 CSCD 北大核心 2017年第4期831-837,共7页

人脸表情生成是人机情感交互的重要实现方式之一。通过研究人脸及表情特点,抽象具体的器官变化,归纳出针对人脸图像的网格划分法法则。在此基础上提出了一种针对人脸表情生成的网格划分技术。该技术通过简单的定位,使用二次多项式曲线... 人脸表情生成是人机情感交互的重要实现方式之一。通过研究人脸及表情特点,抽象具体的器官变化,归纳出针对人脸图像的网格划分法法则。在此基础上提出了一种针对人脸表情生成的网格划分技术。该技术通过简单的定位,使用二次多项式曲线合理划分了人脸主要器官,继而将其参数化,实现对人脸各器官的独立调整变动。简化定义了6种基本表情的面部变化,使用新网格划分技术实现不同的人脸器官变化,生成各种特定的表情。同时尝试了皱纹等皮肤纹理的添加步骤。与已有的人脸表情生成方法相比,新方法具有网格划分方式简单、变动参数多样、易于编码实现和计算量小等优点,最终生成的人脸表情在主观评测中评价良好。 展开更多

关键词 情感计算 人脸变形 表情生成 网格

下载PDF 职称材料

基于方法的人脸表情生成技术研究 被引量：1

8

作者 贾志城 《自动化与仪器仪表》 2015年第1期11-12,共2页

从渐变、表情映射、二维网格法、驱动动画法、统计学方法视角阐述基于方法的表情生成技术,遵循概念定义、经典方法分析、理论研究趋向的脉络予以概述,研究结果将成为人脸表情生成理论的基础参考。

关键词 表情生成 渐变 表情映射 表情比例图 表演驱动

下载PDF 职称材料

基于递归双对抗网络模型的人脸表情生成

9

作者 郭迎春 闫帅帅 刘依 《河北工业大学学报》 CAS 2021年第1期20-27,共8页

针对目前表情生成网络中存在的人脸表情失真、不同帧间图像明暗差异明显的问题,提出一种基于递归双对抗网络模型的人脸表情生成框架。首先通过提取深度人脸特征并生成表情特征图,将其作为监督信号,生成人脸表情种子图像;然后使用生成的... 针对目前表情生成网络中存在的人脸表情失真、不同帧间图像明暗差异明显的问题,提出一种基于递归双对抗网络模型的人脸表情生成框架。首先通过提取深度人脸特征并生成表情特征图,将其作为监督信号,生成人脸表情种子图像;然后使用生成的种子图像和原始目标人脸一起作为输入,生成特征保持图像,作为当前帧的输出,同时该特征保持图像也作为下一帧种子图像生成的输入;最后,将种子图像生成网络和特征保持图像生成网络递归进行下一帧图像的生成,多次递归得到与原始输入表情一致的特征保持人脸表情视频序列。在CK+和MMI数据库上的实验结果表明,提出的方法能够生成清晰自然的人脸表情视频帧,且在目标人脸形状和驱动的表情特征图像有较大形状差异时具有鲁棒性。 展开更多

关键词 生成对抗 深度学习 表情动画 表情生成 双模型

下载PDF 职称材料

基于GANs和迁移学习的人脸表情生成方法研究 被引量：1

10

作者 马志萍 《仪器仪表用户》 2021年第2期15-18,共4页

生成对抗网络(GANs)自2014年被提出以来,被广泛应用在文本、图像等领域,并对其进行生成方面的研究。但是最近的研究发现,生成对抗网络在有限样本的情况下无法取得好的生成效果,产生过拟合等问题。为了解决这个问题,本文提出了一种利用... 生成对抗网络(GANs)自2014年被提出以来,被广泛应用在文本、图像等领域,并对其进行生成方面的研究。但是最近的研究发现,生成对抗网络在有限样本的情况下无法取得好的生成效果,产生过拟合等问题。为了解决这个问题,本文提出了一种利用迁移学习和改变网络结构相结合的方法。与传统的迁移学习不同的是,在对源网络卷积层进行迁移过程的同时,引入AdaFM模块并用Style Blocks替换生成器前两层,使迁移后参数更好地适应目标网络,从而提升在小样本的情况下的生成效果并降低结构复杂度,加快训练速度。本文分别使用CelebA人脸数据库和RaFD人脸表情数据库作为源任务和目标任务的训练数据对该算法进行测试。测试结果表明,所采用的方法在有限样本的条件下,能够使图片具有更好的生成效果。 展开更多

关键词 表情生成 深度学习 迁移学习

下载PDF 职称材料

一种基于变形和监督式学习的三维表情生成方法

11

作者 魏志伟 朱宏明 《电脑知识与技术（过刊）》 2009年第1X期430-431,共2页

提出一种基于变形和监督式学习的三维表情生成方法。该方法为一个已有的三维表情样本集建立对应性,并将其转化到某种向量空间表示法中,从而得到一个能模拟任意表情的可变形模型。同时,用各种样本表情来训练一种监督式学习器,使其学会各... 提出一种基于变形和监督式学习的三维表情生成方法。该方法为一个已有的三维表情样本集建立对应性,并将其转化到某种向量空间表示法中,从而得到一个能模拟任意表情的可变形模型。同时,用各种样本表情来训练一种监督式学习器,使其学会各种表情之间的相关性。根据这种相关性,从一个新样本的某种表情出发进行转换,可以得到对应于该样本的其它表情。 展开更多

关键词 三维表情 变形 监督式学习 表情生成

下载PDF 职称材料

基于模型的人脸表情生成技术研究

12

作者 贾志城 《自动化与仪器仪表》 2014年第11期3-4,共2页

从表情生成思路、数据获取、典型人脸模型及其表情生成方法视角阐述基于模型的人脸表情生成技术,通过概念定义、经典方法分析、理论研究趋向的脉络予以概述,研究结果将成为人脸表情生成理论的基础参考。

关键词 表情生成 数据获取 人脸模型 动作编码系统 MPEG-4

下载PDF 职称材料

基于自注意力模块的面部表情编码方法

13

作者 靳佳晖 张景异 《信息技术与信息化》 2021年第3期115-117,共3页

随着人脸表情生成模型在影视娱乐、人机交互、医疗手术模拟等领域的应用越来越广泛,对生成连续的面部表情有着迫切需求。为解决当前ExprGAN生成模型存在低分辨率和图像不真实的问题,对该模型进行改进。使用深度卷积网络能够提升GAN生成... 随着人脸表情生成模型在影视娱乐、人机交互、医疗手术模拟等领域的应用越来越广泛,对生成连续的面部表情有着迫切需求。为解决当前ExprGAN生成模型存在低分辨率和图像不真实的问题,对该模型进行改进。使用深度卷积网络能够提升GAN生成高分辨率的图片,把注意力机制 Attention 引入了GAN,利用全局信息,产生更加合理和完整的图片。并与当前先进的AC-GAN模型进行了比较,Inception score提高了2.9,图片质量得到了提高。 展开更多

关键词 表情生成 ExprGAN 低分辨率 注意力机制

下载PDF 职称材料

基于卷积神经网络的三维动画表情生成及情感监督方法 被引量：5

14

作者 庄美琪 谭小慧 +1 位作者 樊亚春 程厚森 《重庆理工大学学报（自然科学）》 CAS 北大核心 2022年第1期151-158,共8页

针对在线学习,提出一种三维动画表情生成方法,复现学生学习过程中的情感状态,同时对学生进行情感监督。将视频作为输入,通过卷积神经网络识别人脸动作单元,将识别结果作为驱动虚拟替身的数据使其面部发生形变从而生成表情;基于识别结果... 针对在线学习,提出一种三维动画表情生成方法,复现学生学习过程中的情感状态,同时对学生进行情感监督。将视频作为输入,通过卷积神经网络识别人脸动作单元,将识别结果作为驱动虚拟替身的数据使其面部发生形变从而生成表情;基于识别结果计算情感指数,进行可视化分析生成情感监督图表。研究得出:用户对提供的表情生成效果和情感指数符合程度的评分均值达到83.97。手动生成的表情同自动生成表情的对比实验证明:效果一致。最终呈现3种可视化结果(动画表情生成效果、情感指数波动图和情感指数分布图),为教师提供了具有学生隐私保护的情感监督和学习状态反馈。 展开更多

关键词 在线教学 深度学习 情感监督 三维表情生成 人脸动作单元

下载PDF 职称材料

虚拟数字人主播的表情生成技术研究

15

作者 公正 《电视技术》 2024年第8期216-218,223,共4页

深入探讨虚拟数字人主播在电视新闻播报中的表情生成技术。通过精准捕捉、多维度数据处理、逼真映射及高质量渲染等关键技术,虚拟主播能够生动播报新闻,增强观众情感共鸣和参与度。同时,提出了技术改进建议,旨在提升虚拟数字人主播表情... 深入探讨虚拟数字人主播在电视新闻播报中的表情生成技术。通过精准捕捉、多维度数据处理、逼真映射及高质量渲染等关键技术,虚拟主播能够生动播报新闻,增强观众情感共鸣和参与度。同时,提出了技术改进建议,旨在提升虚拟数字人主播表情的真实度、自然度、多样性及渲染效率,为虚拟主播技术的创新和发展提供参考,进一步推动新闻传播方式的发展。 展开更多

关键词 虚拟数字人主播 电视新闻播报 表情生成技术

下载PDF 职称材料

基于面部动作编码系统的表情生成对抗网络 被引量：4

16

作者 胡晓瑞 林璟怡 +1 位作者 李东 章云 《计算机工程与应用》 CSCD 北大核心 2020年第18期150-156,共7页

用含有面部表情信息的向量作为输入条件指导生成高真实性人脸图像是一个重要的研究课题,但常用的八类表情标签较为单一,为更好地反映人脸各处丰富的微表情信息,以面部各个肌肉群作为动作单元(AUs),提出一种基于面部动作编码系统(FACS)... 用含有面部表情信息的向量作为输入条件指导生成高真实性人脸图像是一个重要的研究课题,但常用的八类表情标签较为单一,为更好地反映人脸各处丰富的微表情信息,以面部各个肌肉群作为动作单元(AUs),提出一种基于面部动作编码系统(FACS)的人脸表情生成对抗网络。将注意力机制融合到编码解码生成模块中,网络更加集中关注局部区域并针对性做出生成改变,使用了一种基于判别模块重构误差、分类误差和注意力平滑损失的目标函数。在常用BP4D人脸数据集上的实验结果表明,该方法可以更有效地关注各个动作单元对应区域位置并用单个AU标签控制表情生成,且连续AU标签值大小能控制表情幅度强弱,与其他方法相比,该方法所生成的表情图像细节保留更清晰且真实性更高。 展开更多

关键词 人脸表情生成 生成对抗网络 面部动作编码系统

下载PDF 职称材料

动态人脸表情合成的模型特征驱动算法综述 被引量：2

17

作者 陈松 袁训明 《计算机与现代化》 2019年第7期47-54,共8页

分析人脸模型的动态表情合成方法并依据它们内在特点进行分类描述。尽管这个领域已经存在较多文献,但是动态人脸表情合成仍然是非常活跃的研究热点。根据输出类型的不同,分类概览二维图像平面和三维人脸曲面上的合成算法。对于二维图像... 分析人脸模型的动态表情合成方法并依据它们内在特点进行分类描述。尽管这个领域已经存在较多文献,但是动态人脸表情合成仍然是非常活跃的研究热点。根据输出类型的不同,分类概览二维图像平面和三维人脸曲面上的合成算法。对于二维图像平面空间合成人脸表情主要有如下几种算法:主动表情轮廓模型驱动的人脸表情合成算法,基于拉普拉斯算子迁移计算的合成方法,使用表情比率图合成框架的表情合成算法,基于面部主特征点offset驱动的人脸表情合成算法,基于通用表情映射函数的表情合成方法和近来基于深度学习的表情合成技术。对于三维空间人脸合成则主要包括:基于物理肌肉模型的合成,基于形变的表情合成,基于三维形状线性回归的表情合成,基于脸部运动图的表情合成和近来基于深度学习的三维人脸表情合成技术。对以上每一种类别讨论它们的方法论以及其主要优缺点。本工作有望帮助未来研究者更好地定位研究方向和技术突破口。 展开更多

关键词 面部表情生成 表情变形移植 表情夸张 脸部衰老效果

下载PDF 职称材料

强度和类型可控的人脸表情生成 被引量：2

18

作者 吴宇宁 金琴 《中国科技论文》 CAS 北大核心 2022年第3期246-251,共6页

为了使机器生成更复杂、细腻的人脸表情,提出了一种对生成表情的类型和强度同时进行控制的机制,即将编码后的情感特征与面部动作单元解析结果共同参与学习,使融合该机制的模型不仅能生成不同类型、不同强度的表情,还支持混合表情的生成... 为了使机器生成更复杂、细腻的人脸表情,提出了一种对生成表情的类型和强度同时进行控制的机制,即将编码后的情感特征与面部动作单元解析结果共同参与学习,使融合该机制的模型不仅能生成不同类型、不同强度的表情,还支持混合表情的生成,且使生成图像更具有情绪感染力;并在模拟现实的场景下对融合该机制的模型进行应用测试,利用社交文本信息所传达出的情感,生成随情感连续变化的表情图像。 展开更多

关键词 计算机图像处理 人脸表情生成 生成式对抗网络 计算机视觉

下载PDF 职称材料

一种基于改进条件生成式对抗网络的人脸表情生成方法 被引量：2

19

作者 王先先 李菲菲 陈虬 《小型微型计算机系统》 CSCD 北大核心 2020年第9期1987-1992,共6页

人脸表情生成一直都是一项具有挑战性的工作.现有的方法通常将深度生成网络和面部特征相结合来完成这项任务.然而,同一张人脸的面部表情不仅微妙,而且数不胜数.如何在保持人脸身份信息不变的前提下,利用人脸特征准确地生成目标表情仍然... 人脸表情生成一直都是一项具有挑战性的工作.现有的方法通常将深度生成网络和面部特征相结合来完成这项任务.然而,同一张人脸的面部表情不仅微妙,而且数不胜数.如何在保持人脸身份信息不变的前提下,利用人脸特征准确地生成目标表情仍然是一个有待解决的问题.本文利用人脸特征点来描述不同的表情形状,并以此作为生成目标表情的引导条件.我们通过对Pix2Pix模型结构的改进,实现了高质量人脸表情的生成.同时,为了引导连续人脸表情的生成,我们使用变分自动编码器对人脸形状进行控制.在两个公开的数据集CK+、Oulu-CASIA上,我们评估并验证了模型在任意人脸表情转换、人脸表情移除、人脸表情生成、连续人脸表情生成等任务上的可行性和有效性. 展开更多

关键词 人脸表情生成 条件生成对抗网络 表情形状控制器 变分自动编码器

下载PDF 职称材料

基于改进深度学习的动画人物面部表情生成方法的研究 被引量：1

20

作者 崔婷婷 于海霞 《九江学院学报（自然科学版）》 CAS 2021年第4期68-72,108,共6页

在动画人物面部表情设计与生成的研究中,常规的表情生成方法因图像细节特征不明显,导致生成的面部表情真实度不足。为了解决这一问题,提出一种基于改进学习的动画人物面部表情生成方法。以真实的人脸面部表情图像作为依据,利用改进深度... 在动画人物面部表情设计与生成的研究中,常规的表情生成方法因图像细节特征不明显,导致生成的面部表情真实度不足。为了解决这一问题,提出一种基于改进学习的动画人物面部表情生成方法。以真实的人脸面部表情图像作为依据,利用改进深度学习设计级联分类器,从真实图像中提取出人脸表情特征图像,柔化图像边缘,增强特征细节。为了保证输入图像与生成表情图像之间内容和风格的统一性,从内容约束和风格约束两方面设计损失函数,优化判断网络,并在损失函数的约束下融合特征信息,生成动画人物面部表情。实验结果表明,设计的基于改进深度学习的表情生成方法的特征点定位准确,输入图像与生成图像之间的皮尔逊相关系数高,均方根误差小,生成的面部表情真实感得到了增强。 展开更多

关键词 改进深度学习 动画人物 面部表情生成 特征提取

下载PDF 职称材料