-
题名人脸合成技术综述
被引量：6
- 1
-
-
作者
费建伟
夏志华
余佩鹏
戴昀书
-
机构
南京信息工程大学计算机与软件学院
暨南大学网络空间安全学院
-
出处
《计算机科学与探索》
CSCD
北大核心
2021年第11期2025-2047,共23页
-
基金
国家自然科学基金(U1936118,61672294)
江苏省自然科学基金(BK20181407)。
-
文摘
人脸合成由于其应用与技术价值,是机器视觉领域的热点之一,而近年来深度学习的突破性进展使该领域吸引了更多关注。将该领域的研究分为四个子类:人脸身份合成、人脸动作合成、人脸属性合成与人脸生成,并系统地总结了这些子类的发展历程、现状,以及现有技术存在的问题。首先针对人脸身份合成,从图形学、数字图像处理与深度学习三个角度总结了各自的合成流程,对关键技术原理进行了详细的解释与分析。其次将人脸动作合成进一步分为利用标签驱动的表情编辑与利用真实人脸驱动的人脸重演,并指出了各自领域中存在的缺陷与难题。然后介绍了基于生成模型,尤其是生成对抗网络在人脸属性合成方面的发展,最终对人脸生成的各类工作进行了简单的阐述。此外,介绍了人脸合成技术的实际应用与当前面临的相关问题,并展望了该领域未来可能的研究方向。
-
关键词
人脸合成
生成对抗网络(GAN)
深度学习
-
Keywords
face synthesis
generative adversarial network(GAN)
deep learning
-
分类号
TP18
[自动化与计算机技术—控制理论与控制工程]
-
-
题名局部相似度异常的强泛化性伪造人脸检测
被引量：2
- 2
-
-
作者
戴昀书
费建伟
夏志华
刘家男
翁健
-
机构
中山大学网络空间安全学院
南京信息工程大学计算机学院
暨南大学网络空间安全学院
-
出处
《中国图象图形学报》
CSCD
北大核心
2023年第11期3453-3470,共18页
-
基金
国家重点研发计划资助(2022YFB3103100,2020YFB1005600)
国家自然科学基金项目(62122032,62172233,62102189,U1936118,61931004)
江苏省研究生科研与创新项目(KYCX22_1207)。
-
文摘
目的人脸伪造技术迅猛发展,对社会信息安全构成了严重威胁,亟需强泛化性伪造人脸检测算法抵抗多种多样的伪造模型。目前的研究发现伪造算法普遍包含人脸与背景融合的操作,这意味着任何伪造方式都难以避免在人脸边缘遗留下伪造痕迹。根据这一发现,本文将模型的学习目标从特定的伪造痕迹特征转化为更加普适的人脸图像局部相似度特征,并提出了局部相似度异常的深度伪造人脸检测算法。方法首先提出了局部相似度预测(local similarity predicator,LSP)模块,通过一组局部相似度预测器分别计算RGB图像中间层特征图的局部异常,同时,为了捕捉频域中的真伪线索,还提出了可学习的空域富模型卷积金字塔(spatial rich model convolutional pyramid,SRMCP)来提取多尺度的高频噪声特征。结果在多个数据集上进行了大量实验。在泛化性方面,本文以ResNet18为骨干网络的模型在FF++4个子集上的跨库检测精度分别以0.77%、5.59%、6.11%和4.28%的优势超越了对比方法。在图像压缩鲁棒性方面,在3种不同压缩效果下,分别以2.48%、4.83%和10.10%的优势超越了对比方法。结论本文方法能够大幅度提升轻量型卷积神经网络的检测性能,相比于绝大部分工作都取得了更优异的泛化性和鲁棒性效果。
-
关键词
深度伪造人脸检测
空域富模型(SRM)
卷积金字塔
局部学习相似度
多任务学习
-
Keywords
deep face forgery detection
spatially rich model(SRM)
convolutional pyramid
local similarity learning
multi-task learning
-
分类号
TP319.4
[自动化与计算机技术—计算机软件与理论]
-
