-
题名局部相似度异常的强泛化性伪造人脸检测
被引量：2
- 1
-
-
作者
戴昀书
费建伟
夏志华
刘家男
翁健
-
机构
中山大学网络空间安全学院
南京信息工程大学计算机学院
暨南大学网络空间安全学院
-
出处
《中国图象图形学报》
CSCD
北大核心
2023年第11期3453-3470,共18页
-
基金
国家重点研发计划资助(2022YFB3103100,2020YFB1005600)
国家自然科学基金项目(62122032,62172233,62102189,U1936118,61931004)
江苏省研究生科研与创新项目(KYCX22_1207)。
-
文摘
目的人脸伪造技术迅猛发展,对社会信息安全构成了严重威胁,亟需强泛化性伪造人脸检测算法抵抗多种多样的伪造模型。目前的研究发现伪造算法普遍包含人脸与背景融合的操作,这意味着任何伪造方式都难以避免在人脸边缘遗留下伪造痕迹。根据这一发现,本文将模型的学习目标从特定的伪造痕迹特征转化为更加普适的人脸图像局部相似度特征,并提出了局部相似度异常的深度伪造人脸检测算法。方法首先提出了局部相似度预测(local similarity predicator,LSP)模块,通过一组局部相似度预测器分别计算RGB图像中间层特征图的局部异常,同时,为了捕捉频域中的真伪线索,还提出了可学习的空域富模型卷积金字塔(spatial rich model convolutional pyramid,SRMCP)来提取多尺度的高频噪声特征。结果在多个数据集上进行了大量实验。在泛化性方面,本文以ResNet18为骨干网络的模型在FF++4个子集上的跨库检测精度分别以0.77%、5.59%、6.11%和4.28%的优势超越了对比方法。在图像压缩鲁棒性方面,在3种不同压缩效果下,分别以2.48%、4.83%和10.10%的优势超越了对比方法。结论本文方法能够大幅度提升轻量型卷积神经网络的检测性能,相比于绝大部分工作都取得了更优异的泛化性和鲁棒性效果。
-
关键词
深度伪造人脸检测
空域富模型(srm)
卷积金字塔
局部学习相似度
多任务学习
-
Keywords
deep face forgery detection
spatially rich model(srm)
convolutional pyramid
local similarity learning
multi-task learning
-
分类号
TP319.4
[自动化与计算机技术—计算机软件与理论]
-
-
题名基于多尺度与注意力机制的图像隐写分析
- 2
-
-
作者
李萌
罗维薇
刘长龙
-
机构
兰州交通大学电子与信息工程学院
-
出处
《兰州交通大学学报》
CAS
2024年第3期57-67,共11页
-
基金
国家自然科学基金(62362047)。
-
文摘
针对目前隐写分析算法对图像复杂纹理区域特征表征能力较弱的问题,提出一种基于多尺度特征融合和注意力机制的隐写分析模型。该模型首先使用空域富模型滤波器对输入图像进行预处理,提取噪声成分残差,降低图像本身内容的影响;其次使用多尺度并行网络提取信号,增强对细微特征的学习;然后引入注意力机制对特征进行自适应加权,强调重要通道特征在分类中的作用,同时抑制非重要通道特征对分类的影响;最后提出一种协方差池化对深度神经网络学习后的各特征之间的相关性进行建模,并选取牛顿迭代法求解平方根矩阵,使网络训练更加高效。实验结果表明:在小波权重隐写算法0.5 bit/像素嵌入率的条件下,所提模型准确率达到了88.6%,证明了所提方法的有效性。
-
关键词
隐写分析
卷积神经网络
空域富模型
注意力机制
-
Keywords
steganalysis
convolutional neural network
spatial rich model(srm)
attention mechanism
-
分类号
TP391
[自动化与计算机技术—计算机应用技术]
-
