深度伪造视频检测技术综述 被引量：20

1

作者 暴雨轩 芦天亮 杜彦辉 《计算机科学》 CSCD 北大核心 2020年第9期283-292,共10页

深度伪造的滥用,给国家、社会和个人带来了潜在威胁。首先,介绍了深度伪造的概念和当前发展趋势,分析了基于生成对抗网络的深度伪造视频的生成原理和模型,并介绍了视频数据处理算法及主流的深度伪造数据集;其次,综述了基于视频帧内篡改... 深度伪造的滥用,给国家、社会和个人带来了潜在威胁。首先,介绍了深度伪造的概念和当前发展趋势,分析了基于生成对抗网络的深度伪造视频的生成原理和模型,并介绍了视频数据处理算法及主流的深度伪造数据集;其次,综述了基于视频帧内篡改特征的检测方法,针对深度伪造视频帧内的视觉伪影、面部噪声特征的检测问题,介绍了相关机器学习、深度学习等分类算法、模型;然后,针对深度伪造视频在帧间时空状态不一致的情形,阐述了相关时间序列算法和检测方法;接着,介绍了作为检测补充手段的基于区块链溯源的防篡改公共机制和数字水印、视频指纹等信息安全方法;最后,总结了深度伪造视频检测技术的未来研究方向。 展开更多

关键词 深度伪造 深度学习 特征提取 视频帧 多媒体取证

下载PDF 职称材料

数字媒体取证技术综述 被引量：17

2

作者 李晓龙 俞能海 +5 位作者 张新鹏 张卫明 李斌 卢伟 王伟 刘晓龙 《中国图象图形学报》 CSCD 北大核心 2021年第6期1216-1226,共11页

面对每天有数以百万计通过网络传播的多媒体数据,到底哪些内容是真实可信的,虚假内容的背后又经历了哪些篡改?数字取证技术将给出答案。该技术不预先嵌入水印,而是直接分析多媒体数据的内容,达到辨别真实性的目的。任何篡改和伪造都会... 面对每天有数以百万计通过网络传播的多媒体数据,到底哪些内容是真实可信的,虚假内容的背后又经历了哪些篡改?数字取证技术将给出答案。该技术不预先嵌入水印,而是直接分析多媒体数据的内容,达到辨别真实性的目的。任何篡改和伪造都会在一定程度上破坏原始多媒体数据本身固有特征的完整性,由于其具有一致性和独特性,可作为自身的"固有指纹",用于鉴别篡改文件。随着篡改媒体的数量与日俱增,社会稳定甚至国家安全受到了严重威胁。特别地,随着深度学习技术的快速发展,虚假媒体与真实媒体之间的感官差距越来越小,这对媒体取证研究提出了巨大挑战,并使得多媒体取证成为信息安全领域一个重要的研究方向。因此,目前迫切需要能够检测虚假多媒体内容和避免危险虚假信息传播的技术和工具。本文旨在对过去多媒体取证领域所提出的优秀检测取证算法进行总结。除了回顾传统的媒体取证方法,还将介绍基于深度学习的方法。本文针对当今主流的多媒体篡改对象:图像、视频和语音分别进行总结,并针对每种媒体形式,分别介绍传统篡改方法和基于AI(artificial intelligence)生成的篡改方法,并介绍了已公开的大规模数据集以及相关应用的情况,同时探讨了多媒体取证领域未来可能的发展方向。 展开更多

关键词 多媒体取证 多媒体溯源 篡改检测 篡改定位 虚假人脸

原文传递

人脸视频深度伪造检测方法综述 被引量：6

3

作者 张璐 芦天亮 杜彦辉 《计算机科学与探索》 CSCD 北大核心 2023年第1期1-26,共26页

深度伪造(deepfake)技术的非法应用会对社会稳定、个人名誉甚至国家安全造成恶劣影响,因此针对人脸视频的深度伪造检测成为计算机视觉领域中的难点与研究热点。目前该领域的研究建立在传统人脸识别与图像分类技术基础上,通过搭建深度学... 深度伪造(deepfake)技术的非法应用会对社会稳定、个人名誉甚至国家安全造成恶劣影响,因此针对人脸视频的深度伪造检测成为计算机视觉领域中的难点与研究热点。目前该领域的研究建立在传统人脸识别与图像分类技术基础上,通过搭建深度学习网络判别真伪,但存在数据集质量不一、多模态特征如何有效结合、模型泛化能力较差等问题。为进一步促进深度伪造检测技术的发展,对当前各类人脸视频深度伪造算法进行了全面总结,并对已有算法进行了归类、分析、比较。首先,主要介绍人脸视频深度伪造检测数据集;其次,对近三年主要的伪造视频检测方法进行总结,以特征选择为切入点,从空间特征、时空融合特征、生物特征的角度对各项检测技术进行分类整理,并对基于水印与区块链等非主流检测方法进行介绍;然后,从特征选择、迁移学习、模型设计与训练思路等方面介绍了各类检测方法所呈现出的主流趋势;最后,对全文进行总结并对未来技术发展进行展望。 展开更多

关键词 深度学习 多媒体取证 深度伪造 视频检测 人脸篡改

下载PDF 职称材料

基于设备本底噪声频谱特征的手机来源识别 被引量：9

4

作者 裴安山 王让定 严迪群 《电信科学》 北大核心 2017年第1期85-94,共10页

随着手机录音设备的普及以及各种功能强大且易于操作的数字媒体编辑软件的出现,手机来源识别已成为多媒体取证领域的热点问题。将本底噪声作为手机的"指纹",提出了一种基于本底噪声的手机来源识别方法。该方法先通过静音段录... 随着手机录音设备的普及以及各种功能强大且易于操作的数字媒体编辑软件的出现,手机来源识别已成为多媒体取证领域的热点问题。将本底噪声作为手机的"指纹",提出了一种基于本底噪声的手机来源识别方法。该方法先通过静音段录音的估计得到本底噪声;然后计算本底噪声的频谱特征在时间轴方向上的均值,将其作为手机来源识别的分类特征;最后采用主成分分析(PCA)法对特征进行降维,并采用支持向量机(SVM)进行分类。实验部分对24款主流型号的手机进行了分类,结果表明本文方法的平均识别准确率(accuracy)和平均召回率(recall)达到了99.24%,同时也验证了相比MFCC,本底噪声有更加优越的性能。 展开更多

关键词 多媒体取证 手机来源识别 本底噪声 频谱特征

下载PDF 职称材料

基于卷积神经网络的图像拼接篡改检测算法 被引量：6

5

作者 钟辉 李红 +2 位作者 李振建 欧阳若川 闫冬梅 《吉林大学学报（工学版）》 EI CAS CSCD 北大核心 2020年第4期1428-1434,共7页

为了进一步提高篡改检测率,提出了一种基于卷积神经网络(CNN)的图像篡改检测算法(SCNN)。虽然CNN能够直接从数据中学习分类特征,但是在其标准形式中,它倾向于学习与图像内容相关的特征。为了克服图像取证任务中的这一问题,提出了一种新... 为了进一步提高篡改检测率,提出了一种基于卷积神经网络(CNN)的图像篡改检测算法(SCNN)。虽然CNN能够直接从数据中学习分类特征,但是在其标准形式中,它倾向于学习与图像内容相关的特征。为了克服图像取证任务中的这一问题,提出了一种新的图像预处理层来共同抑制图像内容并自适应地学习特征。使用CASIA V2.0中75%的图像对SCNN进行训练和验证,并使用CASIA V2.0中的其余图像和哥伦比亚未压缩数据集中的所有图像进行测试。实验结果表明,本文SCNN框架明具有一定有效性及鲁棒性。 展开更多

关键词 多媒体取证 卷积神经网络 篡改检测 拼接图像 特征提取

原文传递

多媒体认知安全综述 被引量：5

6

作者 周琳娜 杨震 +3 位作者 储贝林 王任颖 毛羽哲 陈贤浩 《信号处理》 CSCD 北大核心 2021年第12期2440-2456,共17页

在网络大数据环境下,人类的认知受到数据的干扰,尤其是多媒体数据。多媒体对人类认知安全的威胁在于其中虚假、危害和认知偏见等信息。本文从人类认知理论出发,针对当前社交网络融媒体对人类认知的多阶影响,分析研究了不同历史时期多媒... 在网络大数据环境下,人类的认知受到数据的干扰,尤其是多媒体数据。多媒体对人类认知安全的威胁在于其中虚假、危害和认知偏见等信息。本文从人类认知理论出发,针对当前社交网络融媒体对人类认知的多阶影响,分析研究了不同历史时期多媒体认知安全面临的技术威胁与防护手段,重点研究分析了基于人工智能的多媒体认知安全技术,包括文本、音频、图像、视频和融媒体的伪造取证等具体技术,为多媒体认知安全构筑了关键基础。基于以上研究,本文对未来的多媒体认知安全研究方向进行了梳理建议,基于多智能体自主协同的新型认知环境干预塑造将是未来认知安全研究的核心问题。 展开更多

关键词 认知安全 多媒体认知 融媒体 多媒体取证 认知干预

下载PDF 职称材料

基于语音频谱融合特征的手机来源识别 被引量：3

7

作者 裴安山 王让定 严迪群 《计算机应用》 CSCD 北大核心 2018年第3期884-890,共7页

随着手机录音设备的普及以及各种功能强大且易于操作的数字媒体编辑软件的出现,语音的手机来源识别已成为多媒体取证领域重要的热点问题,针对该问题提出了一种基于频谱融合特征的手机来源识别算法。首先,通过分析不同手机相同语音的语谱... 随着手机录音设备的普及以及各种功能强大且易于操作的数字媒体编辑软件的出现,语音的手机来源识别已成为多媒体取证领域重要的热点问题,针对该问题提出了一种基于频谱融合特征的手机来源识别算法。首先,通过分析不同手机相同语音的语谱图,发现不同手机的语音频谱特征是不同的;然后对语音的频谱信息量、对数谱和相位谱特征进行了研究;其次,将三个特征串联构成原始融合特征,并用每个样本的原始融合特征构建样本特征空间;最后,采用WEKA平台的CfsSubsetEval评价函数按照最佳优先搜索原则对所构建的特征空间进行特征选择,并采用LibSVM对特征选择后的样本特征空间进行模型训练和样本识别。实验部分给出了特征选择后的频谱单一特征和频谱融合特征在23款主流型号的手机语音库上分类的结果。实验结果表明,该算法使用频谱融合特征有效提高了手机品牌类内的平均识别准确率,在TIMIT翻录语音数据库和自建的CKC-SD语音数据库上分别达到99.96%和99.91%;另外,与Hanilci基于梅尔倒谱系数特征的录音设备来源识别算法进行了对比,平均识别准确率分别提高了6.58和5.14个百分点。因此可得本文所提特征可有效提高平均识别准确率,降低手机类内识别的误判率。 展开更多

关键词 多媒体取证 手机来源识别 频谱融合特征 特征选择

下载PDF 职称材料

多媒体技术在物理空间安全领域的应用与发展 被引量：2

8

作者 赵军红 张卫强 +2 位作者 郑明慧 张萌 黄伟庆 《信息安全研究》 2016年第2期172-179,共8页

聚焦于以各种多媒体形式为栽体的信息处理技术在物理空间信息安全中的应用,阐述了语音、图像和视频相关的信息隐藏技术、数字水印技术、信息源识别技术以及多媒体取证技术等在安全领域的应用和发展现状,并对各种多媒体处理技术在信息安... 聚焦于以各种多媒体形式为栽体的信息处理技术在物理空间信息安全中的应用,阐述了语音、图像和视频相关的信息隐藏技术、数字水印技术、信息源识别技术以及多媒体取证技术等在安全领域的应用和发展现状,并对各种多媒体处理技术在信息安全领域的交叉应用和发展趋势进行了详细讨论. 展开更多

关键词 多媒体信息安全 物理空间安全 信息隐藏 语音识别 多媒体取证

下载PDF 职称材料

数字视频篡改被动认证研究的若干进展 被引量：1

9

作者 庄景晖 《漳州职业技术学院学报》 2014年第4期1-7,共7页

介绍了数字视频被动认证中四种主要篡改方式的检测原理,对这四种篡改方式的已有研究成果进行归纳,说明当前研究出现的困难和问题,并探讨了本领域未来的研究方向。

关键词 多媒体认证 视频篡改 被动认证

下载PDF 职称材料

基于改进传感器模式噪声提取模型的源相机识别 被引量：1

10

作者 苏开清 田妮莉 潘晴 《光电子．激光》 CAS CSCD 北大核心 2022年第8期871-878,共8页

针对当前基于传感器模式噪声(sensor pattern noise,SPN)提取模型处理压缩视频来源检测的识别效果较差问题,提出一种基于多尺度变换域自适应维纳滤波和一种加权最大似然估计的改进SPN提取模型。首先干预视频的编解码过程,在编解码器的... 针对当前基于传感器模式噪声(sensor pattern noise,SPN)提取模型处理压缩视频来源检测的识别效果较差问题,提出一种基于多尺度变换域自适应维纳滤波和一种加权最大似然估计的改进SPN提取模型。首先干预视频的编解码过程,在编解码器的环路滤波模块前提取视频帧,然后将视频帧输入双密度双树复小波变换自适应维纳滤波模型中提取噪声残差,最后使用加权最大似然估计从噪声残差中估计得到SPN。在公共视频源取证数据库VISION上进行测试比较,实验结果表明所提出的改进SPN提取模型在ROC曲线和Kappa统计系数两种评价指标上的识别效果优于传统SPN提取算法。 展开更多

关键词 传感器模式噪声 压缩视频识别 多媒体取证 多尺度分解 加权最大似然估计

原文传递

面向多媒体取证的电网频率建模

11

作者 王清懿 华光 张海剑 《应用科学学报》 CAS CSCD 北大核心 2022年第3期477-492,共16页

电网频率建模旨在对其随机波动特性建立数学模型,形成特征描述、统计分析以及轨迹预测能力,是基于电网频率判据的数字取证中一项重要的研究子课题。该文首先揭示了现有自回归模型的不足,并基于该模型对实际观测得到的电网频率参考信号... 电网频率建模旨在对其随机波动特性建立数学模型,形成特征描述、统计分析以及轨迹预测能力,是基于电网频率判据的数字取证中一项重要的研究子课题。该文首先揭示了现有自回归模型的不足,并基于该模型对实际观测得到的电网频率参考信号数据集进行统计分析,分别用差分整合移动平均自回归(autoregressive integrated moving average,ARIMA)模型和两种基于马尔科夫链的模型进行建模,进而求解模型各项参数。对比实验表明:ARMA(2,4)模型在理论上对华中电网频率具备最优的描述性能,而马尔科夫链模型因考虑到实际场景下频率分辨率的局限性,更适用于模拟从待测文件中提取的电网频率。 展开更多

关键词 多媒体取证 电网频率 自回归模型 差分整合移动平均自回归模型 马尔科夫链

下载PDF 职称材料

基于光强信息的视频插帧篡改检测

12

作者 吴铁浩 黄添强 +1 位作者 袁秀娟 陈智文 《计算机工程》 CAS CSCD 2014年第7期235-241,共7页

提出一种基于光强信息的视频插帧篡改检测方法。对于一段连续拍摄的视频,通过视频帧序列的亮度连续性可以间接反映出拍摄场景的光照强度连续性。因此,对于一段遭遇帧插入篡改的视频,无论插入帧是否与原视频同源,只要是在不同时间点拍摄... 提出一种基于光强信息的视频插帧篡改检测方法。对于一段连续拍摄的视频,通过视频帧序列的亮度连续性可以间接反映出拍摄场景的光照强度连续性。因此,对于一段遭遇帧插入篡改的视频,无论插入帧是否与原视频同源,只要是在不同时间点拍摄的,那么合成视频的场景光强信息特征将会出现不连贯,从而导致亮度不连续的特点。为此,根据光强信息的连续性特征,提取视频每一帧的多个光强信息,将每一帧的光强信息融合,得到光强信息序列,由序列特征得出检测结果。实验结果表明,该方法能够准确地检测一段视频是否经过帧插入合成。 展开更多

关键词 视频篡改 光照强度 多媒体取证 HSV颜色模型 灰度

下载PDF 职称材料

数字多媒体取证技术综述 被引量：20

13

作者 胡永健 刘琲贝 贺前华 《计算机应用》 CSCD 北大核心 2010年第3期657-662,共6页

数字多媒体取证是信息安全一个刚刚兴起的研究领域,研究数字多媒体取证技术对确保多媒体数据的可靠性有着极其重要的意义。以数字图像取证为代表,从篡改检测、来源辨识、真实性鉴定、设备成分取证以及多媒体取证方法的可靠性等五个方面... 数字多媒体取证是信息安全一个刚刚兴起的研究领域,研究数字多媒体取证技术对确保多媒体数据的可靠性有着极其重要的意义。以数字图像取证为代表,从篡改检测、来源辨识、真实性鉴定、设备成分取证以及多媒体取证方法的可靠性等五个方面对现有数字多媒体取证技术进行综述,重点介绍了典型算法,并指出当前研究中存在的一些主要问题,给出本领域未来的研究方向。 展开更多

关键词 数字多媒体取证 篡改检测 源设备辨识 设备成分取证 真实性鉴定 取证攻击

下载PDF 职称材料

多媒体信息安全研究综述 被引量：3

14

作者 孔祥维 王波 李晓龙 《信息安全研究》 2015年第1期44-53,共10页

信息和网络时代的大环境下,多媒体给人们提供了音视觉享受的同时,也存在着更为严峻的信息安全问题.针对当今主流的多媒体信息安全的典型研究方向,信息隐藏和信息隐藏分析、数字水印、多媒体内容取证、感知哈希和多媒体内容隐私等,首先... 信息和网络时代的大环境下,多媒体给人们提供了音视觉享受的同时,也存在着更为严峻的信息安全问题.针对当今主流的多媒体信息安全的典型研究方向,信息隐藏和信息隐藏分析、数字水印、多媒体内容取证、感知哈希和多媒体内容隐私等,首先阐述了各个方向领域的研究背景、总结了其针对性的科学技术问题,解释了典型的概念,然后在介绍和分析研究现状的基础上,给出了当前存在的问题和挑战,最终给出结论和展望. 展开更多

关键词 多媒体信息安全 信息隐藏和信息隐藏分析 数字水印 多媒体取证 感知哈希 多媒体隐私

下载PDF 职称材料

多媒体信息技术及安全概述 被引量：3

15

作者 尤新刚 毛英杰 周琳娜 《信息安全与通信保密》 2011年第10期44-51,54,共9页

云计算、物联网、智慧地球与隐写、数字水印等一起构成了多媒体信息形式,对人们的生活产生了巨大影响。近年来这些技术有很大的发展,但在技术方面还存在不少的挑战,同时也在很多地方暴露出了安全和隐私方面的问题,随着人们生活的日益多... 云计算、物联网、智慧地球与隐写、数字水印等一起构成了多媒体信息形式,对人们的生活产生了巨大影响。近年来这些技术有很大的发展,但在技术方面还存在不少的挑战,同时也在很多地方暴露出了安全和隐私方面的问题,随着人们生活的日益多媒体化,这些问题更加突出,受到越来越多的关注。文章参考国内外的一些调查和研究,从技术发展和安全的角度对新形式下的多媒体信息技术进行了总结。 展开更多

关键词 隐写 数字水印 数字多媒体取证 云计算 物联网 安全

原文传递