中国科学院机构知识库网格
Chinese Academy of Sciences Institutional Repositories Grid
基于深度学习的计算机渲染与着色图像的鉴别方法

文献类型:学位论文

作者全卫泽
答辩日期2020-06
文献子类博士
授予单位中国科学院大学
授予地点中国科学院自动化研究所
导师张晓鹏研究员 ; 严冬明研究员
关键词图像取证 深度学习 计算机生成图像 泛化能力 可信懒性
学位专业模式识别与智能系统
英文摘要

当前,随着图像编辑和生成软件的迅速发展,使得篡改图像内容或创建新图像变得越来越简单。这些生成图像(如渲染图像和着色图像)具有很高的视觉真实感,给很多重要应用领域带来了潜在的巨大威胁,例如,司法部门需要鉴别图片不是由计算机渲染软件制作的,着色图像会导致识别/监测系统给出错误的判断等。因此,鉴别图像是否由计算机生成也引起了学术界与工业界的广泛关注。

本文研究不同的计算机生成图像的鉴别问题,包括渲染图像和着色图像等,即区分图像是由照相机拍摄,还是由计算机生成。本文的主要目标是,设计高效的检测器,不仅有很高的分类精度,也有很好的泛化能力。本文考虑数据集构造、网络结构、训练方法、可视化以及理解。主要贡献总结如下:

1.提出了一种基于负样本插入的着色图像检测方法

针对当前基于手工特征或者卷积神经网络(convolutional neural network,CNN)的检测器在具有挑战性的盲检测场景中泛化能力不足,本文提出了基于负样本插入的增强训练方法来提升检测器的泛化性能。具体地,通过成对的自然图像和着色图像的线性插值自动地构造负样本,然后迭代地将这些负样本加入到原始的训练数据集来继续训练网络。

2.提出了着色图像检测的一种泛化方法

为了提高CNN取证方法的可信赖性,与此相关的一些问题需要思考和研究,例如,由CNN自动提取的判别特征的合适性以及在测试阶段对``未知''数据的泛化性能。本文以着色图像检测为案例对这些问题进行研究,并得到一些有用的启示。另外,基于CNN第一层对取证性能影响的定量分析,本文提出了着色图像检测的一种泛化方法,通过组合具有不同设置的第一层的CNN模型的决策结果,来提高着色图像检测的泛化性能。

3.提出了一种基于CNN的自然图像与计算机渲染图像的鉴别方法

针对基于手工特征方法的识别能力有限,本文引入了一个基于CNN的通用框架。本文方法在由多源数据组成的具有挑战性的公开数据集上表现出良好的性能,并且对几种典型的后处理操作具有很好的鲁棒性。另外,本文首次尝试使用先进的可视化工具来理解CNN学习到的关于自然图像和计算机渲染图像差异的知识。

4.提出了一种基于特征多样性增强和对抗样本的计算机渲染图像鉴别方法

针对当前CNN检测器的分类能力有限,尤其是泛化能力不足,从网络结构和网络训练两个方面进行了探索。为了进行实验研究,本文收集了4个高品质的渲染数据集。网络结构方面,设计一个新的两支路CNN网络,该网络的两个支路的第一层使用不同的初始化方法,来丰富深度特征的多样性;网络训练方面,提出一种新的以模型为中心的方法来生成负样本,继而采用增强训练来进一步提升CNN检测器的泛化能力。

语种中文
页码122
源URL[http://ir.ia.ac.cn/handle/173211/39699]  
专题毕业生_博士学位论文
推荐引用方式
GB/T 7714
全卫泽. 基于深度学习的计算机渲染与着色图像的鉴别方法[D]. 中国科学院自动化研究所. 中国科学院大学. 2020.

入库方式: OAI收割

来源:自动化研究所

浏览0
下载0
收藏0
其他版本

除非特别说明,本系统中所有内容都受版权保护,并保留所有权利。