Face Forgery Suvery
创始人
2024-06-01 18:51:57
0

文章目录

  • Face Forgery
    • Face Forgery class
      • Attribute Manipulation
      • Expression Swap
      • Identity Swap
      • Entire Face Synthesis
  • Face Forgery Detection
    • Low-level
      • On the Detection of Digital Face Manipulation(CVPR2020)
    • High-level
      • Protecting World Leaders Against Deep Fakes
      • Detecting Deep-Fake Videos from Appearance and Behavior
    • Out of Arms race
      • Artificial GAN Fingerprints: Rooting Deepfake Attribution in Training Data

Face Forgery

对数字图像的优化一直是计算机应用技术的研究热点,对人脸图像进行修改自美颜相机的出现后持续受到广大主播用户的追捧。这些图像修改方式或多或少对人脸认证增加了难度。尤其是近些年数据的爆炸增长和计算能力的快速发展,出现的专门对人脸进行伪造的算法,其依靠训练学习方式对人脸外观或者属性进行伪造,伪造出来的人脸图像也愈加真实,已经到了人眼无法辨别的程度。由于利用了更加先进的算法,以往的图像认证技术也很难应对这种伪造图像。

Face Forgery class

目前还有没准确的人脸伪造方式分类方案,但按照伪造程度大致可以分为Attribute Manipulation, Expression Swap(inc. Lip Sync), Identity Swap Entire Face Synthesis. (TODO: 优化分类方案)

Attribute Manipulation

这种伪造方式包括对人脸或头发的颜色,性别、年龄、是否佩戴眼镜等内容进行篡改。该类伪造方式通常以

Expression Swap

Identity Swap

Entire Face Synthesis

Face Forgery Detection

为了应对人脸伪造带来了巨大安全隐患,研究员也提出了诸多检测办法。在这里,我将其分类为两种:

  1. Low-level Approach:侧重于检测人脸图像合成过程中引入的像素级痕迹。比如,基于GAN网络生成的伪造图像,存在明显的与真实图像不同的频率分布特征。
  2. High-level Approach:侧重于检测伪造视频中存在的语义级别的不一致性。比如,视频中说话人的口型与声音存在明显的差异。

Low-level

On the Detection of Digital Face Manipulation(CVPR2020)

在这里插入图片描述
本文采用multi-task的方式同时对图像进行伪造检测和伪造区域的定位,文中对比了两种Attention机制和不同监督程度下训练得到的模型的准确度。除此之外,本文推出首个包含多种人脸伪造类型的数据集Diverse Fake Face Datasets(DFD),并提出逆交叉非包容Inverse Intersection Non- Containment(IINC)度量标准,用于评估attention map与GT的一致性,与现有的度量(IoU等)相比更加稳定准确。详见>>

High-level

以下介绍的检测方式,尽量以发表的时间为序

Protecting World Leaders Against Deep Fakes

Here

Detecting Deep-Fake Videos from Appearance and Behavior

这篇文章与上一篇一脉相承,作者也属于同一波人。所采用的基本原理一致,所不同的是,本篇利用了CNN,并在常见伪造检测数据集上做了实验和对比。

here

Out of Arms race

众所周知,伪造的生成算法与伪造的检测算法彼此相互抗争,在此过程中,双方都可以利用对方现存算法的缺陷实现算法的改进,这使得双方的算法不断的提升效果,但这种模式无疑进入一种死循环。对于伪造检测算法而言,这使得其无法做到真正的有效和泛化。因此,逐渐有学者另辟蹊径,跳出这场你来我往的竞争中,试图从根本上找到一种一劳永逸的伪造检测办法。

Artificial GAN Fingerprints: Rooting Deepfake Attribution in Training Data

在这里插入图片描述

作者认为当前的伪造检测方与伪造生成算法构成的“军备竞赛”是无休止的。必须要从根源入手来解决伪造检测问题。基于GAN的伪造生成算法,作者提出利用隐写分析技术对训练GAN的数据集加入指定指纹,并证明在该数据集上训练的GAN模型生成的图像具有相同的指纹,即指纹从训练数据传递到了GAN模型。基于此,可以通过对图像进行指纹检测,并与指纹数据库进行对比,以此来进行伪造检测并进行生成算法溯源。具体的研究进一步证明了该方案的几个有益特性,包括通用性,与GAN发展的协同性,保真度和鲁棒性。
其中与GAN发展的协同性指GAN的生成效果越好,在其生成的图片中检测到指纹的概率越高。

If a GAN technique can approximate real data distribution more accurately, it also transfers the artificial fingerprints more accurately.

相关内容

热门资讯

maxhub怎么进入安卓系统,... 你有没有想过,MAXHUB的安卓系统就像是一个隐藏在会议平板里的魔法世界?想要进入这个神奇的世界,跟...
安卓如何切换鸿蒙系统,安卓手机... 亲爱的手机控们,你是否对安卓系统已经厌倦,想要尝试一下华为的鸿蒙系统呢?别急,今天就来手把手教你如何...
安卓系统和米柚系统吗,安卓系统... 亲爱的读者们,你是否曾好奇过,那些我们每天不离手的智能手机,它们的操作系统究竟有何不同?今天,就让我...
平板安卓系统目前最高,揭秘最新... 你有没有发现,最近平板电脑市场可是热闹非凡呢!尤其是安卓系统的平板,简直就像是一匹黑马,在科技江湖里...
安卓微信 系统音频,便捷沟通新... 你有没有发现,用微信聊天的时候,有时候一个音频消息就能把事情说明白,比文字快多了!不过,有时候这些音...
安卓系统uc下载目录,揭秘文件... 你有没有发现,每次下载完东西,安卓手机里总会有一些神秘的文件夹?没错,那就是UC下载目录!今天,就让...
各安卓手机系统区别,安卓手机系... 手机这玩意儿,现在可是咱们生活中不可或缺的好伙伴。你有没有想过,为什么市面上那么多手机,却各有各的特...
苹果新系统模仿安卓,探索苹果与... 你知道吗?最近苹果的新系统iOS 18.1正式发布了,而且这个新系统竟然在不少地方模仿了安卓系统!这...
安卓系统的应用市场,生态繁荣与... 你知道吗?安卓系统的应用市场,就像一个热闹非凡的集市,里面琳琅满目的应用让人眼花缭乱。今天,就让我带...
和平精英安装安卓系统,体验极致... 你有没有想过,在电脑上也能玩和平精英呢?没错,就是那个让你热血沸腾、紧张刺激的战术竞技游戏!今天,我...
kindle安装安卓系统费电,... 亲爱的Kindle迷们,你们是不是也和我一样,对自家的Kindle刷上安卓系统充满了好奇和期待呢?不...
ios系统还是安卓系统好用,揭... 说到手机系统,你是不是也和我一样,每次逛手机店都纠结得要命?iOS和安卓,哪个才是你的菜?今天,我就...
外卖快送安卓系统,打造智慧生活... 你知道吗?最近手机界可是炸开了锅,一款全新的安卓系统横空出世,它不仅让外卖快送变得更快更智能,还让我...
安卓p系统发布时间,揭秘安卓9... 你知道吗?最近安卓P系统终于发布了,这可是科技圈的大事啊!作为一个紧跟潮流的数码爱好者,我可是迫不及...
酷开系统能用安卓系统吗,智能电... 你有没有想过,家里的智能电视是不是也能像手机一样,装上各种好玩的应用呢?今天,咱们就来聊聊这个话题—...
安卓系统滴滴打车页面,便捷出行... 你有没有发现,每次打开手机上的滴滴打车APP,那个安卓系统的页面简直就像是个移动的指挥中心,信息丰富...
稳定系统版本安卓软件,软件版本... 哎呀呀,亲爱的手机控们,你们有没有遇到过这样的烦恼:手机里下载了好多软件,可就是有些软件总是不稳定,...
基于安卓的投票系统,基于安卓平... 投票新时代,指尖上的民主盛宴 在这个信息爆炸的时代,手机已经成为了我们生活中不可或缺的伙伴。而今天,...
怎么把安卓系统换掉,教你如何将... 你有没有想过,你的安卓手机是不是有点儿“老态龙钟”了呢?想要给它来个“换头术”,让它焕发青春活力?那...
安卓系统笔记平板推荐,高效办公... 你有没有想过,拥有一款性能卓越、功能丰富的安卓系统笔记平板,简直就是工作和学习的好帮手呢?想象你可以...