Face Forgery Suvery
创始人
2024-06-01 18:51:57
0

文章目录

  • Face Forgery
    • Face Forgery class
      • Attribute Manipulation
      • Expression Swap
      • Identity Swap
      • Entire Face Synthesis
  • Face Forgery Detection
    • Low-level
      • On the Detection of Digital Face Manipulation(CVPR2020)
    • High-level
      • Protecting World Leaders Against Deep Fakes
      • Detecting Deep-Fake Videos from Appearance and Behavior
    • Out of Arms race
      • Artificial GAN Fingerprints: Rooting Deepfake Attribution in Training Data

Face Forgery

对数字图像的优化一直是计算机应用技术的研究热点,对人脸图像进行修改自美颜相机的出现后持续受到广大主播用户的追捧。这些图像修改方式或多或少对人脸认证增加了难度。尤其是近些年数据的爆炸增长和计算能力的快速发展,出现的专门对人脸进行伪造的算法,其依靠训练学习方式对人脸外观或者属性进行伪造,伪造出来的人脸图像也愈加真实,已经到了人眼无法辨别的程度。由于利用了更加先进的算法,以往的图像认证技术也很难应对这种伪造图像。

Face Forgery class

目前还有没准确的人脸伪造方式分类方案,但按照伪造程度大致可以分为Attribute Manipulation, Expression Swap(inc. Lip Sync), Identity Swap Entire Face Synthesis. (TODO: 优化分类方案)

Attribute Manipulation

这种伪造方式包括对人脸或头发的颜色,性别、年龄、是否佩戴眼镜等内容进行篡改。该类伪造方式通常以

Expression Swap

Identity Swap

Entire Face Synthesis

Face Forgery Detection

为了应对人脸伪造带来了巨大安全隐患,研究员也提出了诸多检测办法。在这里,我将其分类为两种:

  1. Low-level Approach:侧重于检测人脸图像合成过程中引入的像素级痕迹。比如,基于GAN网络生成的伪造图像,存在明显的与真实图像不同的频率分布特征。
  2. High-level Approach:侧重于检测伪造视频中存在的语义级别的不一致性。比如,视频中说话人的口型与声音存在明显的差异。

Low-level

On the Detection of Digital Face Manipulation(CVPR2020)

在这里插入图片描述
本文采用multi-task的方式同时对图像进行伪造检测和伪造区域的定位,文中对比了两种Attention机制和不同监督程度下训练得到的模型的准确度。除此之外,本文推出首个包含多种人脸伪造类型的数据集Diverse Fake Face Datasets(DFD),并提出逆交叉非包容Inverse Intersection Non- Containment(IINC)度量标准,用于评估attention map与GT的一致性,与现有的度量(IoU等)相比更加稳定准确。详见>>

High-level

以下介绍的检测方式,尽量以发表的时间为序

Protecting World Leaders Against Deep Fakes

Here

Detecting Deep-Fake Videos from Appearance and Behavior

这篇文章与上一篇一脉相承,作者也属于同一波人。所采用的基本原理一致,所不同的是,本篇利用了CNN,并在常见伪造检测数据集上做了实验和对比。

here

Out of Arms race

众所周知,伪造的生成算法与伪造的检测算法彼此相互抗争,在此过程中,双方都可以利用对方现存算法的缺陷实现算法的改进,这使得双方的算法不断的提升效果,但这种模式无疑进入一种死循环。对于伪造检测算法而言,这使得其无法做到真正的有效和泛化。因此,逐渐有学者另辟蹊径,跳出这场你来我往的竞争中,试图从根本上找到一种一劳永逸的伪造检测办法。

Artificial GAN Fingerprints: Rooting Deepfake Attribution in Training Data

在这里插入图片描述

作者认为当前的伪造检测方与伪造生成算法构成的“军备竞赛”是无休止的。必须要从根源入手来解决伪造检测问题。基于GAN的伪造生成算法,作者提出利用隐写分析技术对训练GAN的数据集加入指定指纹,并证明在该数据集上训练的GAN模型生成的图像具有相同的指纹,即指纹从训练数据传递到了GAN模型。基于此,可以通过对图像进行指纹检测,并与指纹数据库进行对比,以此来进行伪造检测并进行生成算法溯源。具体的研究进一步证明了该方案的几个有益特性,包括通用性,与GAN发展的协同性,保真度和鲁棒性。
其中与GAN发展的协同性指GAN的生成效果越好,在其生成的图片中检测到指纹的概率越高。

If a GAN technique can approximate real data distribution more accurately, it also transfers the artificial fingerprints more accurately.

相关内容

热门资讯

安卓8录制系统声音,安卓8系统... 你有没有想过,用安卓手机录个视频,还能把系统里的声音也一起录下来?这听起来是不是很酷?想象你正在玩一...
安卓系统体感游戏,引领健康娱乐... 哎呀呀,你有没有想过,在沙发上就能动起来,和游戏里的角色一起跳跳蹦蹦?现在,这不再是梦想啦!随着科技...
安卓原生系统 如何刷,从入门到... 你有没有想过,你的手机里装的那个花里胡哨的系统,其实它有个超级酷的亲戚——安卓原生系统!想象没有那些...
鸿蒙怎样还原安卓系统,操作指南... 亲爱的手机控们,你们有没有想过,有一天你的华为手机从安卓变成了鸿蒙,然后你又想把它变回安卓呢?这可不...
如何关闭安卓盲人系统,安卓手机... 亲爱的手机用户们,你们有没有遇到过这种情况:手机屏幕突然变得“聪明”起来,不管你点哪里,它都“念念有...
安卓系统怎么装win,深度解析... 你有没有想过,你的安卓手机也能变身成为Windows系统的超级战士呢?没错,就是那个我们日常办公、学...
车载安卓系统进底层,车载安卓系... 你有没有想过,你的爱车其实也可以像智能手机一样,拥有一个智能的大脑呢?没错,就是那个我们熟悉的安卓系...
安卓系统版本英文缩写,Expl... 你有没有发现,你的安卓手机每次更新系统时,都会出现一些让人眼花缭乱的英文缩写?比如,Lollipop...
在车上安装安卓系统,打造个性化... 亲爱的车主朋友们,你们的车载系统是不是已经有点儿“老态龙钟”了呢?别急,今天我要给大家带来一个超级实...
鸿合安卓系统使用,引领智能教育... 你有没有遇到过这样的情况:一台看起来高大上的鸿合教学一体电脑,竟然只能显示安卓系统,电脑桌面却成了“...
安卓12系统是否成熟,成熟度与... 最近手机界可是热闹非凡呢!安卓12系统正式发布了,小伙伴们是不是已经跃跃欲试,想要一探究竟呢?今天,...
安卓系统剧机软件,打造沉浸式观... 你有没有想过,家里的老电视也能变身成智能剧机呢?没错,就是那种可以安装安卓系统软件的智能电视!今天,...
全站仪安卓系统,引领现代测量技... 你有没有想过,全站仪这个看似高冷的专业设备,竟然也能和安卓系统来个甜蜜的邂逅呢?没错,现在就让我带你...
安卓系统设置预装软件,揭秘安卓... 你有没有发现,新买的安卓手机里总有一些你不认识的应用?别急,今天就来给你揭秘这些神秘的小家伙,教你如...
安卓系统乱象怎么解决,全面解析... 你有没有发现,用安卓手机的时候,有时候会遇到一些让人头疼的小麻烦?比如APP版本号乱七八糟,更新速度...
安卓系统壁纸app苹果,海量美... 你有没有发现,手机里的壁纸可是我们个性的小秘密呢?今天,就让我带你一起探索安卓系统和苹果系统上那些让...
安卓系统如何充值etc,北京E... 亲爱的车主朋友们,你们是不是也在为ETC充值的事情烦恼呢?别急,今天就来教你们如何用安卓手机轻松搞定...
小米4系统安卓下载,畅享安卓8... 亲爱的手机控们,你是否曾为拥有一部性能卓越、价格亲民的智能手机而心动?小米4,这款曾经风靡一时的国产...
安卓港版系统怎么升级,轻松掌握... 你那安卓港版手机是不是已经有点儿“老态龙钟”了?别急,今天就来给你支个招,让你的手机焕发青春活力! ...
黑莓手机安卓系统吗,从Blac... 亲爱的手机控们,今天咱们来聊聊一个曾经风靡一时的品牌——黑莓。你可能听说过它,也可能对它有所了解,但...