加州大学河滨分校的计算机科学家可以检测deepfake视频中操纵的面部表情,其准确性高于当前最先进的方法。在面部身份(而不是表情)被交换的情况下,该方法也与当前方法一样有效,从而导致检测任何类型的面部操作的通用方法。这一成就使研究人员更接近于开发自动化工具,以检测包含宣传或错误信息的操纵视频。
视频编辑软件的发展使得将一个人的脸换成另一个人的脸并改变原始面部的表情变得容易。随着肆无忌惮的领导人和个人利用操纵的视频来影响政治或社会舆论,识别这些视频的能力被许多人认为对保护自由民主至关重要。存在可以合理准确地检测何时交换人脸的方法。但是,识别仅更改表情的人脸更加困难,迄今为止,还没有可靠的技术存在。
“使Deepfake研究领域更具挑战性的是Deepfakes的创建,检测和预防之间的竞争,这种竞争在未来将变得越来越激烈。随着生成模型的更多进步,Deepfakes将更容易合成,更难与真实区分开来,“论文合著者Amit Roy-Chowdhury说,他是Bourns工程学院的电气和计算机工程教授。
第一列和第二列分别显示原始 im - age 和纵的。第三列中的黑白图像是相应的双核GT面具。来自Face2Face(第1,2,3行)和神经纹理(第4,5,6行)数据集的操纵图像的预测蒙版(第4列)和生成的CAM(列5)。(Mazaheri & Roy-Chowdhury, 2022)
UC Riverside方法在深度神经网络中将任务分为两个部分。第一个分支识别面部表情,并将有关包含该表情的区域(如嘴、眼睛或前额)的信息输入到第二个分支(称为编码器-解码器)中。编码器-解码器架构负责操作检测和定位。
该框架称为表达式操作检测(EMD),可以检测和定位图像中已更改的特定区域。
“多任务学习可以利用面部表情识别系统学习的突出特征,使传统操纵检测系统的培训受益。这种方法在面部表情操纵检测方面取得了令人印象深刻的表现,“领导这项研究的博士生Ghazal Mazaheri说。
面部操作的基准数据集基于表情和身份交换。将源视频的表达式传输到目标视频上,而不更改目标视频中人员的身份。另一个在单个视频中交换两个身份。
对两个具有挑战性的面部操作数据集的实验表明,EMD不仅在检测面部表情操作以及身份交换方面具有更好的性能。EMD准确检测了99%的操纵视频。
这篇论文“面部表情操作的检测和定位”在2022年计算机视觉应用冬季会议上发表。
快速申请
个人信息保护声明
感谢您对万佳留学网的友好访问,保护用户个人信息是万佳留学网的基本原则,本网将按照本声明及《隐私政策》的规定收集、使用、储存您的个人信息,特此发布本声明如下,提醒您仔细阅读。
一、用户须知
1、本网站尊重您的隐私,遵照中华人民共和国相关处理网络个人信息的规定来处理您的信息。
2、本声明将介绍我们如何处理通过网站收集的所有个人信息,以及访问和更正这些个人信息的权利。
3、本网站享有变更本声明的权利,这些变更信息在更改的声明发布时立即生效。建议您定期阅读声明,了解声明变更的情况。
二、个人信息的范围和收集
1、我们收集您的个人信息的最终目的是为了向您提供更好的产品、服务,优化并丰富您的用户体验,这些个人信息是能够单独或者与其他信息结合识别您的个人身份的信息,包括:
①姓名
②移动电话
③您在网站的表格上输入的其他信息(电子邮箱、出生日期、学历等)
④在您上载到网站的内容中包含的任何个人信息
2、以上个人信息均是您自愿提供。您有权拒绝提供,但如果您拒绝提供某些个人信息,您将可能无法使用我们提供的产品、服务,或者可能对您使用产品或服务造成一定的影响。
3、对于不满18岁的用户,须在其法定监护人已经阅读本声明并且许可的情况下,通过网站提交个人信息。
三、用户信息保护
用户使用万佳留学网服务过程中,根据具体需要,用户提供个人信息。万佳留学网将采取一切必要合理的措施保护用户提供的个人信息,未经用户同意不会向第三方透露用户的个人信息,但以下情况除外:
1、经您事先同意,向第三方披露。
2、根据法律的有关规定或者行政或司法机构的要求,向第三方或者行政、司法机构披露。
3、如您出现违反中国有关法律、法规或者万佳留学网服务协议或相关规则的情况,需要向第三方披露。
4、为提供您所要求的产品和服务,而必须和第三方分享您的个人信息。
5、其它万佳留学网根据法律、法规或者网站政策认为合适的披露。
以下情况造成个人信息外泄的,万佳留学网不负任何责任:
1、用户将个人密码告知他人或与他人共享注册账户。
2、政府部门、司法机关等依照法定程序要求本网站披露个人信息的。
3、任何由于计算机问题、黑客攻击、计算机病毒侵入、或因政府部门管制而造成的暂时性关闭等影响网络正常经营的不可抗力而造成的个人信息泄露、丢失、被盗用或被篡改等。
4、由于本网站链接的其他网站所造成的个人信息泄露。
四、用户的账号,密码和安全性
用户注册后将获得万佳留学网的账号及密码,用户应当妥善账号及密码并对通过账号进行的行为负责。用户若发现任何非法使用用户账号或安全漏洞,应立即通知万佳留学网。
五、邮件、短彩信服务规则
用户同意万佳留学网有权通过邮件、短信、彩信等形式向用户发送订单信息、促销活动公告等,如果用户不想接收来自订单信息以外的邮件和短信,用户需及时通知万佳留学网。
六、责任限制
万佳留学网对于用户因使用网络服务而遭受的任何直接、间接、偶然、特殊及继起的损害不承担责任,亦不对用户所发布信息的删除或储存失败承担责任。
七、用户义务
用户使用网络服务过程中必须遵循以下义务:必须符合中国有关法规,不传输任何非法的、骚扰性的、中伤他人的、辱骂性的、恐吓性的、伤害性的、庸俗的,淫秽等信息资料。不使用网络服务进行非法用途,如教唆他人实施犯罪或侵权行为。不干扰或破坏网络服务或与网络服务相连的服务器和网络。遵守所有涉及使用网络服务的网络协议、规定和程序。用户须对自己在使用服务过程中的行为承担法律责任。若用户违反上述任何义务,万佳留学网有权作出独立判断立即取消用户服务账号,并保留追究用户法律责任的权利。用户在路灯招生信息网的使用记录将作为用户违反法律的证据。
八、更正或投诉
如果您需要查询、修改或更正您的个人信息,或对个人信息保护问题有任何疑问或投诉,您可以拨打电话联系我们。
九、法律适用及争议解决
本服务条款的生效、履行、解释及争议的解决均适用中华人民共和国法律,如发生争议应提交北京仲裁委员会裁决,仲裁裁决是终局的。本服务条款因与中华人民共和国现行法律相抵触而导致部分无效,不影响其他部分的效力。
隐私协议
用户信息保护
用户使用万佳留学网服务过程中,根据具体需要,用户提供个人信息。万佳留学网将采取一切必要合理的措施保护用户提供的个人信息,未经用户同意不会向第三方透露用户的个人信息,但以下情况除外:
1、经您事先同意,向第三方披露。
2、根据法律的有关规定或者行政或司法机构的要求,向第三方或者行政、司法机构披露。
3、如您出现违反中国有关法律、法规或者万佳留学网服务协议或相关规则的情况,需要向第三方披露。
4、为提供您所要求的产品和服务,而必须和第三方分享您的个人信息。
5、其它万佳留学网根据法律、法规或者网站政策认为合适的披露。
以下情况造成个人信息外泄的,万佳留学网不负任何责任:
1、用户将个人密码告知他人或与他人共享注册账户。
2、政府部门、司法机关等依照法定程序要求本网站披露个人信息的。
3、任何由于计算机问题、黑客攻击、计算机病毒侵入、或因政府部门管制而造成的暂时性关闭等影响网络正常经营的不可抗力而造成的个人信息泄露、丢失、被盗用或被篡改等。
4、由于本网站链接的其他网站所造成的个人信息泄露。