郑重声明:上海居住证积分网(启课)是非官方的积分落户信息民间交流网站,所分享的政策、资料、解读等内容,仅供参考,具体请以官网公布为准!
上海居住证积分在线咨询
所在位置: 上海居住证积分 > 全国落户资讯 > “AI换脸”人眼难辨 瑞莱智慧推出“深度伪造检测平台”长期对抗潜在风险

“AI换脸”人眼难辨 瑞莱智慧推出“深度伪造检测平台”长期对抗潜在风险

来源:上海居住证积分 发布时间:2021-07-12 16:20:59 阅读量:

  中新网上海新闻7月12日电(郑莹莹)信息爆炸时代,“眼见未必为实”。人工智能技术在带来新一轮发展机遇的同时,也存在诸如“AI换脸”之类的潜在安全隐患。

  8日至10日在上海举行的2021世界人工智能大会上,依托清华大学人工智能研究院设立的人工智能企业――北京瑞莱智慧科技有限公司(简称“RealAI”或瑞莱智慧)推出“DeepReal深度伪造检测平台”,致力补漏洞、长期对抗深度伪造技术带来的潜在风险。

  ――“三大潜在风险”让拥抱人工智能有难度

  “深度学习模型本身是黑盒,或者通俗来说,即便是开发者也难以明白它具体是怎么运作的,相应地,它一定存在难以被发现的漏洞;我们关注的AI内生安全就是希望去发现这些漏洞,并弥补这些漏洞。”瑞莱智慧副总裁唐家渝在受访时说。

  他介绍,随着人工智能的广泛应用,整个产业面临的三大困境逐渐浮现,瑞莱智慧致力于解决这些困境。

  第一是算法可靠问题,深度学习算法缺乏可理解的决策逻辑和依据,无法量化不同决策的可靠程度,导致难以落地于医疗、自动驾驶等高可靠性要求场景;同时,基于对抗样本攻击技术可以破解安防监控、手机刷脸解锁、人脸识别闸机等识别系统,实现身份伪装或隐身逃逸,为个人财产安全与社会公共安全带来全新挑战。

  第二是数据安全问题,提升AI能力需要挖掘数据价值,但在特定AI应用场景中,所需要用到的数据往往涉及个人隐私信息,简单明文数据传输和利用很可能导致隐私泄露;而有价值的数据分散形成数据孤岛,在打破数据孤岛的过程中,数据用途和用量难以控制,存在被滥用和复制的可能,同时数据权属不明确,数据收益不清晰。

  第三是应用可控问题,AI算法偏差导致不公平性风险,比如人脸识别算法存在种族歧视与性别歧视,AI信贷模型对特定地域人群的歧视等,缺乏有效衡量算法公平性的方法和工具;同时,AI技术的滥用引发道德伦理风险,比如深度伪造技术的滥用带来的个人和社会风险问题。

  ――人眼难辨  深度伪造需要依靠技术检测

  在应用安全问题方面,深度伪造技术的大规模滥用蕴含着巨大的潜在危害,将人工智能的负面作用推向了社会舆论的风口浪尖。

  比如,在Tik Tok上受到关注度极高的汤姆・克鲁斯的伪造视频,肉眼来看已经难以辨别是假的了。在人眼难辨的情况下,对于深度伪造的虚假内容,需要依靠技术进行检测。

  瑞莱智慧基于团队深厚的AI技术积累以及基于实战需求对产品不断迭代,正式推出业界真正可落地的深度伪造检测平台DeepReal。唐家渝介绍,该平台拥有工业级的检测性能,以及应对实网环境对抗变化的检测能力。平台支持对视频和图片进行批量检测,全界面化操作。他介绍,在目前所开源的所有学术数据集上,该平台的检测准确率均超过99%,同时,在百万规模的实网深度伪造测试集上达世界顶尖水平。平台对于单张图像的检测耗时不到30毫秒,支持横向扩展与集群部署,适用于大规模实网落地。针对互联网环境中众多的深度伪造类型,平台也进行了全面的覆盖,包括针对真实人物的面部替换、表情操纵,以及完全合成的虚假人物等。

  ――长期对抗 应对“不断进化的”深度伪造

  唐家渝介绍,依靠机器检测的过程其实是一个长期对抗的过程。这里的对抗性主要体现在两个方面。

  第一个方面是新的造假算法在不断丰富,伪造图像越发逼真。举两个典型的例子,最初的伪造视频其实是有一些反常识的特征的,比如一段1分钟的视频中,人没有眨一次眼睛,于是可以基于人体的生理特征去对人物的真假进行判定。但造假者随后就实现了在视频中随机生成眨眼动作,很大程度上逃避了这种检测方式。第二个例子,通常深度伪造视频为了让人物与背景有比较好的融合,会对边缘进行简单的高斯模糊处理,而当检测算法“捕捉”到这样的特征后,伪造算法也会升级,对人脸边缘做更精细化的处理。

  第二个方面是可利用深度学习的缺陷绕过检测算法。目前的检测算法仍然是基于深度学习框架,存在结构性缺陷。以典型的对抗样本攻击为例,通过在图片或视频上添加对抗样本噪音,可以使伪造内容躲避自动检测。

  唐家渝表示,实网环境中的伪造视频不断变化,需要有强对抗的手段加以遏制。为此,瑞莱智慧推出的检测平台主要从两方面进行了应对:一为了能够快速即时应对新型的深度伪造类型,利用了贝叶斯深度学习,另外加上小样本增量学习的方法,使得在初期见到少量新型伪造数据时,便能迅速学习到伪造特征从而进行有效检出。二在对抗环境中使用对抗学习技术,提升算法鲁棒性,有效应对恶意攻击。

  除了上述有代表性的两个方面外,瑞莱智慧也进行了全面的技术布局。比如实战环境中有音视频数据,所以会利用多模态分析算法综合分析;利用贝叶斯深度学习,将伪造视频的先验知识进行融合,输出更加准确的置信度,增加对预测结果确定性的预判,再结合具有可解释性的数据集标注和构建,保证检测结果可信服。除此,瑞莱智慧也布局了溯源技术,进一步提升检测结果的可解释性与可靠性。

  唐家渝说,“针对深度伪造的风险,一定是需要从监管到研究再到落地实战进行全方位的治理,技术防范是其中的基础。”因此,目前瑞莱智慧也已经与工信部、公安部等监管部门、科研机构、实战部门等进行合作,共建深度伪造治理生态。(完)

注:请在转载文章内容时务必注明出处!   

编辑:郑莹莹  

微信扫码

关注“上海居住证积分之家”

即可查看余下内容

二维码以过期,请重新刷新

快速获取积分方案 落户更轻松

您的现状是?

填写信息获取结果

姓名:
联系方式:

立即获取专属方案

上述内容仅供参考,大家如果想要了解更多上海积分落户相关信息,可以关注微信公众号。(如想快速落户,可通过 【在线咨询】跟本站落户指导老师沟通,将一对一为您解答相关落户问题。

*您的年龄:

*您的学历:

*工作期间取得的职称和技能:

*在本市工作及缴纳社保:

*姓名:

*手机号码:

立刻获取测评结果>>

上海居住证积分常见问答

错过了应届生落户上海该怎么办?

应届生落户可谓是落户上海的首关,而且近两年又放宽了不少。有些同学来问,因为差1、2分或者错过申报时间等其他原因,错过了应届生落户上海,还想要落户该如何办?还有哪些落户方式?下文整理了相关内容,供各位有需要的朋友参考了解!

上海人如何查询自己的档案存在哪里?

档案里有哪些材料?我换过几次工作,怎么查档案存哪里了?档案在我们的生活中非常重要,关于档案的小知识,这篇带您了解!

2024年上海市居住证持有人员办理港澳通行证...

有网友咨询,2024年上海市居住证持有人员办理港澳通行证需要什么材料?居住证持有人员首次申领往来港澳通行证,申请人须亲自办理。具体办理材料清单可详见下文。

2024年上海居转户申请热门问答

在最新的2024年上海居转户申请过程中,有哪些值得注意的内容呢?例如:以职称申报但是职称评审表遗失,该怎么办?办理人的职称评审表只有复印件,能否办理?居转户可以带配偶一起落户吗?详细内容来看下方内容!

2024年上海居住证积分120分怎么申请?个人可...

在上海工作生活除了离不开钱,也离不开居住证和积分。那么2024年上海居住证积分120分怎么申请?个人可以申请吗?下文就为各位整理了相关问题解答,快来了解一下吧!

2024年上海居住证积分办理需要多久?

2024年春节假期已过,各位朋友要回到工作岗位开始新一年的奋斗啦,关于2024年上海居住证积分办理,下文为您带来了办理需要多久的相关内容,有需要今年办理居住证积分的朋友别错过啦!

落户交流群

微信公众号

上海居住证积分微信群

扫一扫,加入微信群

落户问题随时沟通!专业人员免费在线解答!
上海居住证积分微信公众号

扫一扫,关注微信公众号

落户政策、资讯一键获取!还有积分测评等服务!
上海居住证查询 交流群
上海居住证查询 考证指导
上海居住证查询 积分测算
上海居住证查询 学历提升
上海居住证查询 档案服务
上海居住证查询 落户咨询
手机扫码 在线咨询
咨询电话 咨询电话

电话

021-65378891
积分群 积分群

交流群

上海居住证积分交流群
公众号 公众号

公众号

上海居住证积分公众号
上海落户咨询 上海落户咨询

落户咨询

积分首页 积分首页

返回顶部

My title page contents