AI技术与反诈的挑战

Sora的出现意味着今后利用AI升级技术实施欺诈行为门槛将变低，反欺诈产品服务类科技公司在面对更强大的欺诈攻击时，将面临更加严峻的挑战。其中，可预见最大的变化会来自“深度伪造”。“深度伪造”的危险不仅在于生成虚假视频和图片，还在于其所促成的整个诈骗生态系统：一个由机器人、虚假账户和匿名服务组成的错综复杂的网络运作，所有这些都旨在制作、放大和分发捏造的信息和内容，具有识别难、检测难和追溯难的问题。除“深度伪造”外，AI生成视频包含违法或伦理道德风险内容、合成身份、虚假信息传播以及版权隐私侵犯等，也都是Sora将来可能带来的棘手问题。要想防御与打击这些问题造成的欺诈行为，

一方面需要识别检测伪造的视频、图片和信息（有效甄别出虚假伪造的内容）；

另一方面需要实行诸如“深度伪造”欺诈行为的渠道和平台网络进行识别与检测（多方面提升数字账号的安全性）、同时还要防范由类似AI生成工具引发的假证滥用情况。针对Sora问世后公众产生的造假焦虑，OpenAI称在真正面向公众推出产品时，将确保生成视频包含来源元数据，并推出检测视频真伪的工具。OpenAI还承诺，在产品中使用Sora前将采取安全措施，包括由“错误信息、仇恨内容和偏见等领域的专家”对模型进行对抗性测试来评估危害或风险；核查并拒绝包含极端暴力、性内容、仇恨图像、他人IP等文本输入提示等。即便如此，OpenAI也承认，尽管进行了广泛的研究和测试，“我们仍无法预测人们将使用我们技术的所有有益方式和滥用我们技术的所有方式”。

随着技术水平的提升，AI生成视频的反欺诈审核迎来了新的挑战，ADVANCE.AI作为全球领先的人工智能科技企业，致力于为全球金融机构和互联网企业提供中立、可靠、合规的数字身份验证和风险管理解决方案。一直以来，ADVANCE.AI都在密切关注“深度伪造”与“合成身份”欺诈领域技术的进展，并不断提升产品实力。由ADVANCE.AI推出的“星鉴”数字身份验证与风险管理解决方案，产品中包含了全新升级的“3D活体检测功能”，通过引导用户移开/靠近相机，进行活跃度检测，捕捉用户近景和远景图像，确保用户图像采集的实时性，提高对重拍和深度伪造欺诈的检测准确性，高效防范Al换脸、人脸合成等“深度伪造”身份欺诈攻击。而同样防范身份伪造的“假证检测”产品，则通过全自动化的工作流程、智能的机器学习模型，确保能够准确、快速地识别出6大证件伪造类型，确保用户提供的身份证件的真实性，预防欺诈行为，保护企业和机构免受身份证件伪造风险的影响。

Sora发布以来，ADVANCE.AI一直给予高度关注，面对未来由此带来的欺诈升级，相应的反欺诈解决方案产品已加入升级计划，有能力与信心应对欺诈领域日新月异的变化，持续为企业全球化发展保驾护航。针对此次Sora的发布，我们采访了ADVANCE.AI技术负责人范怀宇与ADVANCE.AI人工智能产品负责人余江波，二人分享了Sora在AI生成欺诈领域的影响判断与防范应对的看法。

对抗“深度伪造”的黑暗升级，从算法与数据训练上提升反欺诈技术

“在‘AI视频生成’这件事上，Sora的发布有点划时代的意思，多年后我们甚至可以用‘Sora前时代’和‘Sora后时代’来进行描述，等Sora正式面向公众发布且大面积铺开使用后，影视、游戏、广告等行业肯定会有不小的变革，而在AI生成视频欺诈领域也会有影响，欺诈者的犯罪成本和门槛进一步降低了。”ADVANCE.AI技术负责人范怀宇说到，“而该技术对‘深度伪造’这一欺诈行为的加持将是最明显的，以往我们应对“深度伪造”监测识别的常见方法有利用图像的特征，寻找特定篡改证据的[图像特征检测]，以及[图像构成真实性比对]的方法，利用人工智能技术深度伪造的图像或视频，在图像细节上，还是会出现一些与基于实物正常拍摄的图像之间的明显偏差，比对其中的差异后进行反欺诈应对。”范怀宇还表示“在动态视频的深度伪造监测上，以往我们会通过检测、观察动态人像在一些指定角度扭动时图像特征或构成的异常变化，可以发现是否存在伪造。有了Sora的加持后，这类伪造视频细节上的真实程度会大幅提升、漏洞与破绽可能会变得难以察觉，这就要求我们要提升ADVANCE.AI现有的‘活体检测功能’产品的欺诈行为识别能力，从算法与数据训练上下功夫。”