315晚会提到的人脸识别技术，有哪些应用？

3月11日，由百度开发者中心和InfoQ联合举办的第69期百度人脸识别技术沙龙圆满结束。沙龙邀请了百度资深产品经理和FSG产品专家从第一视角解读人脸识别行业应用和发展；分享人脸识别技术细节，解答人脸识别在金融领域的落地和商业化过程。

以下内容是基于百度沙龙的演讲素材，由InfoQ中文站整理并分享，主要分为三个部分：

• 第一部分：百度资深产品经理 娄双双：“百度人脸识别的行业应用与发展”

• 第二部分：FSG产品专家 子君：“人脸识别技术在百度FSG现金贷的实践”

• 第三部分：百度高级产品经理 吴延宇：“百度人脸开放能力介绍”

1 百度人脸识别的行业应用与发展

在20世纪60年代，自动化人脸识别技术就已经开始萌芽。经过五六十年的发展，一直到2012年，百度搜索才第一次上线人脸识别搜索服务。到2016年，人脸识别技术在行业里面得到了很广泛的认可和应用。

那么人脸识别技术到底是什么，能给我们的工作和生活带来什么益处？娄双双简要的做了介绍，并把人脸识别技术概括为这三大技术点：

• 第一是人脸检测、跟踪、关键点定位以及活体识别的技术。

• 第二是人脸的对比验证。

• 第三点就是人脸的查找。

其实听起来并不抽象，人脸检测就是让机器发现你，再加上活体识别，就能让机器发现是活的你。

例如上图，计算机通过人脸检测技术就能知道图片里面有多少张人脸，每张人脸都在什么位置，大家都是什么表情，是男还是女。

计算机通过人脸检测技术把脸设置成一个个关键点，然后把每个关键点的坐标、特征存储下来。计算机眼里的每一个表情和动作它都能做到实时检测和跟踪。

这是活体识别的一个形象图解，活体识别简单来说就是计算机能通过人的一些微表情和微动作来判断摄像头面前的人是一个活生生的人，而不是一张照片或者一个假人。

有了人脸检测和活体识别这两项技术，我们能用它来干什么？例如在小区里安装人脸识别摄像头，可以随时捕捉人员流动信息，对事后的人物查找很有帮助。其次就是在一些直播节目中会用到美颜、道具这样的能力，其背后就是用到人脸检测和AR技术相结合的一个应用案例。

人脸对比，让机器认识你

第二个技术点是人脸对比，形象点来说就是让机器认识你，如果你给机器两张照片，它能很快告诉你这两张照片是不是同一个人。这项技术在需要验证身份或者是验证这个人是不是原来注册的那个人的时候是非常有用，非常方便和快捷。

非常典型应用就是在金融领域在线身份认证，以及酒店Check-in，另外在公益项目中寻找走失儿童也会用到人脸识别技术。

第三个技术点是人脸查找，可以让机器在千千万万个人里面一眼就找到你，非常快。

在智能相册的应用场景里，通过人脸查找，我们可以实现人脸自动聚合，也能实现通过一张照片快速查找照片库里有没有这张脸。

另外在安防监控行业，一方面人脸查找技术能够支持我们做人脸的闸机、门禁、考勤机等应用，还能用来做疑犯追踪。在零售领域，人脸查找还能用来做会员识别。在景区里人脸查找技术也能帮助景区实现智慧景区的功能。

2 人脸识别技术在百度FSG现金贷的实践

百度从2016年开始大力发展金融业务，人脸识别技术在其中起到了非常大的帮助。现在不仅仅服务现金贷，所有金融业务都会引入活体识别。

金融场景中身份认证的期望和现状

子君在上面的这个图片里已经详细介绍了现在金融场景需要人脸识别的大背景了，因为黑产、诈骗、信息泄露等现象太多，带来了一定的负面影响。所以人脸识别在这个领域的作用就可以大展拳脚。通过对用户模型的建立或者是信息的采集，来构建人脸的特征。

人脸上最重要的三个点其实是两鬓太阳穴、两边颧骨、鼻子。

那么人脸识别在运用场景的三大杀器是什么？第一大杀器是眼镜；第二个是刘海；第三大杀器，就是拍照角度大幅的倾斜。百度的人脸识别结合金融实际的业务场景，经过对底层的算法、工程到上层的产品、服务的一系列优化工作，已经很好的解决了这些问题。

金融业务中为什么使用活体识别

在业务中希望对用户身份的真实性、有效性和一致性做验证。这三个是不同纬度，定义不一样，意义不一样，它的区间范围包括它的验证方式都是不一样的。凭证，比如身份证、银行卡、手机号、键盘锁、声纹、邮箱、帐号都是我们的凭证。但是未来人脸会成为我们最重要的凭证。

在进行金融业务的时候，传统验证方式特别不靠谱，比如密码、邮箱、身份证、银行卡、社保信息，这些信息泄露情况很严重。

活体识别可以很好地解决这个问题，在流程中可以对真实的对身份信息进行验证，可以对输入信息的有效性在流程中进行验证，也可以对当前信息的执行者进行一致性验证，真实性、有效性、一致性都可以验证。同时体验很好，耗时很短，秒级验证，成本低。

具体做法：

通过信息的采集还有OCR识别，其实就是身份证信息的自动审核，自动识别身份证内容，比人工更准确，减少了输入成本和等待成本，减少了对操作流程的打断，降低了客服人力投入，释放资源。

采用的方法就是三位一体，从能力到服务。子君说，其实想做一个远程认证服务，活体认证是一个能力，它可能在实验室里是一个算法，再往前一步它可能是一个工程化的东西，再往前一步可能是产品，再往前一步可能是服务。

其实这个服务主要有三点，聚合能力、标准统一化、能力服务化：

• 聚合能力即把整体的能力聚合起来，合作开发，寻求共赢，抓住场景，切入场景。

• 标准统一化，通过统一各方标准和认知，建立通用评测样本和方法。

• 能力服务化，把人脸识别技术在业务中的根源问题汇集起来集中解决，把百度技术包装成大家都可以用的服务。

人脸识别和业务的关系

不仅仅是在现金贷业务中，各种金融业务中都可以去运用人脸识别的方法。调起活体的时候捕捉正脸，通过产品引导，可以捕捉到清晰图片。捕捉若干张正面的图，并且去建造一个模型。从中随机选取一张相对来说质量最高最精细的图，作为模型的凭证。活体验证，验证是活人，防止欺诈和攻击。验证通过证明是活人，证明你的真实性、有效性、一致性，照片对比判定身份，输出最终结果。

可能有人觉得这个环节有很多漏洞，其实在实施过程中有很多引导。第一，需要业务中给用户告知正确的操作方式，耗时最少。比如用语音实时提示，眨眨眼。在一个短时效周期里用眨眼方式证明这个是自然人，不是模型、不是照片，不是蜡像。除了特定动作的识别，同时会使用很多辅助的手段来进一步佐证活体的真实性和有效性。

外部合作方式和服务产出

百度人脸识别已经对外开放SDK，用户手机端完成活体动作，云端比对，输出照片对比打分到业务方。线上自动处理超95%，身份验证环节，5秒内完成比对。有些用户会非常关心数据安全性的问题，需要说清楚的是，人脸识别过程中用到的是人脸的特征，对于模型和数据信息，百度人脸识别可以做到独立机房隔离存储，非常安全。对比数据源是否可靠？百度使用的是国家授权的数据源，有国家的法律严格管控，照片对比的误识率最小。同时在时效性和易用性、用户体验和交互性方面，百度都做了很多组合策略，保证各个环节的转化率。

3 百度人脸开放能力介绍

前面介绍的百度的人脸能力，这些技术百度不想独有，想将这些技术以开放的形态贡献给所有创业者和开发者。延宇主要介绍百度大脑开放平台主要能给大家提供什么能力等内容。

人脸识别能力

首先是百度人脸能力和指标一些简述，人脸能力第一是人脸检测与追踪，给出人脸标准框的位置，五官关键点检测，提供72个关键位置。人脸像素解析，人脸语义切割，分清鼻子、眼睛、嘴，表情、性别、年龄、种族分析属性值，活体检测与验证，大规模人脸检索1：N。

人脸识别原理

人脸识别原理：假设你送上两张脸做一比一对比，我们先做一个检测定位和校正，把人脸框的区域拿出来，对这些框的内容切割，分析光照、色彩扰动，脸部分割做一些修复，通过神经网络学习，抽离出特征向量，在计算特征向量的的具体度量得出一个相似分。

技术优势

百度人脸优势有哪些？第一，人脸检测率高，业内首创端到端的深度神经网络人脸识别器，可以检测到不同姿态和光照下最小 12×12象素 的人脸。第二，稳定的关键点实时跟踪，可以提供SDK做实时跟踪，像素级的人脸解析。第三，高精度的1：1和1：N人脸识别率，使用 200万人的两亿数据在1000块 GPU集群上训练，可以达到比人类更精准的识别效果。第四，活体检测安全易用，人脸一比一验证率99.77%，FDDB世界第一。

4 彩蛋时间

想要了解更多AI技术，请复制链接： http://ai.baidu.com在浏览器中打开。

如果您对百度技术感兴趣，请点击「 阅读原文 」，进入百度开发者中心官网查看 。