[人工智能]手语识别转文字落地深圳医院，厉害了我的腾讯

转载自腾讯优图

近日，深圳市人民医院来了两位特殊的“志愿者”，听障患者只需面对“志愿者”完成手语表达，“志愿者”就能实时翻译成文字，并反馈给医院工作人员。在医院工作人员用语音回复后，又能把语音实时翻译成文字，反馈给听障患者，实现双向沟通。

10月25日，由腾讯优图实验室研发部署，与深圳市信息无障碍研究会、深圳市聋人协会、腾讯公益联合发布的AI手语翻译机在深圳市人民医院率先试点落地，用两台普通的平板电脑，搭建起了听障患者和医护人员沟通的桥梁，希望在医院这一场景中为听障人士提供更好的服务。

今年5月16日，全球无障碍宣传日之际，腾讯优图正式对外公布了在手语识别算法上的突破。经过半年多的技术攻坚，结合对听障患者真实需求的洞察，不断完善医院细分场景的手语语料，最终实现AI手语翻译机在医院的试点落地。

手语实时翻译成文字

帮助听障患者缓解就医沟通障碍

在深圳市人民医院的一楼门诊台附近，优图AI手语翻译机引来了不少群众围观体验。

“人在生病的时候，心理比较脆弱。不清楚看病流程却不知道怎么求助、无法准确向医生描述症状等等综合原因，导致许多听障朋友生病了却不想去医院，就这么拖着。”腾讯优图手语识别负责人阳赵阳介绍道。过去的很长一段时间，他经常出入特殊学校、机构，与听障者、手语老师沟通交流，希望更深入的了解听障者在医院场景的需求、痛点。

有了腾讯优图的AI手语翻译机，就能把听障患者的手语翻译成文字，并在工作人员语音回复后实时翻译成文字，反馈给患者，在就医的多个环节中辅助双方完成沟通，为听障患者解决许多以前看病过程中遇到的窘迫，缓解沟通障碍。

(优图AI手语翻译机使用界面)

此前，为了提升手语翻译机的使用体验和识别效果，深圳市信息无障碍研究会、深圳市聋人协会、腾讯公益邀请了多位听障志愿者到医院多次进行测试体验，亲自体验了优图AI手语翻译机使用全流程。

参与测试后，听障志愿者梁先生表示，以前每次来医院都很焦虑，担心表达不清楚自己的需求，AI手语翻译机能够在一定程度上缓解自己看病时的沟通障碍。

在多次测试中，固定句式测试近1000次，涵盖不同句子的多种表达，总体正确率达到80%以上。听障志愿者们均表示，优图AI手语翻译机识别准确率不错，能够帮助自己在医院进行沟通。

（听障志愿者在深圳市人民医院进行测试体验）

“以前遇到听障患者来看病，我们往往会花很多时间在沟通上，经常沟通半天却弄错了对方的意思，双方都很着急。”小钟是深圳市人民医院的一名护士，在帮助一位听障患者使用AI手语翻译机进行挂号后，她表示，“手语翻译机能提升我们和听障患者的沟通效率，让我们更好地为听障患者服务。”

践行科技向善

用科技助力社会无障碍建设

据北京听力协会2017年预估数据，我国听力障碍人士已达7200万，其中有2700万听障者需通过手语等方式进行沟通交流。尽管我国在信息无障碍建设上的投入逐渐增加，但听障人群在许多场景下的沟通障碍仍然亟待解决。

优图AI手语翻译机通过自研算法实现了对复杂手语表达的识别技术突破，该算法融合了先进的手势识别、动作识别和序列翻译等技术，考虑了手语的地域性和多样性表达，包含了不同的表达习惯和速度。AI手语翻译机在深圳市人民医院的试点落地，从医院场景着手，帮助听障人群缓解沟通障碍，让他们看病更方便。

目前AI手语翻译机仍会出现一些误识别的情况，腾讯优图仍在联合深圳市信息无障碍研究会、深圳市聋人协会，持续对算法效果进行提升，力图为听障人群带来更好的服务，助力社会无障碍建设。“前沿技术的落地不是一件简单的事情，但它是我们不断在探求的方向”，阳赵阳表示，“这次的翻译机落地是一次扎实的尝试，需要提升的地方还有很多，我们希望陪伴它继续进步，也希望翻译机能够为听障患者带来实际的便利。”

科技是手段，向善是选择，科技发展助力社会信息无障碍建设。AI手语翻译机是腾讯在计算机视觉人工智能领域的又一重大技术突破，也是腾讯践行“科技向善”理念的又一体现。

实际上，这并不是腾讯在AI+无障碍建设上的首次尝试，腾讯一直在坚持推动“一个都不能少”和“信息无障碍”理念的传播与落地。从2009年起，腾讯在信息无障碍方面率展开探索，截至目前，旗下QQ、QQ空间、微信、腾讯网、腾讯新闻、应用宝、企鹅FM等大部分产品已针对障碍用户实现专门优化。腾讯旗下各类产品从社交、娱乐、新闻等多维度出发，共同努力，为障碍人士构建友好的信息社会。2018年12月3日，获得“联合国教科文组织数字技术增强残疾人权能奖”。

长按扫码撩海归

   觉得不错， 请随意转发，麻烦点个在看！