“触”手可及的视听新体验 ——触觉反馈生态、标准及新进展

  //  

编者按：在音视频行业蓬勃发展的大环境下，触觉如何带动视听，为用户带来更沉浸式的体验？LiveVideoStack 2023上海站邀请到陆其明，和大家分享“触”手可及的视听新体验。分享内容包括触觉的生理基础、触觉生态发展现状、怎么做好的触感、触感应用开发的平台支持、国际标准，最后介绍RichTap为解决触感生态两大痛点提供的一体化方案。

文/陆其明

整理/LiveVideoStack

今天我分享的主题是“触”手可及的视听新体验，主要分享现在触觉反馈的生态如何，有什么国际标准以及最新进展。

首先进行简单的自我介绍。我做音视频已经二十几年，在去年加入了瑞声科技，进入了一个全新的领域：触觉反馈。（有兴趣可以点击链接，进一步了解我的职业生涯回顾。）

这张图可以用来表达今天分享的内容。视听加上触觉产生化学反应，能够带来更沉浸的用户体验。我们平时握在手里的手机产生的振动，玩游戏时的游戏手柄以及戴VR头显时用的手柄、还有我看到国外一些厂商做的手套、马甲都能产生一些触觉反馈。总体而言，视听+触觉，是为了产生更沉浸的体验。元宇宙里面要追求更真实的体验，只有视听是不够的。

今天我要分享的内容可以分为六块，分别是触觉的生理基础、触觉生态发展现状、如何做好的触感、触感应用开发的平台支持、国际标准，最后介绍RichTap整体的解决方案。

-01-

触觉的生理基础

从这张大脑的剖面图中可以看到，大脑中有四个叶——枕叶、顶叶、颞叶和额叶，分别处理视觉、触觉、味觉和嗅觉、听觉。顶叶是专门处理触觉的。从大脑皮层的面积和每秒钟神经元放电的数量，可以看出处理触觉相关的比例非常高，仅次于视觉。科学发现，触感的响应速度也是最快的，是视觉的5倍。触觉作为人类与生俱来的一种感知世界、体验世界的能力，应该得到更多的重视。在元宇宙里，我们常常会觉得某样东西给人的感觉过于虚幻，就是因为我们触摸不到它。所以在未来，元宇宙要想获得更好的发展就需要得到更多重视，特别要重视五感在元宇宙里的重现方式。

-02-

触感生态的发展现状

接着看触感的生态发展现状。以手机为例，手机的触感发展比较成熟，已经进入了3.0时代。第一阶段，手机的振动触感仅仅用来表达来电提醒和短信提醒。绝大部分人的认知还停留在第一阶段，认为振动就是手机振一下，而不知道振动可以做出丰富的应用。在第一阶段，手机的振动是通过转子马达来表达的。

第二阶段开始用线性马达产生振动。马达硬件，即产生振动的硬件，也在进一步发展中。系统应用如输入法、UI控件、铃声等，都应用了振动。这一阶段对应的触感生态也开始发展起来了。

目前的触感生态已经进入了第三阶段，越来越多的应用开始运用手机振动的能力。在这个阶段，很多手机都已经用上了高端的X轴线性马达+高压芯片+Rich Tap整体的触感解决方案。游戏、社交媒体、音视频应用、交互式广告，越来越多的应用开始使用手机原生的振动能力，把各种效果表达出来。这一阶段，软硬件的基础设施在不断提升，触感生态即将迎来蓬勃发展的好时机。

这张图展示了触感硬件的进化。第一阶段是转子马达，不均衡的质量块绕着轴心转动。转子马达表现振动的感觉，用一个象声词形容，就是“嗡嗡嗡”。它反应比较慢，振动比较粗糙。第二个阶段叫Z轴线性马达，它的运动空间只有手机屏的厚度那么大，在其中进行往复振动。因为空间有限，它对触感效果的表现也很局限。最高端的是RichTap正在主推的X轴线性马达，它在手机屏横向线性地做往复运动，