实时数据流分析的“极速前进”

同样的事务，当体验了更快速优质的服务后，就再也难以去忍受较差的服务。就好比习惯了高铁的人们无法再忍受长达数十小时的绿皮火车一样，实时数据流分析对比传统数据分析就是如此。

       

不论是以往的数据服务日志数据，还是以物联网、车联网为代表的传感器数据，这些数据在各类智能终端的普及的大背景下，原本体量非常大的数据流将进一步扩大。这些数据必须能够被极快速的处理，和相关行业数据以及大量的爬虫采集数据的第三方数据一起，从而让企业的决策者能够迅速的根据市场变化而改变战略，这将成为未来商业，在满足客户不断延伸的需求，提供差异化服务的利器。

实时数据流分析的无限商机

       

来自CIO|INSIGHT的调查数据显示，实时数据分析的主要好处主要体现在增强客户体验、提高运营效率、保持竞争优势和提高员工生产力等四方面。

伴随着移动网络的发展，其连接范围和连接能力激增，以及移动智能终端设备的迅速普及，让更多类型，更大容量的数据迅速产生，Gartner的数据显示，到2020年，使用的互联设备将达到204亿台；与此同时，在大数据计算处理框架的升级换代以及核心处理硬件计算能力提升的背景下，不管是数据中心还是云计算平台，创建大规模的可扩展的大数据处理框架都变的唾手可及；除此之外，各种分析软件工具已进行调整和演进，结合业务部门应用按需提供洞察，让数据流分析从计算到应用成为可能。

在这样的环境下，一方面实时数据流分析的业务背景，技术背景已然存在，另一方面企业对数据时效性的要求也越来越高，且数据的洞察价值伴随其留存的时间将不断贬值。在业务需求与技术的双重驱动下，实时数据流分析势必爆发出其无限商机。

实时代表了一种商业极速思想

      

要想将数据流分析的商业价值落地，除了拥有更广泛的架构愿景外，或许我还需要一套代表实时数据流分析的极速思想，以解决其在落地过程中种种阻碍。

• 对数据质量与安全的极致考量

“垃圾进，垃圾出”是数据分析界的一句谚语，其强调了数据质量的重要性。而对于实时的数据流分析而言，因为其实时性，对数据安全的考量因素则更多一些。从数据终端设备的授权与连接，到设备的更新与信息治理的合规性，再到网络连接与传输的安全性。数据传输到了什么阶段，对什么人员开发，都要从一开始做好数据权限跟踪与控制，只有从源头把握住了数据安全与数据质量，才会有后面的数据洞察。

• 对数据节点的极致把控
  

对实时数据流的流转各节点过程中的把控，数据在智能传感器处，是将预先处理好的核心数据传输汇总还是将整体原数据集中传输，将核心计算过程是放在云端还是各数据中心，对不同策略类型的存储是以内存为主还是以内存与磁盘混编存储，对每个关键数据节点都有着极致的追求，只有各关键节点达到极速，整体的数据流分析才能实现真正的实时。

• 对落地执行的极致把控

对整体数据流执行策略的把控，都有着极致的策略把控，是先从大局出发，逐步递进，还是先寻找关键节点，以点带面寻求突破，是首要考量的；其次根据不同企业的生产测试环境，还要考量小规模测试与大量实施的耦合连接，并在此过程中完成对未来洞察需求以及业务拓展的极限可拓展性；最后，在前期执行落地的情况下，如何将实时的数据洞察指导业务落地并反馈，如何形成一套完整的数据驱动闭环的把控。

英特尔——实时数据流分析的极速推动力

数据流分析需要一个面向未来的平台，该平台应该能够支持复杂的数据管理、高性能、低时延，并且能够大规模运行。英特尔作为软硬件融合厂商，和众多数据解决方案厂商均有合作，其对数据流分析的极速推动主要体现在以下几方面：

• 未来数据预测成本降低的强有力保障者

未来，在经济转型过程中，一方面增强业务的增长，另一方面则保持成本的遏制。多伦多大学经济学家Ajay Agrawal教授就曾讲过：“机器智能是一种预测技术，因此经济转型将以预测成本降低为中心并且有两大已确认的经济影响。首先，我们将利用预测技术探索之前未涉及的领域。第二，用于补充预测技术的其他事物的价值将增加。”机器智能则在实时数据流分析中的重要一环。

     

英特尔一方面通过提供诸如英特尔至强可扩展处理器的硬件产品，通过其实现资源的利用率和敏捷性，并凭借时钟速度和英特尔技术提供出色的分析性能，进而无需依赖高内核数的处理器来降低成本；另一方面则通过诸如英特尔内存驱动技术，透明地扩展系统内存，并与英特尔傲腾固态盘(SSD) 相结合，将固态盘整合到内存子系统中，使固态盘看起来像DRAM，从而扩大内存容量，突破DRAM 的限制，进而无需使用昂贵的内存产品，达到对比降低成本的效果。

• 实时数据流分析基础设施强有力的创新者
  

从移动计算比移动数据的原则出发，进一步拓展内存在流数据分析中的优势地位。英特尔傲腾技术以独特的方式将英特尔3D XPoint内存媒体、英特尔内存和存储控制器、英特尔互连IP 和英特尔软件组合在一起。对需要大容量和快存储的工作负载，这些构建块可共同减少时延并加快系统运行速度。

• 数据流分析未来可行之路强力探索者
  

为进一步加快选择和部署当今广泛分析场景所需的硬件与软件的过程，英特尔与实时数据流相关的各厂商联合合作，这些厂商包括数据流分析的各个环节，比如联想,SAP,SAS,通过不断的探索实践，为业界精选提供了大量提供大量灵活、易于部署且可扩展的解决方案，这些解决方案专门针对性能进行了优化联合解决方案的出台，在这个过程中英特尔以探路者的身份探索数据流分析未来可行之路。

未来可期，不论是从业务场景看商机，还是从其实施过程的极速衍进，以及各路厂商的极力探索，实时数据流分析都将踏上其“极速前进”的道路。

「END」

---

数据分析（ID : ecshujufenxi ）互联网科技与数据圈自己的微信，也是WeMedia自媒体联盟成员之一，WeMedia联盟覆盖5000万人群。