论数据采集如何实现|电商数据采集方案

数据采集的实现

0

生产车间现场设备数据采集

1

主要包含：设备数据、产品数据、过程数据、环境数据、作业数据。

对于设备数据，由于工业现场设备的自动化程度、工业通信协议、设备接口等不统一，对设备数据采集方式也会采用不同的方式。

0

电商数据采集方案设计原则

2

目的性

在做设备的数据采集之前，需要先思考为什么要采集这些数据，这些数据到底能够带来什么样的业务价值。

诚然，国内大部分的工业现场还处在解决生产过程可见性的阶段，因此，能够先把数据采集上来是当务之急，至少能够实时地了解到现场都发生了什么。

但是，在智能制造的大背景下，需要看得远一些，在做数据采集之前，尽可能地多去思考一下什么样的数据对的业务改进帮助最大，这样也许会让在数据采集方面的投资回报率高。

每个采集项目，都需要从业务背景和需求出发，确认采集的目的和业务作用，然后进行任务实操。

经济性

  工业现场环境非常复杂，工业设备种类非常多，对于工业现场的数据采集，不同场景下可能有多种采集方案，但是企业作为盈利组织，首先考虑的是投资回报率的问题，因此，做设备数据采集方案设计时，需要结合数采业务目标，充分利用设备的现有条件（比如，设备已经具备的上位机系统、已经具备的通讯协议等）用最经济高效的方式来做数采方案的设计。

基于以上原则，结合工业现场场景，选用合适的数据采集方案就非常重要。

0

数据采集方式的选择

3

有上位机系统的设备数据采集

这里的上位机系统一般是指设备自带的监控系统，这样的设备往往自动化程度和信息化程度都比较高。

其上位机系统往往已经对设备数据进行了采集、存储，因此，对于这种有上位机系统的设备，首选的数据采集方案就是直接从上位机系统中获取设备的数据，而不是去和设备打交道。

这样就能够把一个OT的问题（设备层的数据采集）转化为IT的问题（两个信息系统的信息集成）。因为上位机系统能将设备的数据存储到自身所带有的数据库中，

然后以开放数据库访问权限的方式，或以WebService等方式释放数据访问接口，这样可以用最小的代价实现数据采集。

基于TCP/IP通讯协议的设备数据采集

在遇到火灾、危险化学品泄漏、道路交通事故、地震、建筑坍塌、重大安全生产事故、空难、爆炸、恐怖事件、群众遇险事件，水旱、气象、地质灾害、森林、草原火灾等自然灾害，矿山、水上事故，重大环境污染、核与辐射事故和突发公共卫生事件时均可拨打消防报警电话119。

  对于“基于TCP/IP通讯协议”，比较常用的有OPC Classic、Siemens S7、Modbus-TCP等通用协议，也有设备厂商自行定义的私有协议。这些协议的特点是都是基于TCP/IP协议簇，只是应用层协议不同。采用这些协议的设备一般都会有RJ45的接口，也就是以太网口。

  在这种场景下，采用的数据采集方案是一般是通过工业网关（也称“物联网关”或简称“网关”）采集，工业网关解析设备采用的工业通信协议，实现对设备数据的采集。

  整个采集流程从工业现场的设备端开始，通过控制系统的数据接口结合其工业通信协议，把数据采集到边缘采集设备如工业网关，工业网关对工业通信协议进行解析，把设备数据转换为网络数据，然后通过联网方式结合物联网协议，将采集的数据上传至工业互联网平台服务器或采集服务器。

  

目前通过工业网关进行协议采集，是比较主流的工业设备数据采集的方式。

当然这种设备场景下，也可以使用软网关采集，软网关采集是指脱离了硬件，直接把工业网关里面的嵌入式软件作为一个边缘采集软件安装在上位机系统运行，也是通过对工业通信协议解析把设备数据转换为网络数据，上传至工业互联网平台服务器或采集服务器。

“

设备接口

设备接口是指硬件构成或者是允许人和电脑、通信系统或者其它电子信息系统互动的元件系统。工业现场常用的串行接口、以太网口。串行接口也称串口（通常指COM接口），是采用串行通信方式的扩展接口，数据一位一位地顺序传送。常用的串行接口按电气标准及协议来分包括RS232、RS485、RS422。以太网口可分为电口和光口，电口就是常用的RJ45水晶头（一般的网线），光口就是光纤接口。工业设备之间通信的一般使用的是RJ45以太网口。

“

工业通信协议

工业通信协议主要是负责子网内设备间的通信，从开放性来分，可分为私有协议和公有协议，私有协议就是企业内部自定的协议标准，只适用于本企业生产的设备产品，如西门子的S7通信协议就是西门子公司的私有协议。与之对应的就是公有协议，目前受到广泛支持的主要协议有ProfiNet、Modbus等。

“

联网方法

当前工业网关与工业互联网平台的联网方式常见的有：以太网、5G、Wi-Fi等。根据采集传输的数据量大小、传输速度、传输的距离和工业现场环境综合考虑选择。对于速度要求高，传输数据大的需求并在工业现场能实现的情况下可选择以太网方式；不方便布线且传输数据小的场景则可选用无线（如5G/Wi-Fi等）的方式。

“

物联网协议

物联网协议主要是运行在传统互联网TCP/IP等协议之上的通信协议，负责设备与工业互联网平台进行数据交换及通信，常见的物联网协议有MQTT、HTTP、COAP等。

目前，大多数工业互联网平台使用的是MQTT协议作为设备联网通信的“第一语言”，如树根互联的根云工业互联网平台、华为云的物联网平台、腾讯云的物联网平台、阿里云的物联网平台，以及国外微软Azure的物联网平台等。

基于非TCP/IP通讯协议的设备数据采集

这一类协议不属于TCP/IP协议簇，往往在硬件接口方面就与以太网不兼容，比如RS485等。

对于这类设备的数据采集，一般采用兼容该设备的接口和工业协议的专用网关，网关将其协议转换为TCP/IP协议，再接入到车间的网络中并进行协议解析，否则，在物理层面就无法实现互通。这类协议比较常用的包括Modbus-RTU、DeviceNet等。

不具备通信接口的设备数据采集

对于建立较早的工业企业，会存在大量的没有控制单元或没有拓展功能的老旧设备，比如不带数控系统的机床，这些设备没有通信接口，无法直接通信采集数据（行业中也有“哑设备”的说法）。

这种场景下，可以通过改造安装传感器、变送器、数采板卡、采集器等传感器或采集硬件，采集设备的运行数据，如设备开关机、作业信号、电流温度参数等，这就涉及到对设备的一些改造，操作难度是比较大的。

比较常见的，是采集IO信号，通过对设备进行分析，确定需要的采集信号，连接入采集设备，由采集设备将设备的开关量（数字信号）、模拟量（模拟信号）转化成网络数据，通过有线或无线网络传送给平台数据服务器。

这种方式成本较低，但能采集的数据有限、质量不高，主要针对的是没有控制单元的设备、控制器协议不开放的设备、不具备拓展功能的老旧设备、无法评估风险的关键工艺设备或产线关键设备进行使用。

基于人工采集终端场景的数据采集

有些信息化水平偏低的工业企业，在某些生产环节无法实现自动采集，则通过现场工位机、移动终端、条码扫描枪等人工采集终端进行数据采集。

  数据采集内容包括生产开工与完工时间、生产数量、检验项目、检验结果、产品缺陷、设备故障等。

  基于人工采集终端的数据采集受制于人的主动性，在数据的实时性、准确性、客观性等方面有所欠缺。

没有最好、最完美的方案，只有适合自己的方案！