数据化运营的数据来源类型

数据化运营的数据来源类型包括数据文件，数据库，API，流式数据外部，公开数据和其他来源等

一、数据文件

数据文件就是存储数据的文件，广义上任何文件中存储的信息都可以称为数据，狭义上，数据文件中一数字或文本形式存储的结构化的数据记录才是数据，本文所指的是后者。

结构化数据文件大多来源于数据库，也有来源于系统或工具的过程中，或返回结果。

数据文件常见的数据格式类型包括，Txt. Csv. Tsv. Xls. Xlsx. 等，也包括xml、html、doc、sql等非常规数据格式。文件格式取决于数据处理需求，也受限于来源系统的导出格式。

二、数据库

数据库，是按照数据结构来组织，存储和管理数据的仓库。

数据库广泛应用于cms(内容管理系统),CRM(客户关系管理系统)、OA（办公自动化）、ERP（企业资源计划）、财务系统，DSS（决策支持系统）、数据仓库和数据集市、进销存管理、生产管理、仓库管理等各类企业运营事务中。

数据库的主要应用，包括数据的定义、存储、增加、删除、更新、查询等事务型工作，数据传输、同步、抽取、转换、加载等数据清洗工作，数据计算、关联查询、OLAP等分析型工作以及数据权限控制、数据质量维护、异构数据库和多系统通信交互等工作。

数据库按类型分为关系数据库和非关系数据库。关系数据库在企业中非常常见，在传统企业中更为流行常见的关系数据库包括DB2,Sybase、Oracle、PostgreSql、SQL Server、Mysql

等；非关系数据库随着企业经营场景的多样化以及大数据场景的出现，应用场景和结构分为以下几类：

1. 面向高性能并发读写的键值数据库，优点是有极高的并发读写能力，查找速度快，典型的代表是Redis、Tokyo Cabinet、Voldemort。
2. 面向海量文档的文档数据库，优点是对数据要求不严格，无需提前定义和维护表结构，典型的代表为：MongoDB、CouchDB。
3. 面向可扩展性的列式数据库，优点是查询速度快，可扩展性强，通过分布式扩展适应数据量的增加以及数据结构的变化，典型代表是，Cassandra、HBase、Riak。
4. 面向图结构的图形数据库，优点是利用图结构相关算法满足特定的数据计算需求，例如最短路径搜寻，关系查询等，典型代表是，Neo4J、InfoGrid Graph。

三、API

API 是应用程序接口，数据化运营中的API通常为服务型API和数据型API。

服务型API可以基于预定的规则，通过调用API实现特定功能，

数据型API则通过特定的语法，向服务器发送数据请求，返回特定的格式数据或文件。

API广泛应用于企业内部和外部多系统和多平台交互，ApI返回数据格式大多情况是以下两种，JSON和xml.

四、流式数据

流式数据指的是实时或接近实时处理的大数据流。常见的流式数据处理使用Spark、Storm和Samza等框架，能在毫秒到秒之间完成作业，用于处理实时性较强的场景。例如，在线个性化推荐系统，网站用户实时行为采集和分析，物联网机器日志实时分析，金融实时，消费反欺诈，实时异常人员识别等，应用领域集中在实时性较强的互联网、移动互联网、物联网。

按数据对象来区分，流式数据可以分为两类：

第1类是用户行为数据流，用户行为数据流是围绕人产生的数据流，包括用户在网站和APP内部应浏览、搜索、评论、分享、交易以及在外部的微博、微信操作而产生的数据流，用户行为数据流采集平台可分为WEB站、移动站和APP应用等。

第2类是机器数据流，机器数据流式为要物产生的数据流，包括机器的生产制造，应用监控和管理等过程中产生的所有数据。机器数据常通常集中在工业4.0、智能工厂等工业的智能运营管理过程中，也出现在物联网、人工智能等人和物的监控、识别、联通、互动等智能化应用中，机器数据流扮演着实时采集目标对象属性、状态、行为信号等数据的角色。

五、外部公开数据

外部公开的数据是指公开的任意第三方都能获取的数据。

常见的公开数据包括：

a、政府和相关机构提供的公开数据

b、竞争对手主动公开的数据

c、行业协会或相关平台组织提供的统计、资讯数据

d、第三方的组织和个人披露的与企业运营相关的数据

六、其他

在某些场景下，企业数据化运营所用的数据还会有其他来源，例如，调研问卷，第三方直接购买的数据，通过与其他厂商合作所得的交互数据等