大数据之数据采集

当你真心渴望追求某种事物的话，整个宇宙都会联合起来帮你完成。——牧羊少年奇幻之旅
在人类开始结绳记事时，世间便产生了可记录的数据。

数据采集

利用设备或埋点等技术进行数据收集或获取。

数据

相对于计算机而言，世界就是由一条条数据所构成的，我们所产生事务的结果只是在0和1之间取舍。

数据产生

1、主动数据与用户行为数据
由用户进行的表单数据填写，比如：用户登录注册，银行开卡，纸质表格的填写。

通常是用户在网络上的行为操作所产生的数据，比如：搜索某一个关键词、高频点击区域等。
2、传感器数据
监控摄像头、天气观察仪、沉降监测设备等各类终端传感器监测设备所产生的数据。

数据的类型

1、结构化数据
最常见的是存储在关系型数据库中的数据，如：MySQL、Oracle等，这些数据都具备一个特点，就是十分规范，不符合数据库预先设定的数据类型是不会通过校验，存储不到数据库中。
除这个之外我们把可以直接导入到数据库中的数据文件也可以视为结构化数据，如：csv格式的文件，这类文件通常没有预期的数据结构，存储在非关系型数据库中，如：Redis、MongoDB，使用NoSQL来进行操作。

2、非结构化数据
除此之外产生的数据我们都称作非结构化