以下文章内容,来自草堂君的新书《人人都会数据分析-从生活实例学统计》。因为新书中增添和细化了很多知识点,所以草堂君会逐步将这些内容补充到统计基础导航页中来,帮助大家建立数据分析思维。限于篇幅,只截取书中部分内容。
数据分析过程可以分为确定目标数据、数据采集、数据清洗、数据存储、数据分析、结果可视化及结果支持的决策等六个步骤。随着数据分析在各个领域发挥越来越重要的作用,针对不同数据分析步骤的软硬件工具也很快发展起来。下面我们介绍几种重要的数据分析工具。
各类传感器
数据可以通过很多方式进行采集。例如,制作调查问卷,随机抽取人群样本填写问卷,得到人群样本的反馈数据;人工观察记录也是过去常用的数据采集方式。而在数据时代的今天,传感器极大地改变了人工观察记录这种数据采集的场景,特别是温度和湿度等容易量化测量的客观指标。虽然人类主观意识类的数据依然需要通过问卷调查的方式进行获取,不过作者相信不久的将来人类的意念也将伴随科学技术的进步而能够被量化,到时人类只需在脑中思考,不需表示就能将脑中的意念量化记录下来。
传感器是一种检测装置,能感受到被测量目标的信息,并将感受到的信息以一定的规律变换成电信号或其他形式的信号输出,以满足信息数据的传输、处理、存储、显示、记录和控制等要求,是实现自动检测和自动控制的首要设备。传感器是通过特殊材料制成的敏感元件,它能感知外界的各种信息,现在已经商业化的敏感元件有热敏元件、光敏元件、气敏元件、力敏元件、磁性敏感元件、湿敏元件、声波敏感元件、放射线敏感元件、色敏元件和味道敏感元件等十大类。下面我们以温度传感器为例介绍传感器的工作原理。
温度传感器的核心部分是热敏材料。热敏材料的各种物理性质会随温度的变化而出现规律的变化,且这种材料变化与温度有一一对应的关系。因此,温度传感器能够将温度转换为材料变化,再转换为数字输出信号,从而实现温度的实时监控。温度传感器是温度测量仪表的核心部分,种类繁多,按测量方式的不同,可以分为接触式和非接触式两大类;按热度敏感元件特性,又可以分为热电阻和热电偶两类。现代的温度传感器外形已经非常小巧,能够让它们广泛应用在生活实践的各个环节,为我们的生活提供了便利。
热电偶温度传感器的热度敏感元件是热电偶,它是由两种不同的导体或半导体组成的。当两种不同的导体或半导体组成一个回路,两端相互连接时,只要两结点处的温度不同,那么回路中就会有电流产生,电流的大小会随着温度差的不同而变化,而电流的这种变化只与导体或半导体的组合有关,即不同的电流对应不同的温度差,从而能够感知检测物体的温度。