大数据概述
-
大数据概念:
大数据是指在一定时间内无法用常规软件工具对其内容进行抓取、处理、分析和管理的数据集合。一般包含两种及以上数据形式(结构化、半结构化、非结构化)。 -
大数据特征:
Volume(规模性):体现在数据量的规模大,存储单位从GB到TB、PB、EB
Variety(多样性):数据形式的多样化,有结构化、半结构、非结构
Velocity(高速性):大数据量的情况下要保证数据的实时、高效
Value(价值性):通过对大数据的高效处理与深度分析,挖掘发现数据的价值 -
大数据构成:
结构化:数据之间因果关系强;具有固定的结构、属性划分,以及类型等信息
半结构化:数据之间因果关系弱;具有一定的结构,但又有一定的灵活可变性,如XML、HTML等
非结构化:数据之间没有因果关系;无法用统一的结构来表示,如文件、图片、视频、音频等脑图: