大数据技术是指从各种各样类型的巨量数据中,快速获得有价值信息的技术。解决大数据问题的核心是大数据技术。
主要可分为:数据采集,数据存取,基础架构,数据处理,统计分析,数据挖掘,模型预测,结果呈现等8种技术。
大数据技术主要形成了批处理、流处理和交互分析三种计算模式:
离线批处理(Batch Processing)技术以MapReduce和Hadoop系统为代表,
实时流处理(Stream Processing)技术以Yahoo的S4系统和Twitter的Storm系统为代表,
交互式分析(Interactive Analysis)技术以谷歌的Dremel系统为代表。
主要可分为:数据采集,数据存取,基础架构,数据处理,统计分析,数据挖掘,模型预测,结果呈现等8种技术。
大数据技术主要形成了批处理、流处理和交互分析三种计算模式:
离线批处理(Batch Processing)技术以MapReduce和Hadoop系统为代表,
实时流处理(Stream Processing)技术以Yahoo的S4系统和Twitter的Storm系统为代表,
交互式分析(Interactive Analysis)技术以谷歌的Dremel系统为代表。