大数据

本文介绍了大数据时代的三次信息化浪潮,阐述了大数据的概念、影响和广泛应用,并探讨了大数据与云计算、物联网的关系。重点讲解了Apache Hadoop的起源、发展、特点以及其生态系统,包括HDFS和MapReduce。同时,详细介绍了Hadoop的安装过程,包括在Linux环境下的配置和测试。
摘要由CSDN通过智能技术生成

一、大数据时代

1、三次信息化浪潮
第一次:1980左右,个人计算机的普及。社会生产力得到大大的提高
第二次:1995左右,互联网的流行。门户网站的产生,信息量急剧增加
第三次:2010之后,物联网,云计算,大数据的产生,数据爆发
2、大数据时代来临的原因
阶段1:运营式系统阶段
阶段2:用户原创内容阶段
阶段3: 感知式系统阶段

二、大数据的概念

从大数据的特点来看(4V特点)
1、数据量大(Volume)
          产生的数据多,数据集大
2、数据种类多(Variety)
          结构化数据,半结构化数据,非结构化数据
3、处理速度快(Velocity)
           产生的数据特别快,要快速处理大数据集,(为了数据价值的即时性)
4、价值密度低(Value)
           庞大的数据中,只有极少部分数据有价值。
    举例说明:
    小区监控,1个月的数据中只有发生事件的几分钟的数据有价值

三、大数据的影响

1、对科学研究有影响
   实验-->理论-->算法-->数据
2、对人类思维方式的影响
   全样而非抽样
   效率而非精确
   相关而非因果
3、对社会发展的影响
4、对就业市场的影响
5、对人才培养的影响

四、大数据的应用

餐饮行业
汽车行业
金融行业
医疗行业
交通行业
....... 

1024进位
Byte->KB->MB->GB-

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值