2021年 全网最细大数据学习笔记（一）：初识 Hadoop

一、大数据

随着近来计算机技术和互联网的发展，大数据 这个名词越来越多地进入到我们的视野中，大数据的快速发展也无时刻影响着我们的生活。

1、大数据的定义

大数据从字面来理解就是 大量的数据。日常生活离不开数据，可以说每时每刻都在产生着数据。例如，一分钟可以做些什么事呢？在日常生活中，一分钟可能连一页书都看不完。但是一分钟内产生的数据却是庞大的。据统计，在一分钟内，YouTube 用户上传 300 小时的新视频，电子邮件用户发送 2.4 亿条信息，Google 收到超过 278 万个搜索查询，Facebook 用户点赞 4166 667 次，消费者在网购上花费 272070 美元，Twitter 用户发布 347222 条推文，Instagram 用户每分钟发布 123060 张照片，Netflix 用户观看 77160 个小时的视频，微信红包的收发 1527777 个。

这些数据还在不停地增长，那么大数据究竟是什么？国际顶级权威咨询机构麦肯锡 说：“大数据指的是所涉及的数据集规模已经超过了传统数据库软件获取、存储、管理和分析的能力。这是一个被故意设计成的具有主观性的定义，并且是一个关于多大的数据集才能被认为是大数据的可变定义，即并不定义大于一个特定数字的 TB 才叫大数据。因为随着技术的不断发展，符合大数据标志的数据集容量也会增长；并且定