![](https://img-blog.csdnimg.cn/20200421224006625.jpg?x-oss-process=image/resize,m_fixed,h_224,w_224)
▼寒暄_大数据
大数据相关知识的学习总结
寒 暄
自渡
展开
-
1.0 Hadoop - 子目录
0.0 总目录1.0.1前言:为什么会有大数据1.1什么是Hadoop1.2模块介绍1.2.1什么是HDFS1.2.2什么是MapReduce1.2.2.1Job的提交(源码解读)1.2.2.2Map-Task(源码解读)1.2.2.3Reduce-Task(源码解读)1.2.2.4eclipse开发MapReduce1.2.2.5MapReduce实例1...原创 2020-03-16 17:19:05 · 383 阅读 · 0 评论 -
1.0.1前言:为什么会有大数据
总目录:https://www.jianshu.com/p/e406a9bc93a9Hadoop - 子目录:https://www.jianshu.com/p/9428e443b7fd一个例子我们有一个文件,里面存放了全亚洲所有人的身高,以厘米为单位取整:157213169134...178...190那么我们该怎么算平均身高呢?超算平台 Σ(⊙▽...原创 2020-01-03 17:05:20 · 207 阅读 · 0 评论 -
了解云的发展历程-云简史
第一阶段第一阶段就是物理设备时期,企业构建自己的机房来让用户使用,用户的需求提高之后,企业就要专门去采购物理机,用户要一点,企业就专门采购一点。而且企业采购也需要时间,时用性,实用性都很差。场景:A公司一共有100GB的内存算力,1TB的物理存储能力,100MB的带宽,供给十个用户平均使用。突然一个用户要求提高一倍的算力,A公司就要马上联系厂家,购买,运输,上架等等,前前后后花了一周时间,然后...原创 2020-04-24 15:40:34 · 4691 阅读 · 0 评论 -
了解数据的发展历程--大数据简史
数据技术的发展历史就是人类追求美好生活过程最真实的写照。大数据分析的历史与未来展望最早的数字不是阿拉伯人发明的,数字的起源如同文字起源一样古老。结绳记事《易九家言》中记载“事大,大结其绳;事小,小结其绳,之多少,随物众寡”,即根据事件的性质、规模或所涉及数量的不同结系出不同的绳结。人们最早可以使用各种颜色,各种材质,粗细不同等绳子构建出数百个绳结词汇,以此来记载进行完整的有效记载。记...原创 2020-04-23 16:49:42 · 14699 阅读 · 0 评论