数据
文章平均质量分 57
Godxv
编程使我快乐:)
展开
-
用python生成邮件正文html表格
标题原创 2021-10-27 15:31:23 · 5115 阅读 · 1 评论 -
大数据学习之路 Hadoop篇(一):超简单的虚拟机搭建Hadoop+Hive+Spark+HBase环境
这么长时间没有写博客,期间也发生了很多事情,我也一不小心从萌萌的开发变成了萌萌的数据。我在写这篇博客的时候还是数据方面的初学者,一来可以回顾总结自己最近学习的内容,督促自己更快更仔细的学习;二来可以为和我一样的初学者提供方便,不必花很多精力去找一些资源和技巧或者环境的搭建,而是专注于知识的学习。工欲善其事,必先利其器。要想学好大数据,得先有大数据方面的环境。我看过网上很多搭建的教程,自己一...原创 2019-03-14 19:43:28 · 4690 阅读 · 12 评论 -
一张图了解MapReduce全流程
先上图目录〇、Job提交流程0.WordCount源码:1.waitForCompletion2.submit3.submitJobInternal一、getSplits:输入文件分片二、RecordReader:读取文件三、Map四、环形缓冲区:溢写到磁盘五、shuffle:分发〇、Job提交流程0.WordCount源码:...原创 2019-05-23 20:58:09 · 517 阅读 · 0 评论