大数据
三生有幸
这个作者很懒,什么都没留下…
展开
-
MapReduce编程案例(三)
MapReduce编程案例(三)键值对如何传入自定义对象类型实现WritableComparable接口实现Writable接口二者的区别如果对象类型作为key传入,MapReduce底层会对键进行排序,此时需要告诉MapReduce需要进行排序的是什么如果对象类型作为value传入,则只需实现Wriable接口案例: 求上下行流量1363157985066 ...原创 2019-12-09 09:10:03 · 211 阅读 · 0 评论 -
MapReduce 编程案例(二)
1 任务分析历年最高气温数据格式:0043011990999991950051512004+68750+023550FM12+038299999V0203201N00671220001CN9999999N9+00221+999999999992 编写Mapper类package weather;import GroupingComparatorOrder.GroupingCompa...原创 2019-12-01 22:09:21 · 173 阅读 · 0 评论 -
MapReduce编程案例(一)
Mapreduce编程案例(一)1 了解Mapreduce原理(借阅)深入剖析MapReduce架构及原理(一)https://blog.csdn.net/WYpersist/article/details/79783872深入剖析MapReduce架构及原理(二)https://blog.csdn.net/WYpersist/article/details/797838732 编写...原创 2019-11-28 20:31:46 · 326 阅读 · 0 评论 -
Hadoop集群环境搭建
1 安装Ubuntu18.04服务器下载地址:https://ubuntu.com/download/server2 配置Ubuntu服务器(1) 网络配置vim/etc/netplan/50-cloud-init.yaml networkethernets: ens33: dhcp4: no addresses: [192.168.30....原创 2019-11-28 13:24:03 · 188 阅读 · 0 评论