Hadoop
swx7410852963
这个作者很懒,什么都没留下…
展开
-
MapReduce 简单数据清洗
MapReduce 简单数据清洗原创 2022-01-05 16:46:50 · 1418 阅读 · 0 评论 -
MapReduce 订单和商品pid替换(Map Join)基本实现
MapReduce 订单和商品pid替换(Map Join)基本实现原创 2022-01-05 16:05:06 · 930 阅读 · 0 评论 -
MapReduce 订单和商品pid替换(Reduce Join)基本实现
MapReduce 订单和商品pid替换(Reduce Join)基本实现原创 2022-01-04 17:55:00 · 843 阅读 · 0 评论 -
MapReduce过滤域名案例(自定义OutputFormat)基本实现
MapReduce过滤域名案例(自定义OutputFormat)基本实现原创 2022-01-04 14:54:02 · 305 阅读 · 0 评论 -
MapReduce中词频统计实现(combiner合并)
MapReduce中词频统计实现(combiner合并)原创 2021-12-30 18:01:27 · 469 阅读 · 0 评论 -
MapReduce统计流量案例(分区+排序)基本实现
MapReduce统计流量案例(分区+排序)基本实现原创 2021-12-30 15:51:23 · 522 阅读 · 0 评论 -
MapReduce统计流量案例(自定义排序-全排序)基本实现
MapReduce统计流量案例(自定义排序-全排序)基本实现原创 2021-12-30 10:06:16 · 912 阅读 · 0 评论 -
MapReduce统计流量案例(自定义分区)基本实现
MapReduce统计流量案例(自定义分区)基本实现原创 2021-12-29 15:41:45 · 301 阅读 · 0 评论 -
MapReduce中词频统计实现(小文件合并切片)
MapReduce中词频统计实现(小文件合并切片)原创 2021-12-29 14:21:22 · 304 阅读 · 0 评论 -
MapReduce统计流量案例(自定义序列化类)基本实现
MapReduce统计流量案例(自定义序列化类)基本实现原创 2021-12-28 17:42:55 · 516 阅读 · 0 评论 -
MapReduce中词频统计简单实现
MapReduce中词频统计简单实现原创 2021-12-28 14:32:44 · 605 阅读 · 0 评论 -
HDFS在Java中基本实现
HDFS在Java中基本实现原创 2021-12-24 15:21:03 · 443 阅读 · 0 评论 -
Hadoop配置文件之(mapred-site.xml)
<?xml version="1.0" encoding="UTF-8"?><?xml-stylesheet type="text/xsl" href="configuration.xsl"?> <configuration> <!-- 指定MapReduce程序运行在Yarn上 --> <property> <name>mapreduce.framework.name</name> .原创 2021-12-19 12:59:27 · 1323 阅读 · 0 评论 -
Hadoop配置文件之(yarn-site.xml)
<?xml version="1.0" encoding="UTF-8"?><?xml-stylesheet type="text/xsl" href="configuration.xsl"?> <configuration> <!-- 指定MR走shuffle --> <property> <name>yarn.nodemanager.aux-services</name> .原创 2021-12-19 12:53:33 · 2611 阅读 · 0 评论 -
Hadoop配置文件之(hdfs-site.xml)
hdfs-site.xml相关配置原创 2021-12-19 12:52:07 · 1102 阅读 · 0 评论 -
Hadoop配置文件之(core-site.xml)
<?xml version="1.0" encoding="UTF-8"?><?xml-stylesheet type="text/xsl" href="configuration.xsl"?> <configuration> <!-- 指定NameNode的地址 --> <property> <name>fs.defaultFS</name> <value>.原创 2021-12-19 12:50:50 · 2002 阅读 · 0 评论 -
Hadoop集群基本配置文件设置
核心配置文件(core-site.xml)<?xml version="1.0" encoding="UTF-8"?><?xml-stylesheet type="text/xsl" href="configuration.xsl"?><configuration> <!-- 指定NameNode的地址 --> <property> <name>fs.defaultFS</name>原创 2021-12-18 20:34:45 · 495 阅读 · 0 评论