![](https://img-blog.csdnimg.cn/20201014180756918.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
hadoop
文章平均质量分 72
tutucute0000
这个作者很懒,什么都没留下…
展开
-
HA&Federation
架构图原创 2014-10-03 16:11:11 · 16424 阅读 · 2 评论 -
Datanode部分节点下线
最近需要将HDFS集群进行缩减,datanode由8台减到3台。google了一下,觉decommission方式最稳妥,于是使用该方法进行操作。前提条件:namenode的hdfs-site.xml 里有如下配置项 dfs.hosts /data/hadoop/etc/hadoop/slaves dfs.hosts.exclud原创 2016-12-14 18:02:19 · 2459 阅读 · 0 评论 -
Hadoop Streaming试用
本次用python进行测试。 首先编写Mapper和Reducer脚本,从stdin读取数据,输出到stdoutmapper.py#!/usr/bin/env pythonimport sys;for line in sys.stdin: line = line.strip(); words = line.split(); for w in wo原创 2017-01-17 18:16:23 · 432 阅读 · 0 评论