![](https://img-blog.csdnimg.cn/20201014180756930.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
Hadoop
chichuduxing
这个作者很懒,什么都没留下…
展开
-
Hadoop集群启动顺序和部分命令整理
Hadoop集群启动顺序 zookeepeer->hadoop->hbase Hadoop集群关闭顺序 hbase->hadoop->zookeepeer Hadoop 主备节点状态查看与手动切换 $HADOOP_HOME/bin/hdfs haadmin -getServiceState nn1 注意:此处的nn1为在hdfs-site.xml中配置的name原创 2017-04-09 21:23:25 · 5558 阅读 · 0 评论 -
Hdfs上文件 读写 工具类 Demo
读取HDFS上文件Demo package com.utils; import java.io.IOException; import java.util.List; import org.apache.hadoop.fs.FSDataInputStream; import org.apache.hadoop.fs.FileSystem; import org.apache.hadoop.f原创 2017-04-02 16:09:05 · 563 阅读 · 0 评论 -
分享一个查看Hdfs目录下文件大小的脚本,支持排序
#!/bin/bash ################## #@author: chichuduxing #@date: 20161011 ################## ##加载Hadoop环境变量 ##略过 function showhelp() { echo "###################################!!! you must input at le原创 2017-04-03 13:02:20 · 5902 阅读 · 2 评论 -
MapReduce 笔记 Demo
map过程中获得正在读取的文件名称 import org.apache.hadoop.mapreduce.lib.input.FileSplit; //获取 input split 所在的文件名 String curFileName = ((FileSplit)context.getInputSplit()).getPath().getName(); //获得文件路径 String curFil原创 2017-03-31 13:16:40 · 345 阅读 · 0 评论