自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+

SunnyMarkLiu

悟已往之不谏 知来者之可追

原创 Ubuntu16 搭建 Hadoop2.x HDFS 源码测试环境

由于整个 Hadoop 源代码过于臃肿,此处搭建 HDFS 源码分析环境,分析 HDFS 源码,为后续分析 MapReduce 和 Yarn 等作基础。1. 下载 hadoop-2.7.3.tar.gz 和 hadoop-2.7.3-src.tar.gz官网下载地址:http://apache.f...

2016-12-20 15:59:25

阅读数 1216

评论数 0

原创 通过工具查看Hadoop的 fimage 文件和 edits 文件

Offline Image ViewerWeb Processorhdfs oiv -i fsimage 通过只读的 WebHDFS API 查看 fimage 所记录的文件系统信息: bash$ bin/hdfs oiv -i fsimage 14/04/07 13:25:14 INF...

2016-12-12 17:51:18

阅读数 1651

评论数 0

原创 解决 Hadoop 集群执行包含 third-part lib 的 jar包的 ClassNotFoundException 问题

1 异常信息WordCount 的 maven 工程包含一些第三方的 lib,打包 package 之后的 jar 包放到 Hadoop 集群执行时报如下异常Class/File NotFoundException:使用 jd-gui 反编译生成的 jar 包,也可发现没有包含 guava:但 m...

2016-12-04 21:41:25

阅读数 686

评论数 0

提示
确定要删除当前文章?
取消 删除