hadoop源代码调试

plifemao

于 2019-09-25 01:12:40 发布

阅读量538

点赞数

分类专栏：大数据文章标签： hadoop 调试源码

本文链接：https://blog.csdn.net/plifemao/article/details/101324834

版权

本文介绍了两种Hadoop源代码的调试方法。首先，通过创建debug_namenode.sh脚本，添加调试参数如-Xdebug和-Xrunjdwp，并在启动前设置环境变量。然后，停止并启动namenode服务进行调试。另一种方式是在IDEA中设置debug信息，修改namenode启动脚本添加调试信息。此外，还提到了设置虚拟机时区为Asia/Shanghai的步骤。

摘要由CSDN通过智能技术生成

调试方法

使用如下方法调试

第一步：创建debug_namenod.sh文件，加入调试参数

[hadoop@s0~]$ vim debug_namenode.sh
export HADOOP_OPTS="-Xdebug
-Xrunjdwp:transport=dt_socket,server=y,suspend=y,address=50070"
这里对上面的几个参数进行说明：
-Xdebug 启用调试特性
-Xrunjdwp 启用JDWP实现，包含若干子选项：
transport=dt_socket JPDA front-end和back-end之间的传输方法。dt_socket表示使用套接字传输。
address=50070 JVM在50070端口上监听请求，这个设定为一个不冲突的端口即可。
server=y y表示启动的JVM是被调试者。如果为n，则表示启动的JVM是调试器。
suspend=y y表示启动的JVM会暂停等待，直到调试器连接上才继续执行。suspend=n，则JVM不会暂停等待。
在启动Hadoop namenode服务进程之前在终端加入以下环境配置：