Hive源码调试步骤

1. 在centos6.5中下载eclipse:

http://mirror.hust.edu.cn/eclipse//technology/epp/downloads/release/luna/SR2/eclipse-java-luna-SR2-linux-gtk-x86_64.tar.gz

2. 把hive mvn工程变为java工程

mkdir  workspace cd  workspace git clone https: //github .com /apache/hive .git cd  hive mvn clean  install  -DskipTests -Phadoop-2 mvn eclipse:clean mvn eclipse:eclipse -DdownloadSources -DdownloadJavadocs -Phadoop-2 cd  itests mvn clean  install  -DskipTests -Phadoop-2 mvn eclipse:clean mvn eclipse:eclipse -DdownloadSources -DdownloadJavadocs -Phadoop-2

3. 把hive java工程导入eclipse

4. 下面调试配置中文件保存不依赖hadoop hdfs，用本地文件系统代替; metastore不依赖mysql, 用本地文件代替；mapred本地化。总体来说此hive参数配置可以不依赖hadoop cluster进行源码调试

export  HIVE_OPTS='--hiveconf mapred.job.tracker= local  --hiveconf fs.default.name= file : ///tmp  \   --hiveconf hive.metastore.warehouse. dir = file : ///tmp/warehouse  \   --hiveconf javax.jdo.option.ConnectionURL=jdbc:derby:;databaseName= /tmp/metastore_db ;create= true '

5. 启动源代码目录中hive程序
./bin/hive
6. 初始化表结构和数据
在类似/home/hadoop/git/hive/data/scripts/q_test_init.sql文件中找到代码调试所需要的初始数据，然后拷贝出来在hive中执行
比如执行下面hive语句：

set  hive.stats.dbclass=fs; -  -- Table src - DROP  TABLE  IF EXISTS src; CREATE  TABLE  src ( key  STRING COMMENT  'default' , value STRING COMMENT  'default' ) STORED  AS  TEXTFILE; LOAD  DATA  LOCAL  INPATH  "/home/hadoop/git/hive/data/files/kv1.txt"  INTO  TABLE  src; ANALYZE  TABLE  src COMPUTE  STATISTICS ; ANALYZE  TABLE  src COMPUTE  STATISTICS  FOR  COLUMNS  key ,value;

7. hive进入调试模式
./bin/hive --debug
8. 在hive调试模式打开之后马上打开eclipse的进程attach功能，在此之前要在源码上加入调试断点。
在eclipse中打开Run/Debug Configurations.../Remote Java Application/Connection Type/Standard(Socket Attach), 点击Debug
9. 在hive中执行查询语句，此时会触发断点，进入eclipse调试模式
hive> select count(1) from src;

参考文档：

1. https://cwiki.apache.org/confluence/display/Hive/HiveDeveloperFAQ#HiveDeveloperFAQ-HowdoIimportintoEclipse?

2. https://cwiki.apache.org/confluence/display/Hive/DeveloperGuide#DeveloperGuide-DebuggingHiveCode

3. TestCliDriver.vm和生成的TestCliDriver.java //此模板和生成的源文件包含了hive cli集成测试的概要流程

4. QTestUtil.java //包含hive集成测试执行的详细步骤