背景
今天在学习HBase和MapReduce的结合时,作业打包运行会报错第三方类找不到,而我作业jar包里却有这个类
解决方法
需要修改hadoop-env.cmd文件,把所需第三方类的jar放到HADOOP_CLASSPATH环境变量里。
比如要添加hbase相关的jar包,可以使用一个for循环如下
for %%i in (%HBASE_HOME%\lib\hbase-*.jar) do (
set HADOOP_CLASSPATH=!HADOOP_CLASSPATH!;%%i
)
如果是单独的jar,就采用下面的方式
set HADOOP_CLASSPATH=%HADOOP_CLASSPATH%;D:\hive_ext.jar
改完后,运行hadoop jar命令运行作业就行了。