- 博客(1)
- 资源 (12)
- 收藏
- 关注
原创 CDH5.12.0-HiveServer2-java.net.SocketTimeoutException: Read timed out
基于CDH构建离线数仓,在通过JDBC向HiveServer2提交作业时出现java.net.SocketTimeoutException: Read timed out 错误,导致大批量的作业失败,不能按时产生数据,已严重影响到业务运行。
2018-12-14 21:03:45 16748 1
Hive和Hase配置
配置hive-0.9.0和hbase-0.94.1结合使用,部分内容如下:
1.拷贝hbase-0.94.1.jar和zookeeper-3.4.3.jar到hive/lib下。
注意:如hive/lib下已经存在这两个文件的其他版本,建议删除后使用hbase下的相关版本。
//在/home/hadoop/hive-0.9.0/lib 下,备份两个jar包
mv hbase-0.92.0.jar hbase-0.92.0.jar.bak
mv zookeeper-3.4.3.jar zookeeper-3.4.3.jar.bak
//拷贝hbase的jar包到/home/hadoop/hive-0.9.0/lib
cp hbase-0.94.1.jar /home/hadoop/hive-0.9.0/lib/ (路径:/home/hadoop/hbase-0.94.1)
cp zookeeper-3.4.3.jar /home/hadoop/hive-0.9.0/lib/
2013-07-01
Hama 安装笔记
分布式模式的Hama安装笔记,内容如下:
1.参考“hadoop安装.txt”,完成hadoop的安装。节点信息如下:
192.168.1.160 hadoop-1
192.168.1.161 hadoop-2
192.168.1.162 hadoop-3
2.添加环境变量
在/etc/profile 或者/home/用户/.bash_profile 下添加:
export HAMA_HOME=/home/hadoop/hama-0.6.0
export PATH=$PATH:$HAMA_HOME/bin
2013-07-01
Hama-0.6.0
1.Hama-0.6.0,里面含有安装版和源码两部分,与hadoop-1.0.3 结合使用,已在Linux(RHEL和Ubuntu)平台测试通过。
2. Hama是基于HDFS上的BSP模型实现。
2013-07-01
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人