- 博客(4)
- 收藏
- 关注
RSS订阅原创 大数据踩坑之旅——DB2使用load数据文件
大数据踩坑之旅——DB2使用load数据文件 在生产中，遇到要从大数据环境将数据文件导入到db2中去的需求，实现方式有两种。 查阅资料可知，大数据hive中的编码为utf-8，而db2中则是gbk，因此需要首先进行转码，才能再将数据进行转移。 备选方案有两种，第一种是使用sqoop的export功能，第二中是db2自带的load功能。第一种由于速度太慢，另外再说，本文主要说明使用load中遇到的各种问题以及最后排坑方法。 因为db2load不能直接与大数据hive表对表
2020-12-14 14:10:45
4547
原创 linux出现-bash: jps: command not found
在学习HBASE过程中，使用" sudo vi /etc/profile" 命令修改了profile文件,然后就出现了“-bash: jps: command not found”错误。 最后，发现是在修改PATH的时候，复制粘贴时，在“$JAVA_HOME”后面少加了“/bin”，导致linux未成功识别Java路径导致的。 最后，补充完整路径后，“source /etc/pfrofile”...
2020-05-01 19:36:57
308
原创 大数据学习之Hive学习遇坑记录--jdbc代码连接hiveserver2时因SQL语句过长报错
Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask 错误名称如上。 该问题在XShell 中也存在。百度后未得到解决，但是有说代码查询语句过长。 public class HiveJdbcClient { private static String driverName = "or...
2020-03-30 23:42:55
691
原创 大数据学习之Hive学习遇坑记录--maven无dependencies,无法导包
大数据学习之Hive学习遇坑记录–maven无dependencies,无法导包 【问题1】 **问题：**写maven工程时，pom文件始终没有dependencies文件目录，且plugins有很多红线。 **解决办法：**在windows的cmd 界面中测试了一下 mvn -version 语句，正常显示maven版本（之前配置过maven），然后莫名其妙就好了。怀疑是重装IDEA后未成功...
2020-03-30 23:27:16
303
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人