ERROR
文章平均质量分 78
mingming20547
这个作者很懒,什么都没留下…
展开
-
更换jdk Error:could not open '...jvm.cfg'解决方法
最近oracle JDK1.8或以上版本,要求统一更换为OpenJDK;(参考版本:java-1.8.0-openjdk-1.8.0.242-3.b08.redhat.windows.x86_64.msi);如仍在使用oracle JDK1.6或1.7版本的产品,暂时无需更换。配置好环境变量之后报错从网上搜索解决方法,说需要删除C盘如下几个文件c:/windows/system32/jav...原创 2020-04-01 14:19:09 · 1299 阅读 · 0 评论 -
Sqoop 同步数据到mysql, Can't parse input data: '\N'
Sqoop 同步数据到mysql Sqoop 从hdfs 同步数据到mysql 是我们常常遇到的事情同步分为 分区表同步和非分区表同步需要注意以下几点1. hive 中的表 必须是textfile ,不能是有parquet 等压缩方式的2.hive 表如果是分区表,需要每次只能同步一个分区的数据到 mysql,如果hive 有多个分区,只能写多个脚本,或者多个循环调...原创 2018-12-26 17:36:21 · 4928 阅读 · 1 评论 -
hive 在kettle 作业return code 2 的问题 Unexpected exception: Unexpected exception: Unexpected exception:
今天突然进去跑不了数据老是报错return code 2 .之前可以跑通的。日志如下矢量查询(Vectorized query) 每次处理数据时会将1024行数据组成一个batch进行处理,而不是一行一行进行处理,这样能够显著提高执行速度。可以通过设置set hive.vectorized.execution.enabled = true; 但是如果数据量很大,她的batch就会很多,...原创 2018-12-26 17:34:32 · 1321 阅读 · 0 评论 -
#Hive报错 WritableStringObjectInspector cannot be cast to org.apache.hadoop.hive.serde2.objectinspect
#Hive报错FAILED: ClassCastException org.apache.hadoop.hive.serde2.objectinspector.primitive.WritableStringObjectInspector cannot be cast to org.apache.hadoop.hive.serde2.objectinspector.primitive.LongO...原创 2019-07-12 09:57:26 · 6396 阅读 · 0 评论