- 博客(4)
- 收藏
- 关注
RSS订阅原创 关于在hive中用maxwell导入数据,使用hive查询相关表时,导入数据可以成功,字段都存在,但字段的值为null的解决办法
原因:hive字段不区分大小写 建表时在struct中指定的字段为大写 但是在hdfs上的数据字段为小写 应该是hive的结构体中认为是一个新的字段,故都为null。问题:data字段struct结构体部分没有数据 用maxwell将数据传到kafka,kafka中数据正常 用flume将数据传入hdfs,hdfs上的数据正常。解决:修改建表语句 将data的struct结构体中的字段设置为与hive上的数据字段一样的形式即可。2.确认在hive上的相关目录下有无数据。
2022-09-30 17:44:02
505
1
原创 启动集群发现有些进程正常无法启动
对等体连接重复,确信之前的集群可以正常启动运行,且自己没有修改任何配置文件。解决:将多余的文件删除 保证磁盘空间有剩余就可以了 之后再启动集群正常。df命令查看磁盘使用情况 发现磁盘满了 问同事 同事说他做的。查看未启动的进程 kafka和zookeeper。去到kafka中查看配置文件。
2022-09-13 10:12:12
1227
原创 在将idea中的任务打包过程中出现:在bulid中加入source为8,报不兼容警告,去掉插件,会报source 5 不支持lamda表达式
之后修改settings->Bulid,Execution,Deployment->Compiler->java Compiler 修改project bytecode version 为8 以及下面的module为1.8。2.file->project structure->project和module中修改jdk为1.8 其中module中的source和dependence都要修改为1.8。1.将lamda表达式部分修改为不是lamda表达式的写法。...
2022-08-15 09:31:03
246
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人