- 博客(7)
- 收藏
- 关注
RSS订阅
原创 小白也能玩明白，海豚调度器DolphinScheduler 搭建改造可用单机版DS[实战]
小白也能玩明白，海豚调度器DolphinScheduler 搭建改造可用单机版DS[实战]
2024-09-09 20:06:20
1328
原创 Kettle Sqoon 数据表从mysql导入到hive的两种方法【实战】
这样传需要注意mysql表的字段名，不可以带.例如emp.empno如果带.的话会显示导入失败。第二个思路就是把mysql表的内容上传到hdfs上再把hdfs的上传的内容变成hive表。假如报：无法读取 hdfs://bigdata01:9820/home/aaaa 的问题。假如你使用了 hdfs 自带的文件夹，比如/home，会报没有权限的错误。1、查看本地是否配置了 HADOOP_HOME 的环境变量。第一个思路就是直接把一个mysql表导出成一个hive表。思路二需要先配置hdfs连接。
2024-09-12 20:33:18
222
原创 Kettle Sqoon 数据从mysql导入到hive时报错 mysql2hive - ERROR (version 9.1.0.0-324, build 9.1.0.0-324 from 2020
在.hiverc中添加set hive.stats.column.autogather=false;再次执行sqoon流程即可。可以在hive的conf中新建一个.hiverc文件作为hive启动后修改的配置。在Sqoon编写一个转换流程时，出现了以下错误。这个报错是hive设置的问题。
2024-09-12 20:15:03
126
原创 hive建表时使用JsonSerDe报Cannot Validate serde：org.openx.data.jsonserde.JsonSerDe
hive建表时使用JsonSerDe报Cannot Validate serde：org.openx.data.jsonserde.JsonSerDe
2024-08-26 15:33:15
217
原创 hive使用自带的json包报错Current token (VALUE_STRING) not numeric, can not use numeric value accessors
hive建表时使用自带的JsonSerDe包报错
2024-08-26 12:18:36
218
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人