Kettle“Hive输出”组件创建临时表报错“SchemaParseException”

最新推荐文章于 2024-04-24 18:16:44 发布
最新推荐文章于 2024-04-24 18:16:44 发布
阅读量503 收藏
点赞数
分类专栏： 大数据知识 ETL 文章标签： hive hadoop 大数据 etl
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_30168227/article/details/125957390
版权

报错：

return code 1 from org.apache.hadoop.hive.ql.exec.DDLTask. org.apache.avro.SchemaParseException

报错截图：

报错原因：

UUID命名前缀数字无法创建。

解决：

https://download.csdn.net/download/qq_30168227/86249223

上面jar包下载后替换ETLDesigner\common\system\karaf\system\pentaho\pentaho-big-data-kettle-plugins-hive\6.1.0.1-196\下的文件（实际有文件名误差）。

删除：ETLDesigner\common\system\karaf\caches文件夹后重启。

承缘丶
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
dbeaver 没有编辑表选项_Kettle（PDI）转换中输入表输入详解
weixin_29294975的博客
12-18 2385
概述Table input(表输入)此步骤使用SQL语句从连接的数据库中读取信息。通过单击获取SQL查询语句按钮，可以自动生成基本SQL语句。选项Table input(表输入)步骤有以下选项：Step name(步骤名称)：在画布上指定Table input(表输入)步骤的唯一名称。您可以自定义名称或将其保留为默认名称。Connection(数据库连接)：使用列表选择现有数据库连接的名称。根据所...
kettle迁移示例
12-04
kettle数据迁移示例。从mysql数据库表迁移到oracle数据库表。
（Hive输出）pentaho-big-data-kettle-plugins-hive-6.1.0.1-196
07-24
（Hive输出）ETLDesigner\common\system\karaf\system\pentaho\pentaho-big-data-kettle-plugins-hive\6.1.0.1-196\下的文件。 （Hive输出）pentaho-big-data-kettle-plugins-hive-6.1.0.1-196。
修改jar包中class文件并重新打包
qq_44002865的博客
12-13 1095
修改jar包中class文件并重新打包 org.apache.seatunnel.shade.connector.file.org.apache.avro.SchemaParseException: Illegal initial character: $ip 使用parquet格式Avro数据序列化过程中报错，报错原因：Avro对字段名有校验，只支持字母和下划线开头[A-Za-z_]，本次报错Illegal initial character:` $ip`就是使用了`$ip`字段名，字段名`$`开头所以校
【Android】java.lang.IllegalArgumentException Illegal character in scheme 异常
流动的城市的博客
01-12 3600
在使用字符串拼接成url地址进行数据请求的时候，有时在数据请求的时候会出现 java.lang.IllegalArgumentException: Illegal character in scheme at index 0 的异常。比如一个完整的url地址： http://www.pm25.in/api/querys/aqi_details.json?city=%E6%88%90%E9%83
嵌套的JSON数据与AVRO文件的相互转换
hellozhxy的博客
05-22 1785
JSON是一种常用的数据交换格式，很多系统都会使用JSON作为数据接口返回的数据格式，然而，由于JSON数据中包含大量的字段名字，导致空间的严重浪费，尤其是数据文件较大的时候，而AVRO是一种更加紧凑的数据序列化系统，占用空间相对较少，更利于数据在网络当中的传输，本文介绍如何使用avro-tools工具对这两种文件格式进行转换。 准备转换工具 使用的是avro-tools-1.8.1.jar，可...
记一次上传文件超时问题的排查过程
welcome to daijiguo's blog
09-19 1920
背景： 报错nginx 504 timeout，上传请求的链路如下： 页面请求->nginx->nodejs服务->网关->后端java服务，如果是nginx超时，则nodejs服务、网关、java服务都有嫌疑。 解决： 1、尝试用curl命令进行文件上传模拟： curl -F "name=abc" http://10.24.238.76:8715/api/v1/strea...
Kettle java脚本组件的使用说明(简单使用、升级使用)
杨杨杨~~的博客
04-29 6115
文章目录前言Kettle java脚本组件的使用说明(简单使用、升级使用)01 简单使用02 升级使用 前言   如果您觉得有用的话，记得给博主点个赞，评论，收藏一键三连啊，写作不易啊^ _ ^。   而且听说点赞的人每天的运气都不会太差，实在白嫖的话，那欢迎常来啊!!! Kettle java脚本组件的使用说明(简单使用、升级使用) 01 简单使用 获取java脚本组件 打开你刚刚移动过来的java脚本 几个地方要记住 main方法， 点击后可以看到出来一大坨代码: public boolean
org.apache.avro.SchemaParseException
QYHuiiQ
03-20 1962
在使用kafka的avro定义schema的时候，出现了这个异常： 原来代码是这么写的： String schemaStr = "{\"type\":\"record\",\"name\";\"Student\",\"fields\":[{\"name\":\"id\","type\":\"int\"},{\"name\":\"name\",\"type":"String\"},{\"na...
ETL学习笔记之四：开源项目 Kettle
石头记
01-21 9424
    现在是一个Google的时代，而对于开发者，开源已成为最重要的参考书。对于某课题，不管你是深入研究还是初窥门径。估且google一把，勾一勾同行的成就，你必会获益良多。    说到ETL开源项目，Kettle当属翘首，因此，偶决定花点时间了解一下。    项目名称很有意思，水壶。按项目负责人Matt的说法：把各种数据放到一个壶里，然后呢，以一种你希望的格式流出。呵呵，外国人都很有联想力
Hive插入数据报错：org.apache.hadoop.hive.ql.parse.ParseException:line 1:85 cannot recognize input near ‘(‘
Wind的博客
07-08 8064
风吹起了从前，看着天边似在眼前，万般流连~
kettle批量插入hive2，解决表输出速度慢问题
05-08
解决kettle使用表输出到hive2时，批量提交不起作用导致速度非常慢的问题，重新编译big-data-plugin插件使表输出支持对hive2批量提交，速度由几十条每秒提升到三千条每秒。
kettle 从oracle数据库导数据到hive 表
03-23
由于公司要把oracle 数据库迁移到hive ，hbase 环境，特建议使用kettle做数据迁移，调试3个小时，终于调试成功，顺手写了个配置文档。
Kettle将数据导入导Hive2
01-07
 本来将数据导入到hive，但是不知道什么原因太慢了，一小时200条数据，优化一波kettle，还是成效不大，因此改为借用hadoop file output 到hdfs，然后再load 到hive表里 一，正文 1.在转换里拖入big data/hadoop ...
kettle实现多表级联，输出一个目标表
04-26
kettle实现多表级联，输出一个目标表
kettle8.1Hive连接包
12-26
kettle8.1连接Hive、sqlserver、oracle数据库连接包。
【Hadoop】-Apache Hive使用语法与概念原理[15]
最新发布
weixin_63106307的博客
04-24 518
使用location关键字，可以指定数据库在HDFS的存储路径。/user/hive/warehouse内。数据库本质上就是在HDFS之上的文件夹。
Hive 数据倾斜
ziaoming_biu的博客
04-24 1021
数据倾斜：数据分布不均匀，造成数据大量的集中到一点，造成数据热点。主要表现为任务进度长时间维持在 99%或者 100%的附近，查看任务监控页面，发现只有少量 reduce 子任务未完成，因为其处理的数据量和其他的 reduce 差异过大。单一 reduce 处理的记录数和平均记录数相差太大，通常达到好几倍之多，最长时间远大 于平均时长。根本原因就是大量相同的key被分配到一个reduce里，造成一个reduce任务累死了，但是其他的reduce任务闲死4.1重新分区（Repartitioning）
Hive——DML（Data Manipulation Language）数据操作语句用法详解
喻师傅的学习笔记
04-24 609
Hive-DML语句
kettle表输出组件
07-27
在Kettle中，有几个输出组件可用于将数据写入表中。以下是一些常用的输出组件： 1. Table Output：这个组件可以将数据写入指定的数据库表中。你可以定义表名、字段映射、写入模式等。 2. Insert/Update：这个组件...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值