kettle
编程人生之路
这个作者很懒,什么都没留下…
展开
-
kettle 将mysql数据 导入到hive
先说说思路:一 是直接从mysql输出至hive中,另外一个是先将数据搞到hdfs中,再load一下,当然这只是textfile存储格式而言,若是ORC等其他列式存储的话建议先搞一个textfile格式的中间表,再insert into table select 插进去下面分别介绍下两种方式第一种:1.连接hive对外服务的组件hiveserver2点击测试,OK之后会显示测试成功测试直接将mysql中的stdcode表导入一下抽取数据,插入的目标库中有没有对应为表的话点击下.原创 2020-09-04 16:45:53 · 1433 阅读 · 0 评论 -
kettle连接Hive配置(一)
背景最近需要将mysql的数据库的数据导入到hive里,期间遇到了很多坑,这次来总结一下。步骤1.启动hiveServer2kettle 是通过jdbc 来连接hive的,而jdbc 方式连接hive需要启动hiveServer2(thrift接口程序),执行如下命令来启动hiveServer2./hive --service hiveserver2 --hiveconf hive.server2.thrift.port=10001 --hiveconf hive.server2.thrif转载 2020-09-04 16:25:49 · 2494 阅读 · 0 评论 -
kettle 点击connect,资源库空白解决
说明:connect,没有连接资源库的入口.百度并没有发现解决问题的办法,自己改代码,添加入口:在UI工程中的menubar.xul文件中,加入<menuitem id="file-openZiyuanku" label="openZiyuanku" command="spoon.openRepository()"/>即为打开资源库连接的入口,这里我是加到文件菜单下面的...原创 2020-04-23 23:07:22 · 5867 阅读 · 0 评论