- 博客(6)
- 收藏
- 关注
RSS订阅原创 kettle mysql导入数据到hdfs报错:Hadoop file output.0 - File name field [null] couldn‘t be found in the input
然后我们重启kettle再次在来南京Hdfs的页面点击测试图一所示的位置连接成功则hdfs就连接成功了。此时在黑窗口执行 hadoop version如果出现以下界面则hadoop环境变量配置成功。此时再运行我们的转换即可。
2024-09-12 20:18:41
104
原创 解决kettle mysql导入到hive的各种报错问题
同时也需要确保kettle对hive的连接也是正常的记得提前打开hiveserver2远程连接服务,出现以下界面几位正常：（注意kettle里面是没有mysql的jar包的要拿到自己的mysql jar包传入到kettle的lib目录下）这个错误大致是在说hive中的某些方法不被支持，这个错误相关信息在博客和其他网站上都非常少，摸索了很久后发现在 hive/conf/.hiverc下加入这样一句话就可以解决该报错。点击左边表输出里面的sql是可以自动生成sql语句来帮我们创建表的。
2024-09-12 19:58:41
258
原创 解决Hive启动报错：org.apache.thrift.transport.TTransportException: Cannot write to null outputStream
在配置好hiveserver2和Metastore两个服务后使用脚本hive-server-manager.sh start启动服务。-- hiveserver2的高可用参数，开启此参数可以提高hiveserver2的启动速度 -->
2024-09-10 20:15:21
332
原创 Dolphin Scheduler 进阶教程
参数说明后N 年前N 年后N 月前N 月后N 周前N 周后N 天前N 天后N 小时前N 小时后N 分钟前N 分钟在a3任务中。
2024-09-09 20:40:17
357
原创 Redis高级教程（二）
Redis是一种基于客户端-服务端模型以及请求/响应协议的TCP服务。这意味着通常情况下一个请求会遵循以下步骤 :客户端向服务端发送一个查询请求，并监听Socket返回，通常是以阻塞模式，等待服务端响应;服务端处理命令，并将结果返回给客户端。
2024-09-07 14:32:06
725
原创 Redis高级教程（一）
如果恢复数据，要将备份文件(dump.rdb)移动到redis安装目录并启动服务即可（默认备份的目录就在redis安装目录下所以备份后重启即可恢复数据。Redis可以通过修改配置文件来设置密码参数，这样在客户端连接redis时就需要密码验证，如此可以让redis服务更安全。以上命令输出的redis安装目录为/opt/installs/redis/src。执行该命令后将会在redis安装目录的src/下创建dump.rdb文件。这样就可以保证设置redis密码后redis服务可以安全使用了。
2024-09-07 11:33:40
195
1
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人