- 博客(8)
- 收藏
- 关注
RSS订阅原创 idea的terminal里执行conda activate总是报错需要先执行conda init，但实际已经执行过
1、本终端是win11的idea2023，如果本终端上git-cmd进去后可以正常使用conda activate。那么这里配置好git-cmd.exe的path后重启idea。2、重新进入idea，对着下方terminal的按钮右键，选择close all。3、重新打开terminal 此时可以正常切换目标py环境。
2024-06-13 15:03:02
143
原创 Apache hudi 0.10.1学习笔记之压缩Compaction(下篇)——执行压缩计划
之前的压缩计划生成后，被保存在basePath/.hoodie下的instanttime.compaction.request文件里。 现在可以继续从执行压缩计划的角度进行。同样使用compactor类来提交spark作业，参数里可以带压缩计划对应的instantTime，也可以不带，不带的话则是找到时间最早对应的压缩计划。本文还是以MOR表，经手动异步压缩作为开始。 执行压缩计划部分，需要提前了解下该过程涉及的封装类，例如RunCompactionActionExecutor、各种...
2022-04-20 20:37:23
4223
原创 openssl版本1.1.1影响ambari-server部署后正常启动
问题现象 某地部署ambari-server，部署后执行ambari-server start，显示了启动成功，但是发现默认8080端口还是没有listening，并且ps -ef没有看到ambari-server进程。分析过程 查看唯一日志/var/log/ambari-server/ambari-server.log。发现两种待确认异常：以及：2022-04-13 18:43:44,079 INFO [main] ShellCommandUtil:63...
2022-04-15 15:32:04
3332
原创 Linux 使用免密ssh访问自己
假如现在集群就3个，A、B、C，用户名为stan。现在要求能使用stan用户，从A能免密ssh到B和C机器，同时也能免密ssh A本机。配置stan用户的A到 B和C的单向信任关系后，跳B、C没有问题，但是ssh自己还总是要密码。那么需要注意A机器上，对stan用户家目录下.ssh字目录下2个文件做如下检查：known_hosts 中把本机的信息删掉（备份文件后修改），同时属主属组必须是自己，权限600（有些机器上644也没有问题）；authorized_keys 属主属组必须是用户自己
2022-01-27 10:21:35
1818
原创 flink1.12.2实现kafka流数据与hive动态维表信息关联
flink新手村任务，hive可以用最新的数据和kafka流数据关联的最简单实现样例。
2021-11-23 16:38:02
2425
1
原创 使用Flink实现kafka流关联hive中维表
flink版本:1.10.1kafka版本：0.10.0hive版本:1.2.1依赖：<dependency> <groupId>org.apache.flink</groupId> <artifactId>flink-table-planner-blink_2.12</artifactId> <version>1.10.1</version></dependency&g
2021-09-03 18:08:10
1186
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人