- 博客(3)
- 收藏
- 关注
原创 Linux部署Hudi
因为Hudi对各版本有要求 所以需要按照版本来 否则会需要解决他们的依赖冲突 这个过程很麻烦以下是我所使用的版本Hadoop3.1.3Hive3.1.2FlinkSpark首先先安装mavenmaven及Hudi配置相关安装包链接:https://pan.baidu.com/s/1OoKaSat30bsgeWAkSpWFSA?pwd=u9m9提取码:u9m9上传maven安装包并解压配置环境变量显示maven版本就是安装成功mvn -v由于此时的maven的镜像默认的是国外。
2024-02-04 19:14:59 1135
原创 Linux部署ClickHouse
➢ 由于某一列的数据类型都是相同的,针对于数据存储更容易进行数据压缩,每一列 选择更优的数据压缩算法,大大提高了数据的压缩比重。几乎覆盖了标准 SQL 的大部分语法,包括 DDL 和 DML,以及配套的各种函数,用户管 理及权限管理,数据的备份与恢复。日志文件路径:/var/log/clickhouse-server/clickhouse-server.log。在这个文件中,有 ClickHouse 的一些默认路径配置,比较重要的 可以自定义。数据文件路径:/var/lib/clickhouse/
2024-02-02 20:03:04 395
原创 Linux部署Azkaban
必须进入到/opt/module/azkaban/azkaban-exec 路径,分别在三台机器上,才能启动 executor server。如果在/opt/module/azkaban/azkaban-exec 目录下出现 executor.port 文件,说明 启动成功。必须进入到master的/opt/module/azkaban/azkaban-web 路径,启动 web server。Ooize 相比 Azkaban 是一个重量级的任务调度系统,功能全面,但配置使用 也更复杂。
2024-02-01 20:28:14 959 1
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人