- 博客(4)
- 收藏
- 关注
RSS订阅原创 【无标题】
IceBerg+Minio+Hms+K8s环境下，使用Java API插入数据pom.xml数据写入非分区表写入结果数据写入分区表网上搜了不少文章，但是都是只包含了写入非分区表的用法，基本上没有看到分区表的写入案例。下面代码包含了分区表和非分区表的用法。都是在生产中使用的pom.xml<dependencies> <dependency> <groupId>org.apache.iceberg</groupId>
2024-05-21 13:45:43
1260
原创 Airflow 1.10 中文时区解决(排坑)
主要是airflow1.10的一些方式已经不一样了，之前网上的一些文档可能不太适用于这个版本在airflow家目录下修改airflow.cfg，设置default_timezone = Asia/Shanghai进入airflow包的安装位置，也就是site-packages的位置，一下修改文件均为相对位置，我这边的位置是/usr/local/lib/python3.6/site-packages修改airflow/utils/timezone.py在utc = pendulum
2020-05-15 14:35:50
1612
原创 Kubernetes集群安装
Kubernetes集群安装准备工作1. 修改主机名2. 配置主机间的域名解析3. 配置免密登录4. 关闭防火墙和selinux5. 关闭交换分区6. 设置网桥包经IPTables，Core文件生成路径7. 同步时间（略）8. 升级内核至最新版本8.1 启用ELRepo仓库8.2 查看可用的系统内核包8.3 安装最新内核8.4 查看当前机器所有内核版本8.5 将最新的内核版本设置为默认内核版本8....
2020-01-07 15:35:43
201
原创 基于Hortonworks shc使用spark2.2.1操作hbase 2.0.0(编译)
基于Hortonworks shc使用spark2.2.1操作hbase 2.0.0(编译)网上看了很多对于shc的编译文章，但是始终没法编译成功，自己测试了很多次，最终搞定了，这也是我眼拙的原因，其实人家都把执行的命令写的清清楚楚的源码下载 记得需要选择对应的版本，v1.1.2 版本是基于hbase1.1.2开发的，如果自己的系统版本是hbase2.x的请选择v1.1.3编译源码包...
2019-01-06 00:32:52
1593
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人