- 博客(96)
- 资源 (29)
- 收藏
- 关注
RSS订阅原创 服务器操作手册（四）nacos搭建+redis搭建+nexus搭建
本文主要介绍了Nacos、Redis和Nexus的Docker容器化部署配置。内容包含： Nacos部署 docker-compose配置(单机模式) 数据库初始化脚本 安全认证配置 Redis部署 详细redis.conf配置说明 docker-compose配置 内存管理策略 Nexus部署 目录权限设置 docker-compose配置 访问验证方式 全文提供了完整的配置文件模板和部署步骤，适合快速搭建微服务基础设施环境。重点介绍了各中间件的关键配置参数和最佳实践。
2025-10-09 21:06:59
63
原创 服务器操作手册（三）gitlab搭建+mysql搭建
本文介绍了GitLab和MySQL的Docker容器化部署方法。首先创建相关目录后，通过docker-compose文件配置GitLab服务，包括端口映射、数据卷挂载及SMTP邮件设置。部署完成后可通过指定URL访问，初始密码在/initial_root_password文件中。MySQL部分同样采用Docker部署，配置了数据卷、时区和root密码，并通过my.cnf文件设置表名大小写敏感度。最后提供了测试数据库连接的方法和作者联系方式。两种服务都配置了自动重启和数据持久化存储。
2025-10-08 13:37:23
72
原创 服务器环境操作手册（二） 基本环境安装
本文摘要： 介绍了在Linux系统上安装OpenJDK17的步骤，包括解压安装包、配置环境变量等。同时说明了如何安装配置ntpd时间同步服务、设置时区以及关闭swap分区。此外，还详细描述了Docker的安装过程：清理旧版本、设置阿里云yum源、安装Docker CE及Compose插件、配置镜像加速器等。最后提到永久关闭防火墙和主机重命名操作。全文提供了完整的命令行操作指南，适合系统管理员参考使用。
2025-10-07 10:28:12
76
原创 服务器环境操作手册（一） 清理环境
本文介绍了在CentOS7系统中卸载自带的JDK并配置阿里云yum镜像源的步骤。首先通过java-version和rpm -qa|grep jdk命令检查并列出已安装的JDK包，然后使用rpm -e --nodeps命令强制卸载这些包。接着配置阿里云yum源：备份原始配置文件，下载阿里云repo文件，清理并重建yum缓存，最后更新系统软件包。整个过程包括验证操作是否成功，确保系统环境配置正确。
2025-10-05 01:20:05
78
原创 k8s学习（RKE+k8s+rancher2.x）成长系列之简配版环境搭建（四）之Helm及cert-manager安装
【代码】k8s学习（RKE+k8s+rancher2.x）成长系列之简配版环境搭建（四）之Helm及cert-manager安装。
2024-02-20 11:08:35
797
原创 k8s学习（RKE+k8s+rancher2.x）成长系列之简配版环境搭建（三）
为了方便理解，我们把通RKE部署的Kubernetes集群称为“RKE集群”，RKE集群包括Rancher在Windows节点或其他现有自定义节点上启动的集群，以及Rancher在Azure、Digital Ocean、EC2、阿里云或vSphere等上使用新节点启动的集群。另一种是手动生成式搭建，这里我选择手动生成式搭建，是为了更充分的理解每一行标识的意义，学习理解的更透彻。搭建RKE集群有两种方式，一种是yaml文件的声明是搭建，参考。
2024-02-19 17:05:17
690
原创 k8s学习（RKE+k8s+rancher2.x）成长系列之简配版环境搭建（二）
k8s学习（RKE+k8s+rancher2.x）成长系列之简配版环境搭建(二)
2024-02-05 17:40:03
832
原创 k8s学习（RKE+k8s+rancher2.x）成长系列之概念介绍（一）
本系列主要是RKE拉起高可用k8s环境并部署HA的Rancher2.x的实战操作教学文章
2024-01-25 14:10:54
868
原创 记一次Hbase2.1.x历史数据数据迁移方案
cdh6.3.2集群的hbase2.1.x的历史数据迁移，使用snapshot方式迁移历史数据，使用restore_snapshot方式恢复hbase历史表及数据
2023-10-13 11:20:26
1306
原创 记一次生产环境cdh6.3.2集群yarn组件nodemanager节点down掉的事故分析
cdh6.3.2集群yarn组件的nodemanager不可用原因分析
2023-10-08 10:24:12
660
原创 python使用scrapy框架引入模块的报错解决办法-关于运行SCRAPY项目时提示 MODULENOTFOUNDERROR: NO MODULE NAMED的解决
以上是pycharm自动填充的，相对路径没有问题，是从项目根目录开始的，然鹅，执行项目就报错------>ModuleNotFoundError: No module named ‘scrapy项目名.scrapy项目名’运行SCRAPY项目时提示 MODULENOTFOUNDERROR: NO MODULE NAMED。items import item类名。
2023-09-20 09:39:08
1143
原创 flink1.13.2版本的对应的hive的Hcatalog的使用记录
【代码】flink1.13.2版本的对应的hive的Hcatalog的使用记录。
2023-09-18 14:31:31
461
原创 Hive中count(1)结果为0的解决办法
执行count(1)或count(*)统计行数时，默认会从Hive的元数据库中查询 rowsNum 对应值作为结果返回。但是如果是使用加载数据文件load data的方式填充表数据，则hive元数据不会收集此统计信息,那么count时就会为0。也就是说通过insert的方式写入数据的表会更新hive元数据的rowsNum信息；第二种 对于类似于count(1)的基础查询不使用元数据中的统计信息，而是执行Job，即设置参数值为false。hive中执行count(1)函数，统计结果为0。
2023-08-24 17:02:00
1612
原创 cdh6.3.2 Flink On Yarn taskmanager任务分配倾斜问题的解决办法
第一个参数代表是否在一个节点分配多个container，第二个参数代表在一个节点上一次性最多分配几个container。CDH6.3.0中第一个参数默认为true，则意味着会在一个节点上分配多个container，则会有多个taskmanager。第二个参数默认为-1，则意味着不限制，则会一次性分配较多container。
2023-08-18 15:52:26
1038
原创 HIVE3.1.2外部表映射hdfs的ORC文件，列值为空的问题解决办法
HIVE3.1.2外部表映射hdfs的ORC文件，列值为空的问题解决办法。因为ORC的schema列名包含大写字母，导致列值被置为空。增加大写字母敏感属性值为false即可。或者创建表的时候指定该属性值。
2023-06-13 11:15:38
510
原创 手动上传海豚调度器资源中心的文件，解决dolphinscheduler资源中心上传大一点jar包的bug问题
手动上传海豚调度器资源中心的文件，解决dolphinscheduler资源中心上传大一点jar包的bug问题
2023-06-02 15:18:09
2456
原创 公司大数据CDH技术选型升级为EMR集群的技术调研
公司大数据CDH技术选型升级为EMR集群的技术调研；开源大数据平台 E-MapReduce（简称“EMR”）是云原生开源大数据平台，为客户提供简单易集成的Hadoop、Hive、Spark、StarRocks、Flink、Presto、ClickHouse等开源大数据计算和存储引擎。EMR计算资源支持灵活的弹性控制。
2023-05-15 13:37:34
836
原创 flink1.13.2的大数据ELK日志系统使用手册
flink1.13.2的大数据ELK日志系统使用手册。增加了 -yD env.java.opts=“-Dflink_job_name=DemoTask” 这个传参，其中DemoTask为任务名称，视具体任务而变;如果使用jenkins发布任务的话，注意参数特殊字符转义。1.1.3. 现jenkins发布命令。 根据错误日志内容查。
2023-05-09 10:18:54
371
原创 flink1.13.2的log4j日志打印添加任务名和容器id的解决办法
【代码】flink1.13.2的log4j日志打印添加任务名和容器id的解决办法。
2023-05-09 10:07:03
763
原创 Dolphinscheduler3.0.0使用（三）spark任务的工作流使用
Dolphinscheduler3.0.0使用（三）spark任务的工作流使用 1.11. 创建spark任务工作流定义。1.13. 查看spark工作流任务日志。1.12. Spark工作流上线运行。
2023-04-26 18:22:11
1737
15
原创 Dolphinscheduler3.0.0使用（二）hive（HQL）的工作流使用
Dolphinscheduler3.0.0使用（二）hive（HQL）的工作流使用 1.10. 查看hive工作流任务实例日志。1.8. 创建hive工作流定义。1.9. Hive工作流上线运行。
2023-04-25 11:30:30
1652
原创 Dolphinscheduler3.0.0使用（一）
1.7. 创建资源文件夹（资源保存到hdfs上，配置文件中配置的）Dolphinscheduler3.0.0使用。1.5. 赋值admin账号root租户角色。1.4. 添加hive数据源。根据yarn队列资源创建。
2023-04-24 09:51:00
1414
原创 centos7.6非默认端口的ssh免密登录（centos7.6指定端口的ssh免密登录）
centos7.6非默认端口的ssh免密登录（centos7.6指定端口的ssh免密登录）,1.6. 各节点相互拷贝公钥内容至authorized_keys目录中。1.3. 创建用户ds(可选，这里以ds用户做免密为示例)1.7. 使用非默认端口免密登录（带登录日志查看）authorized_keys文件权限为600。1.4. 查看ds用户(可选)1.2. 重启sshd服务。1.5. 创建公钥、私钥。.ssh目录权限为700。
2023-04-20 11:54:12
650
原创 doris学习之路（一）初识Doris
Apache Doris 是一个基于MPP 架构的高性能、实时的分析型数据库，以极速易用的特点被人们所熟知，仅需时间即可返回海量数据下的查询结果，不仅可以支持高并发的点查询场景，也能支持高吞吐的复杂分析场景。基于此，Apache Doris 能够较好的满足等使用场景，用户可以在此之上构建用户行为分析、AB 实验平台、日志检索分析、用户画像分析、订单分析等应用。
2023-04-19 21:17:48
738
原创 centos7.6部署ELK集群（三）之logstash7.7.0部署
centos7.6部署ELK集群（三）之logstash7.7.0部署,logstash开机启动设置
2023-04-18 17:06:12
778
3
原创 centos7.6部署ELK集群（二）之kibana7.7.0集群部署
centos7.6部署ELK集群（二）之kibana7.7.0集群部署,kibana设置开机启动
2023-04-18 10:38:24
371
原创 centos7.6部署ELK集群（一）之elasticsearch7.7.0集群部署
centos7.6部署ELK集群（一）之elasticsearch7.7.0集群部署
2023-04-17 16:45:50
725
操作系统避免死锁的银行家算法
2011-11-25
数据库实验4
2011-11-24
计算器程序设计
2011-11-24
centos7.8支持的rke1.3.6的安装文件rke-linux-amd64
2024-02-05
flink-on-yarn-1.13.2.jar
2023-09-28
FLINK-1.13.2-BIN-SCALA-2.11.tar
2023-09-28
flink开发落到hdfs文件处于in-progress状态文件处理办法
2022-10-31
oracle 监听文件和本地域名的详细解释说明及安装步骤
2014-03-11
mybatis反向生成代码工具（包含service,serviceImpl,dao,entity,daoImpl）
2017-12-22
Phoenix之全局索引（Global Index）使用
2023-05-05
TA创建的收藏夹 TA关注的收藏夹
TA关注的人