- 博客(15)
- 收藏
- 关注
原创 基于Spark与HDFS的文本词频统计实验
本实验基于RockyLinux10.2搭建Hadoop伪分布式集群,使用Spark 3.5.0在local[*]模式下完成HDFS文本词频统计。通过MobaXterm远程操作,掌握HDFS文件上传、查看及Spark任务提交流程,利用flatMap、map、reduceByKey算子实现分词与聚合,并将结果输出至HDFS。实验验证了程序正确性,日志显示exitCode=0,结果与人工统计一致。
2026-09-30 19:51:39
247
原创 Rocky Linux10.2 搭建 Hadoop‑3.3.5 + Spark‑3.5.0 完整环境搭建步骤
本文基于 Rocky Linux10.2 虚拟机,完成 Hadoop‑3.3.5 伪分布式与 Spark‑3.5.0 大数据环境搭建。
2026-09-30 19:31:50
109
原创 K8s各类Volume YAML示例
列举了Kubernetes卷类型,包括emptyDir、configMap、secret、downwardAPI、projected、hostPath、local PV、NFS PV、PVC、CSI ephemeral等。
2026-09-09 06:27:45
201
原创 K8s‑各类控制器 YAML示例
Kubernetes工作负载:直接Pod无自愈仅测试;Deployment无状态应用,支持滚动更新扩缩容,生产常用;StatefulSet管理有状态应用,Pod有序稳定,适合数据库;DaemonSet每节点运行一个Pod,用于日志、监控;Job一次性任务,重启策略不能为Always;CronJob定时任务。
2026-09-09 05:40:32
130
原创 k8s NFS静态持久化存储
搭建NFS服务并安装nfs-utils,共享/test1目录。创建PV、PVC,部署nginx挂载PVC,实现数据持久化。通过NodePort服务暴露应用,测试访问成功。数据流向为Service→Pod→Volume→PVC→PV→NFS。
2026-09-08 15:30:46
227
原创 K8s NFS 动态持久化存储
本文介绍了K8s中NFS动态存储类的完整部署流程:所有节点安装NFS依赖,Master搭建NFS服务端;部署nfs-subdir-external-provisioner(含RBAC权限);创建StorageClass并设为默认(nfs-sc),实现PVC自动创建PV;最后通过Nginx Pod挂载PVC验证数据持久化,删除Pod重建后数据仍存在。
2026-09-06 21:55:29
170
原创 基于RAG架构的智能书籍咨询系统
搭建RAG智能问答系统,融合爬虫、向量检索、Agent推理。句子级文本分割,设计来源透明化机制区分本地数据与通用知识,通过实验确定最优阈值0.4,实现推荐与多轮对话。
2026-08-25 22:59:33
325
原创 Docker综合项目实验
本文摘要:项目基于RockyLinux10构建企业级容器化业务环境,采用双主机架构(宿主机A运行业务容器,宿主机B部署监控和存储服务)。内容包括:1)Docker环境搭建与Compose编排部署Go应用+MySQL+Redis+Nginx业务栈;2)NFS实现数据持久化,Harbor搭建私有镜像仓库;3)通过Prometheus+Grafana+Alertmanager构建监控告警体系,集成cAdvisor和Node Exporter采集容器及主机指标;4)实践容器资源配额管理、自定义镜像构建、服务日志收集
2026-08-22 22:24:13
222
原创 Rocky Linux 10 NFS服务安装部署
详解NFS服务端与客户端完整部署流程,含防火墙、共享配置、fstab永久挂载及Docker挂载NFS卷实操步骤
2026-07-17 12:19:31
223
原创 Linux 重定向常用操作
Linux 重定向与管道 9 个常用操作示例:>、>>、2>、&>、<、<<、|、tee、/dev/null,每个都配有实战命令,快速上手
2026-07-15 23:15:10
32
原创 Rocky 与 Ubuntu 分别搭建 Docker IPvlan 并跨机 ping 通
Rocky、Ubuntu通过IPvlan搭建同网段容器,实现跨主机互通
2026-07-13 17:28:36
238
原创 简单Linux SSH 安全加固
本文实操讲解 Linux SSH 安全加固,修改自定义端口、禁用 root 与密码登录,新建管理员用户配置 sudo 权限,搭配密钥登录、防火墙与 SELinux 安全设置。
2026-07-11 11:33:13
182
原创 cetnos stream10 安装部署docker
本文介绍CentOS/Rocky Linux系统下,先修改主机名、验证网络,安装yum工具并配置阿里云Docker源。随后安装Docker并设置开机自启,分别用yum原生安装和Docker容器化方式部署Nginx,关闭防火墙、排查访问问题,还可自定义网页内容并通过容器拷贝生效。
2026-07-08 23:55:48
519
1
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人
RSS订阅