![](https://img-blog.csdnimg.cn/20201014180756919.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
大数据运维
从docker、k8s记录大数据运维
千载春秋书风华
这个作者很懒,什么都没留下…
展开
-
大数据运维目录
Kerbernet(K8s)篇。原创 2023-11-24 08:40:47 · 597 阅读 · 0 评论 -
集群组件介绍
物理机托管在机房,防火墙是paloalto,有需要的小伙伴可以私信我。物理机2台,共112c512gb内存。原创 2024-01-13 18:46:33 · 384 阅读 · 0 评论 -
k8s集群部署(kuboard)
该部署方式较为简单,后续基于k8s的文章均以kuboard管理为例。原创 2024-01-13 19:07:20 · 787 阅读 · 0 评论 -
K8s集群部署(阿里云基础篇)
使用2023年双11阿里云2c2g的服务器3台(几个小伙伴一起买的)网络环境:多账号没有内网,使用公网直连,并在安全组中对互相的公网ip进行全端口放行。1个master节点和2个node节点无自建Harbor仓库。原创 2023-11-25 09:45:53 · 369 阅读 · 0 评论 -
NFS服务器部署
nfs的部署较为简单,直接放指令了。原创 2024-01-13 19:15:35 · 374 阅读 · 0 评论 -
k8s集群对接存储资源
登陆kuboard原创 2024-01-13 19:23:11 · 367 阅读 · 0 评论 -
Docker/K8s基础环境
参考文档https://developer.aliyun.com/mirror/docker-ce?3. cri-docker(k8s需要)2. docker-ce环境。原创 2023-11-24 08:45:50 · 356 阅读 · 0 评论 -
大数据基础镜像(Docker)
因为大数据集群需要互相免密。所以在开始之前需要首先构建可以直接互相访问的标准镜像。原创 2023-11-25 10:35:11 · 376 阅读 · 0 评论 -
Doris on K8s
以下以doris2.0.3版本为例。原创 2024-01-13 21:00:18 · 483 阅读 · 0 评论 -
DataSophon部署(Dockerfile)
由于docker的容器化本质上进程而不是虚拟机,所以原有启动脚本的nohuo会导致docker认为任务已经执行完毕,从而退出,故而需要修改。后续已有打包好的docker-compose模式,将在下期发布,镜像已上传至阿里云(因为是私仓,所以下载速度和并发会有点拮据)通过挂在目录的方式将数据文件放到容器中,方便我们在宿主机上进行修改,但只暴露所需的8081端口到宿主机。EXPOSE是容器暴露端口,理论容器间可以访问的情况下是无需暴露,此处是官方文档中提到的端口。原创 2023-11-26 10:33:23 · 565 阅读 · 0 评论 -
StreamPark部署(DockerCompose)
下载mysql-connector-j-8.0.31.jar至同目录。在同目录下新建docker-compose.yaml。文档操作目录: /data/streampark。执行docker compose up -d。在同目录下新建dockerfile。原创 2023-12-13 18:39:16 · 489 阅读 · 0 评论 -
StreamPark实时运维平台(Docker部署)
由于官方的镜像在国内拉取不到,本次以二进制包的方式进行部署。原创 2023-11-26 10:19:04 · 546 阅读 · 0 评论