- 博客(8)
- 收藏
- 关注
RSS订阅原创 hadoop机架感知
Hadoop机架感知概述应用场景举例技术实现实现效果 概述 在Hadoop集群数据存储多副本前提下，访问Hadoop HDFS集群时，访问速度直接受到Datanode选取策略的影响。可以通过自定义Hadoop集群的网络拓扑结构，最大程度的发挥Hadoop集群的性能。 应用场景举例 某生产环境采用Hadoop集群部署，其中两台数据节点在IDC机房，一台数据节点在阿里云。默认情况下生产数据是随机在这三...
2020-04-25 21:32:29
251
原创 配置docker overlay 网络
配置Docker overlay 网络拉取progrium/consul 镜像运行Consul容器查看Consul界面修改配置文件重启 docker daemon查看Consul界面，其他节点是否加入其中 拉取progrium/consul 镜像 # docker pull progrium/consul 运行Consul容器 # docker run -d -p 8500:8500 -h...
2020-04-25 21:32:17
411
原创 使用docker跑一个伪分布式hadoop测试集群
使用docker跑一个伪分布式hadoop测试集群概述主要镜像组件版本镜像构建hadoop-basenamenodedatanoderesourcemanagernodemanagerhistoryserverzookeeper跑一个伪分布式集群docker-compose.yaml 中需要挂载的env文件 概述 这是之前学习大数据时服务器不足自己用docker搭建的一个hadoop伪分布式集群，...
2020-04-25 21:32:06
626
原创 使用docker搭建jenkins
使用docker搭建jenkins概述前置条件使用docker命令搭建jenkins访问 概述 本文档 jenkins 通过docker容器搭建 前置条件 服务器首先安装docker docker安装链接: docker安装. jenkins镜像版本： jenkinsci/blueocean:latest 使用docker命令搭建jenkins # docker run --name jen...
2020-04-24 22:29:36
124
原创 使用docker搭建gitlab（http、https）
使用docker搭建gitlab概述前置条件使用docker命令搭建gitlabhttp 模式安装https模式安装 概述 本文档 gitlab 采用docker搭建，涉及http及https模式 前置条件 服务器首先安装docker docker安装链接: docker安装. 使用docker命令搭建gitlab # docker run --name='gitlab' -d --pri...
2020-04-24 12:52:37
2731
原创 docker-compose安装
docker-compose安装概述部署 概述 本文介绍 docker-compose 的安装方式 部署 下载docker-compose二进制文件到服务器 /usr/local/bin/ 目录 # curl -L "https://github.com/docker/compose/releases/download/1.25.5/docker-compose-$(uname -s)-$(una...
2020-04-24 10:58:31
167
原创 docker安装
Docker 安装概述通过yum安装Docker(这里以阿里云镜像源为例) 概述 本文介绍 Docker 的安装方式 通过yum安装Docker(这里以阿里云镜像源为例) 备份原来的镜像源 # cp /etc/yum.repos.d/CentOS-Base.repo /etc/yum.repos.d/CentOS-Base.repo.bak 设置阿里云的yum源（适用于centos7） ...
2020-04-24 10:35:54
153
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人