安装docker并运行docker swarm模式

docker是什么就不多说了,这里主要说说docker swarm。
docker engine本身只提供了容器技术,没有解决集群环境下的容器编排和通信。docker swarm是一个容器编排管理工具,docker-engine在1.12版本之后集成了docker swarm,不需要再单独安装。
docker swarm的功能,举个例子,有3台机器都安装了docker环境,称为3台docker节点。那么如何管理这3台docker节点,并把容器以类似于负载均衡的模式分别部署到这3台节点上,并让这些分布在不同节点上的容器之间互相通信呢。这时候需要用到容器编排工具,常用的编排工具有Google开源的kubernetes、apache的mesos、docker公司的swarm。
kubernetes作为Google开源的工具,已经在Google的生产环境运行了多年,功能丰富并且稳定可靠,目前有很多公司都在使用。docker在1.12版本之后内置了swarm模式,把容器编排以核心组件的模式集成到了docker engine中,并借鉴了kubernetes的成功经验。

安装docker

以centos7为例,这里附上官网的安装文档,docker官网实在太慢了。。。
使用yum安装

  1. 更新yum源,sudo yum update
  2. 添加docker的yum仓库
    sudo tee /etc/yum.repos.d/docker.repo <<-'EOF'
    [dockerrepo] name=Docker Repository
    baseurl=https://yum.dockerproject.org/repo/main/centos/7/
    enabled=1
    gpgcheck=1
    gpgkey=https://yum.dockerproject.org/gpg
    EOF'
  3. 安装docker-engine,sudo yum install docker-engine
  4. 启动docker守护进程,sudo systemctl start docker

docker的安装到这里就结束了,下边说一下在公司内网环境通过代理安装docker需要注意的问题。

  1. 首先让机器能通过代理上网
    修改/etc/profile,增加export http_proxy=代理用户名:密码@代理地址:端口
    使修改生效,source /etc/profile
  2. 配置yum使用代理
    vim /etc/yum.conf 增加proxy=http://代理用户名:密码@代理地址:端口

经过这两步之后,就可以在内网通过代理安装docker了。

配置docker

打开docker远程管理端口2375,并配置docker hub国内仓库。

  1. 新建docker配置文件
    vim /etc/sysconfig/docker
    增加
    DOCKER_OPTS="-H unix:///var/run/docker.sock -H 0.0.0.0:2375 --registry-mirror=国内仓库地址"
    如果需要通过代理访问还需要增加
    HTTP_PROXY=http://代理用户名:密码@代理地址:端口
  2. 启动docker守护进程时加载配置文件
    vim /lib/systemd/system/docker.servic
    修改ExecStart配置为
    ExecStart=/usr/bin/dockerd $DOCKER_OPTS
    在[Service]中增加配置文件路径的配置
    EnvironmentFile=-/etc/sysconfig/docker
    把配置文件加载路径指定到第一步创建的配置文件/etc/sysconfig/docker
  3. 重启docker守护进程
    sudo systemctl stop docker
    sudo systemctl start docker
  4. 检查配置是否生效
    ps -ef|grep docker
    如果配置生效,会在dockerd进程后边加上刚才配置的参数。

启动swarm模式

只需要在一个docker节点上初始化swarm集群, 其他节点加入这个集群就行了。
选择一台docker节点作为swarm模式的leader,运行
docker swarm init --advertise-addr 主机ip
按照提示信息在其他节点上执行命令加入swarm集群
在leader节点上执行docker node ls 查看节点信息

创建集群网络

  1. 在swarm集群中的任意一个节点上运行
    docker network ls 查看当前网络状况
    scope为local的网络只能作用于本机,下边创建swarm集群使用的网络。
  2. 运行 docker network create --driver overlay my-network
    创建一个名为my-network的集群网络
    再次运行 docker network ls,可以看到刚才创建的my-network ,scope为swarm,这个网络可以用于swarm模式,并让多个节点上的容器可以互通。
    在swarm中创建service时可以通过 --network 网络名称 指定使用的网络。多个service如果使用同一个scope为swarm的network,可以通过service的名称互相通信。

docker swarm简单使用

下边简单介绍docker swarm的使用,有兴趣的可以查看docker官方文档进行深入了解。
下边的命令全部是在swarm的leader节点运行!!
docker service create --replicas 1 --name tomcat --publish 9090:8080 tomcat:latest
这里创建了一个名为tomcat 的service,swarm把容器封装为service,类似于kubernates中的pod,一个service是一个可供swarm调度的容器组合。
这里的--replicas 1指定了service的副本数。
--publish 9090:8080把容器中的8080端口发布到宿主机的9090端口

运行 docker service ls 查看当前的服务列表,可以看到有一个名为tomcat的服务。
运行 docker service ps tomcat 可以看到tomcat服务运行在哪个swarm节点,以及当前运行的状态。

切换到tomcat服务运行的节点,运行 docker ps 可以看到容器的ID,以及端口映射的情况。
运行 docker logs -f 容器ID 查看tomcat运行日志。

tomcat启动成功后,可以在浏览器中访问tomcat主页,地址是docker节点的ip(随便哪一个节点都可以),端口是9090,是在创建服务时指定的publish。

上边已经成功运行了一个tomcat服务,这里对这个服务进行扩展部署。
运行 docker service scale tomcat=2 把tomcat服务扩展为两个实例。
运行 docker service ls 可以看到tomcat服务的replicas变成了1/2,第二个实例启动成功之后会变为2/2
运行 docker service ps tomcat 查看两个tomcat服务实例运行在哪个docker节点,以及运行状态。

swarm会自动在两个service中做负载均衡

swarm还有一些其他的命令,比如 docker service rm service名称 删除指定service,以及灰度发布等,具体使用请参照官方文档,这里不再细说。

swarm模式下需要注意的问题

swarm只会在docker节点之间调度容器,不会调度容器使用的挂载卷volume。在用swarm部署数据库的容器时,需要注意数据文件的问题。或者加载了外部配置文件的容器,也需要注意配置文件的问题。
一种简单的解决方式,是让这些容器每次都被调度到相同的docker节点上。需要在创建service时指定--constraint 参数,比如 --constraint 'node.hostname==myhost' ,这样创建的service只会被调度到主机名为myhost的docker节点。
另一种解决方式,使用docker volume插件,比如flocker。flocker可以在容器调度的时候,连同volume一起调度,这里不再细说,可以参照flocker的官网文档。

最后

这里只是对docker的安装配置以及docker swarm的使用做了简单介绍,想要有更深入的了解,请参照官方文档,官方文档是学习的最好途径。docker只是微服务架构的开篇,想要实践微服务,docker必不可少。

后续会陆续推出基于docker部署的微服务架构,使用spring cloud做微服务解决方案,基于docker的mysql和mongodb的部署,基于docker的rabbitmq和activemq消息中间件的部署,以及基于docker部署的kafka、elk日志收集统计等。


https://my.oschina.net/u/2298167/blog/789502
  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
以下是使用Docker Swarm和Docker Compose搭建并运行Kafka服务的简单步骤: 1. 首先,您需要创建一个docker-compose.yml文件,其中包含Kafka服务的配置。以下是一个简单的docker-compose.yml文件,用于启动单个Kafka节点: ``` version: '3.8' services: zookeeper: image: confluentinc/cp-zookeeper:6.2.0 hostname: zookeeper container_name: zookeeper ports: - "2181:2181" kafka: image: confluentinc/cp-kafka:6.2.0 hostname: kafka container_name: kafka depends_on: - zookeeper ports: - "9092:9092" environment: KAFKA_ADVERTISED_LISTENERS: PLAINTEXT://localhost:9092 KAFKA_ZOOKEEPER_CONNECT: zookeeper:2181 KAFKA_OFFSETS_TOPIC_REPLICATION_FACTOR: 1 KAFKA_AUTO_CREATE_TOPICS_ENABLE: "true" ``` 在上面的配置中,我们使用了Confluent公司提供的Kafka和Zookeeper镜像,并将它们分别命名为zookeeper和kafka。我们还指定了Zookeeper的端口号为2181,Kafka的端口号为9092。 2. 接下来,您需要在Swarm管理节点上初始化Swarm。如果您还没有初始化Swarm,请使用以下命令: ``` docker swarm init ``` 3. 然后,您需要将docker-compose.yml文件复制到Swarm管理节点上,并使用以下命令启动Kafka服务: ``` docker stack deploy -c docker-compose.yml kafka ``` 这将在您的Swarm集群中启动Kafka服务。 4. 要检查Kafka服务是否正在运行,请使用以下命令: ``` docker service ls ``` 这将显示正在运行的Kafka服务。 5. 最后,您可以使用Kafka的客户端工具来测试Kafka服务是否正在工作。例如,您可以使用以下命令向Kafka发送一条消息: ``` docker run --net=kafka_kafka-net --rm confluentinc/cp-kafka:6.2.0 kafka-console-producer --broker-list kafka:9092 --topic test ``` 然后,您可以使用以下命令从Kafka中读取消息: ``` docker run --net=kafka_kafka-net --rm confluentinc/cp-kafka:6.2.0 kafka-console-consumer --bootstrap-server kafka:9092 --topic test --from-beginning ``` 如果您看到了您发送的消息,则表示Kafka服务已经在Swarm集群中成功启动。

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值