• 当前位置： 首页
  • 论坛
  • docker使用
  • 「实战篇」开源项目docker化运维部署-借助dockerSwarm搭建集群部署（九）
「实战篇」开源项目docker化运维部署-借助dockerSwarm搭建集群部署（九）
2019-04-10 18:19:57
李明
  • 访问次数: 382
  • 注册日期: 2018-07-09
  • 最后登录: 2022-11-17
原创文章，欢迎转载。转载请注明：转载自 IT人故事会 ，谢谢！原文链接地址： 「实战篇」开源项目docker化运维部署-借助dockerSwarm搭建集群部署（九）
为了让学习的知识融汇贯通，目前是把所有的集群都放在了一个虚拟机上，如果这个虚拟机宕机了怎么办？俗话说鸡蛋不要都放在一个篮子里面，把各种集群的节点拆分部署，应该把各种节点分机器部署，多个宿主机，这样部署随便挂哪个主机我们都不担心。源码： https://github.com/limingios/netFuture/blob/master/docker-swarm/

v2-6a64c695a518ba60594d00392fa4a4ec_hd.p

一起在说说docker swarm
swarm 是docker的三剑客一员，之前都说过了，可以看中级和高级啊 。
  1. docker machine 容器服务
  2. docker compose 脚本服务
  3. docker swarm 容器集群技术

v2-d8ab7d8dffff8d210c00b993d25cc677_hd.p
  • 去中心化的设计
Swarm Manager 也承担worker节点的作用。Swarm Worker 运行容器部署项目

v2-bae49f7dbb6b3c83b98593ed9ab9282d_hd.p
Swarm是没有中心节点的，挂到其中一个其他是不会挂掉的。Swarm Manager 如果master挂了，立马选举一个新的master。
  • 创建集群环境
首先机器已经安装了docker环境。 

          

          

            docker swarm init
          

          
    
            
  • 
            加入swarm集群
          
    • 
        

        

        

        

          #加入到manager中
           docker swarm join-token manager 
          #加入到worker中
           docker swarm join-token worker
        

        

        

        

          环境搭建
        

        

          

            应用IP地址服务配置安装应用安装方式docker-swarm-manager1192.168.66.100docker-swarm-manager1单核 2g内存docker-swarm-manager1dockerdocker-swarm-manager2192.168.66.101docker-swarm-manager2单核 2g内存docker-swarm-manager2dockerdocker-swarm-node1192.168.66.102docker-swarm-node1单核 2g内存docker-swarm-node1dockerdocker-swarm-node2192.168.66.103docker-swarm-node2单核 2g内存docker-swarm-node2docker
          

        

        

          

            

          

        

        

          

            

              

                v2-50af752f21d98d05b9a88664989f3d8f_hd.p
              

            

          

        

        

          

             
          

        

        

        

        

          docker swarm环境
        

        

          

            一共4个节点，2个manager节点，2个work节点，manager不光是管理，而且也干活，说白了一共4个干活的节点。
          

        

        

          

            创建docker swarm集群
          

        

        

        

        

          su - 
          #密码vagrant
           docker swarm init
        

        

          

            报错注意：如果你在新建集群时遇到双网卡情况，可以指定使用哪个 IP，例如上面的例子会有可能遇到下面的错误。
          

        

        

        

        

          Error response from daemon: could not choose an IP address to advertise since this system has multiple addresses on different interfaces (10.0.2.15 on enp0s3 and 192.168.66.100 on enp0s8) - specify one with --advertise-addr
        

        

          

            再次创建docker swarm集群192.168.66.100
          

        

        

        

        

          docker swarm init --advertise-addr 192.168.66.100 --listen-addr 192.168.66.100:2377docker swarm join-token manager
        

        

          

            

          

        

        

          

            

              

                v2-af9ba782c80db094c4b6f9a226ee9c35_hd.p
              

            

          

        

        

          

             
          

        

        

          

            

          

        

        

          

            

          

        

        

          

            

              

                v2-7aa88c97ff42690d407b92eeb36b5fbc_hd.p
              

            

          

        

        

          

             
          

        

        

          

            再次创建docker swarm集群192.168.66.101当前节点以manager的身份加入swarm集群
          

        

        

        

        

          docker swarm join --token SWMTKN-1-4itumtscktomolcau8a8cte98erjn2420fy2oyj18ujuvxkkzx-9qutkvpzk87chtr4pv8770mcb 192.168.66.100:2377
        

        

          

            

          

        

        

          

            

              

                v2-71ef6c5cda437a9cfa9dc0498ba6fcf0_hd.p
              

            

          

        

        

          

             
          

        

        

          

            再次创建docker swarm集群192.168.66.102当前节点以worker的身份加入swarm集群
          

        

        

        

        

          docker swarm join --token SWMTKN-1-4itumtscktomolcau8a8cte98erjn2420fy2oyj18ujuvxkkzx-f2dlt8g3hg86gyc9x6esewtwl 192.168.66.100:2377
        

        

          

            

          

        

        

          

            

              

                v2-1a3611db1c5d7fcf2f3f085c65d995db_hd.p
              

            

          

        

        

          

             
          

        

        

          

            再次创建docker swarm集群192.168.66.103当前节点以worker的身份加入swarm集群
          

        

        

        

        

          docker swarm join --token SWMTKN-1-4itumtscktomolcau8a8cte98erjn2420fy2oyj18ujuvxkkzx-f2dlt8g3hg86gyc9x6esewtwl 192.168.66.100:2377
        

        

          

            

          

        

        

          

            

              

                v2-dc9e7a80590ca4741884a3d70c7a5717_hd.p
              

            

          

        

        

          

             
          

        

        

        

        

          查看swarm集群
        

        

          

            只能在manager节点内执行leader挂掉后，reachable就可以管理集群了。
          

        

        

        

        

          docker node ls
        

        

          

            

          

        

        

          

            

              

                v2-73ee9470b25ff99d31d7723482ac8de2_hd.p
              

            

          

        

        

          

             
          

        

        

        

        

          查看swarm集群的网络
        

        

          

            只能在manager节点内执行
          

        

        

        

        

          docker network ls
        

        

          

            

          

        

        

          

            

              

                v2-471df9c994c0ffb12b16f294c2d17d8a_hd.p
              

            

          

        

        

          

             
          

        

        

        

        

          创建容器间的共享网络
        

        

          

            只能在manager节点内执行
          

        

        

        

        

          docker network create -d overlay --attachable swarm_testdocker network ls
        

        

          

            

          

        

        

          

            

              

                v2-98959e7cfb2ada0ab9b24f67f532e7d3_hd.p
              

            

          

        

        

          

             
          

        

        

          

            目前是4台机器，如果想让4台机器内的容器可以进行共享，overlay的网络就可以了，只需要在创建容器的时候--net=swarm_test
          

        

        

          

            

          

        

        

          

            

              

                v2-272bb11e93ef7c5024d306da4ae10174_hd.p
              

            

          

        

        

          

             
          

        

        

        

        

          创建5个pxc容器
        

        
    
          
  • 
          192.168.66.100
        
    • 
      

      

        

          创建2个容器。之前也说过如何创建，最为重要的是共享网络一定要使用swarm的共享网络。
        

      

      

      

      

        docker volume create v1docker volume create backup1 
        #增加域名解析
         echo "nameserver 8.8.8.8" | tee /etc/resolv.conf > /dev/null sudo curl -sSL https://get.daocloud.io/daotools/set_mirror.sh | sh -s http://b81aace9.m.daocloud.iosudo systemctl restart dockerdocker run -d -p 3306:3306 --net=swarm_test \ --name=node1 \ -e CLUSTER_NAME=PXC \ -e MYSQL_ROOT_PASSWORD=a123456 \ -e XTRABACKUP_PASSWORD=a123456 \ -v v1:/var/lib/mysql \ --privileged \ -v backup1:/data \ percona/percona-xtradb-clusterdocker ps
      

      

        

          

        

      

      

        

          

            

              v2-2ab4b3d401595c1c89a4571fe99d0302_hd.p
            

          

        

      

      

        

           
        

      

      

        

          

        

      

      

        

          

            

              v2-a22c0eaa6729fcb5639698fe8b0a205c_hd.p
            

          

        

      

      

        

           
        

      

      

        

          

        

      

      

        

          

            

              v2-f170c1626ed7ceb3fe2240ee916b9259_hd.p
            

          

        

      

      

        

           
        

      

      

      

      

        docker volume create v2docker run -d -p 3307:3306 --net=swarm_test \ --name=node2 \ -e CLUSTER_NAME=PXC \ -e MYSQL_ROOT_PASSWORD=a123456 \ -e XTRABACKUP_PASSWORD=a123456 \ -v v2:/var/lib/mysql \ --privileged \ -v backup1:/data \ -e CLUSTER_JOIN=node1 \ percona/percona-xtradb-clusterdocker ps
      

      

        

          

        

      

      

        

          

            

              v2-b01323d5a232026a184585473662f568_hd.p
            

          

        

      

      

        

           
        

      

      
    
        
  • 
        192.168.66.101
      
    • 
    

    

      

        创建1个容器。之前也说过如何创建，最为重要的是共享网络一定要使用swarm的共享网络。
      

    

    

    

    

      docker volume create v3docker volume create backup3docker run -d -p 3307:3306 --net=swarm_test \ --name=node3 \ -e CLUSTER_NAME=PXC \ -e MYSQL_ROOT_PASSWORD=a123456 \ -e XTRABACKUP_PASSWORD=a123456 \ -v v3:/var/lib/mysql \ --privileged \ -v backup3:/data \ -e CLUSTER_JOIN=node1 \ percona/percona-xtradb-clusterdocker ps
    

    

      

        

      

    

    

      

        

          

            v2-3f402a88798b84dee058c2f4acd11192_hd.p
          

        

      

    

    

      

         
      

    

    
    
      
  • 
      192.168.66.102
    
    • 
  

  

    

      创建1个容器。之前也说过如何创建，最为重要的是共享网络一定要使用swarm的共享网络。
    

  

  

  

  

    docker volume create v4docker volume create backup4docker run -d -p 3307:3306 --net=swarm_test \ --name=node4 \ -e CLUSTER_NAME=PXC \ -e MYSQL_ROOT_PASSWORD=a123456 \ -e XTRABACKUP_PASSWORD=a123456 \ -v v4:/var/lib/mysql \ --privileged \ -v backup4:/data \ -e CLUSTER_JOIN=node1 \ percona/percona-xtradb-clusterdocker ps
  

  
    
    
  • 
    192.168.66.103
  

  

    创建1个容器。之前也说过如何创建，最为重要的是共享网络一定要使用swarm的共享网络。
  

  docker volume create v4docker volume create backup4docker run -d -p 3307:3306 --net=swarm_test \ --name=node4 \ -e CLUSTER_NAME=PXC \ -e MYSQL_ROOT_PASSWORD=a123456 \ -e XTRABACKUP_PASSWORD=a123456 \ -v v4:/var/lib/mysql \ --privileged \ -v backup4:/data \ -e CLUSTER_JOIN=node1 \ percona/percona-xtradb-clusterdocker ps

  

    

  

  

    

      

        v2-1e3fcc2c4e2bf93e9b14f68c03293eb1_hd.p
      

    

  

  

     
  

  

    

  

  

    

      

        v2-ac2488be6e8dac7d3781e93b39d4b40f_hd.p
      

    

  

  

     
  

  容器集群

  

    在这个示意图里面，画了4个linux的主机，都安装了docker虚拟机，假如我现在想安装A程序，直接选择Docker-1这个主机里面的容器安装A程序，这样没有问题。但是单节点单容器来部署，一旦这个节点挂掉的话，A程序就没有，为了防止这样我们有冗余设计，直接在Docker-2这个主机里面的容器也安装A程序，这样的话，Docker-1里面的A程序挂了，Docker-2里面的A程序也可以运行。这个功能有点像负载均衡，其实真的很像。docker swarm提供的东西跟负载均衡还是有区别的。swarm 只是提供了容器状态的管理，如果Docker-1里面的A程序挂了，发现本来二个，现在变成1个了危险，立马在起一个吧。实时保证docker容器内的数量。
  

  

    

  

  

    

      

        v2-fe40108855b5f3aabbeca0c428dd8a0f_hd.p
      

    

  

  

     
  

  

    

  

  

    

      

        v2-d8d4e22d02c81ff7b0e12b4f11939291_hd.p
      

    

  

  

     
  

  容器集群适合的场景

  

    容器集群不适合有状态程序，例如数据库，缓存等等
  

  

    

  

  

    

      

        v2-04ebe5422687772a60feda6c6088bd27_hd.p
      

    

  

  

     image.png
  

  退出Swarm集群

  #Manager退出必须加--force
   docker swarm leave --force

  删除节点

  service docker stop 
  #Manager节点需要先降级
   docker node demoted <nodeID>docker node rm <nodeID>docker network

  

    PS：这次主要说了3点比较重要的：通过docker-swarm的网络搭建容器化通信网络，创建集群的时候--net 加入docker-swarm创建的网络，方便通信。不哪些适合做容器化集群，数据库和缓存。如何操作docker-swarm中的节点。
  

  

    

  

  

    

      

        v2-5e0719d9fc7dd03ce32e624534c0b631_hd.p
      

    

  
 
 

 

 

 

 
 回贴