docker 集群 笔记

孤人 提交于 2020-03-19 12:46:30
docker 集群

Docker 容器 

移除所有的容器和镜像(大扫除)
    用一行命令大扫除:

        docker kill $(docker ps -q) ; docker rm $(docker ps -a -q) ; docker rmi $(docker images -q -a) 
        注:shell 中的 $() 和 `` 类似,会先执行这里面的内容,上面的脚本会出现如下 docker kill "pids" ; docker kill 在 docker 中用于停止容器,docker rm 删除容器, docker rmi 删除镜像
        当没有运行的容器或者是根本没有容器的时候,这只会提示一个警告信息。当你想尝试的时候,这就是个非常好的单行命令。如果你仅仅想删除所有的容器,你可以运行如下命令:

        docker kill $(docker ps -q) ; docker rm $(docker ps -a -q)

        
    退出时删除容器
    
        如果你仅仅想在一个容器中快速的运行一个命令,然后退出,并且不用担心容器状态,把 --rm 参数加入 run 命令后面,这将结束很多你保存了的容器,并且清理它们。

        示例:docker run --rm -i -t busybox /bin/bash    
        
        
        
        
Docker Machine 

    统一 docker 虚拟机 环境 按照工具
    
    在 docker1.12 后 按照docker 自带
    
    创建一个machine
        docker-machine create --driver virtualbox worker  (virtualbox)
        docker-machine create --driver hyperv  manager        (hyperv)  注意:   docker machine 使用的系统是  Tiny Core Linux   该系统号称世界最小的 LINUX 系统。并且该系统运行在内存中。 docker 对其镜像了拓展 预装了docker 环境。
         
    查看machine列表
        docker-machine ls
        
    查看 machine 的环境变量的配置信息
        docker-machine env my-machine
        
    连接到machine的shell    
        eval "$(docker-machine env my-machine)"
        
    shh  链接
        docker-machine ssh my-machine
        
    关于 env 链接问题

        在win10 中  
         docker-machine    env my-machine | Invoke-Expression
        
        查看docker-machine ls
        
        NAME       ACTIVE     DRIVER       STATE     URL                         SWARM   DOCKER    ERRORS
        my-machine   *        virtualbox   Running   tcp://192.168.99.100:2376           v1.12.3
        my-machine   -        virtualbox   Running   tcp://192.168.99.100:2376           v1.12.3
        
        
        ACTIVE = *  显示当前链接的 是  my-machine 的 docker  
        
        后续
        
            可以直接如本地docker 环境一样使用 
            
            docker images
            
docker-compose
{
    批量按照 镜像
    
    
    安装docker-compose
    
    # curl -L https://github.com/docker/compose/releases/download/1.8.0/docker-compose-`uname -s`-`uname -m` > /usr/local/bin/docker-compose
    # chmod +x /usr/local/bin/docker-compose
    # docker-compose -v
    
    # cat docker-compose.yml
        version: "2"

        services:
          rng:
            build: rng
            ports:
            - "8001:80"

          hasher:
            build: hasher
            ports:
            - "8002:80"

          webui:
            build: webui
            ports:
            - "8000:80"
            volumes:
            - "./webui/files/:/files/"

          redis:
            image: redis

          worker:
            build: worker
    docker币应用一共有4个服务. 分别对应4个目录rng, hasher, webui, worker:
        详情可进入对应目录查看Dockerfile.

        rng是一个web service 生成随机的bytes数据.
        hasher是一个计算POST 数据hash值的web service.
        worker作为工作节点 后台调用rng 生成随机bytes数据, 然后将数据post到hasher服务计算hash值, 如果hashe值开头为0.则产生一个docker币.并将docker币保存到redis数据库中.
        webui一个web接口来监控整个系统.读取redis数据库中的docker币数量
        
    运行docker应用
        docker-compose up  // 在docker-compose.yml 文件夹中
        
    应用运行情况
        docker-compose ps
        
    增加节点
        docker-compose scale worker=10
        
        docker-compose ps
        
        
                        Name                       Command               State          Ports         
        -------------------------------------------------------------------------------------
        dockercoins_hasher_1    ruby hasher.rb                   Up      0.0.0.0:8002->80/tcp
        dockercoins_redis_1     docker-entrypoint.sh redis ...   Up      6379/tcp             
        dockercoins_rng_1       python rng.py                    Up      0.0.0.0:8001->80/tcp
        dockercoins_webui_1     node webui.js                    Up      0.0.0.0:8000->80/tcp
        dockercoins_worker_1    python worker.py                 Up                           
        dockercoins_worker_10   python worker.py                 Up                           
        dockercoins_worker_2    python worker.py                 Up                           
        dockercoins_worker_3    python worker.py                 Up                           
        dockercoins_worker_4    python worker.py                 Up                           
        dockercoins_worker_5    python worker.py                 Up                           
        dockercoins_worker_6    python worker.py                 Up                           
        dockercoins_worker_7    python worker.py                 Up                           
        dockercoins_worker_8    python worker.py                 Up                           
        dockercoins_worker_9    python worker.py                 Up

        
    ps: docker-compose 并未详细学习
}
    
Docker Swarm

    集群管理工具
    
    Docker  1.12 集成了Swarm集群工具

    docker swarm 开启swarm模式; 加入Swarm集群; 配置集群参数
    docker node 查询集群节点信息; 提升/移除一个管理节点; 管理swarm节点主机
    docker service 创建管理 service

    初始化swram集群
        docker swarm init --advertise-addr 192.168.99.101
    
        --advertise-addr参数, 后面跟你swarm集群的通讯地址
    

    
    docker swarm mode信息:
        在swram docker环境中 
        docker info
            Swarm: active
        
    加入swarm集群的命令和密钥
        docker swarm join-token worker  (工人)
        docker swarm join-token manager    (管理员)
    
    加入swarm集群
        在需要加入集群的docker环境中  
            运行 docker swarm join-token worker      (工人) 显示的语句
            运行 docker swarm join-token manager    (管理员)显示的语句
    
    查集群节点列表
        docker node ls
    
    
    Swarm集群上运行service
        原来使用docker run的命令, 把前面替换成docker service create
            docker service create --name ping-google alpine ping 8.8.8.8
    
    查询 swarm service列表    
            docker service ls
        ID            NAME         REPLICAS  IMAGE   COMMAND
        9cyy6xrk2n0w  ping-google  1/1       alpine  ping 8.8.8.8
    
        ps : 注意 REPLICAS  1/1  前面的1 是已经启动的 容器   后面的1 是总共需要几个容器
        
    查看服务到底跑在哪个节点服务器上:    
        
        docker service ps <serviceID> 
        
        docker service ps ping-google
        ID                         NAME               IMAGE   NODE    DESIRED STATE  CURRENT STATE           ERROR
        alxkyacovh4ltiklpccjhf2u5  ping-google.1      alpine  node03  Running        Running 5 minutes ago   
        15e8v9q83wu3skrz63ieacbkr   \_ ping-google.1  alpine  node01  Shutdown       Rejected 5 minutes ago  "No such image: alpine:latest"
    
    Scale扩展服务
        Scale服务到10个副本容器
            docker service scale <serivce ID>=<replicas No>
            
            ps :docker service scale ping-google=10
            
            ID            NAME         REPLICAS  IMAGE   COMMAND
            9cyy6xrk2n0w  ping-google  1/10      alpine  ping 8.8.8.8
                
            注意REPLICAS现在显示1/10表示这个service一共有10个副本,现在成功运行了1个. 集群正在启动其他的副本.
            
        修改服务的属性 扩展服务
            
            查看服务属性
                docker service inspect 服务名称
                    "Mode": {
                        "Replicated": {
                            "Replicas": 1
                        }
                    },
                    
            更新服务属性    
                docker service update rng --replicas 5
                
    global模式
        
        global模式的service, 就是在swarm集群的每个节点创建一个容器副本
        让一个service分布在集群的每个节点上
        
        
        // 指定网络  并且 使用 global模式
        docker service create --network dockercoins --name debug --mode global 服务名称
        
        

    
        
    暴露一个服务端口
        swarm集群的service端口暴露还有如下特性:

            公共的端口会暴露在每一个swarm集群中的节点服务器上.
            请求进如公共端口后会负载均衡到所有的sevice实例上.
        
        发布端口的参数跟单机环境一样是-p, 就是把docker run -p替换成docker service create -p.    
            docker service create --name search --publish 9200:9200 --replicas 7 elasticsearch
            
            replicas 是设置创建 7个 容器
    
    
    
    swarm集群负载均衡service有两种方式VIP和DNSRR:

            VIP模式每个service会得到一个 virtual IP地址作为服务请求的入口. 基于virtual IP进行负载均衡.
            
            DNSRR模式service利用DNS解析来进行负载均衡, 这种模式在旧的Docker Engine下, 经常行为诡异…所以不推荐.
            
            查看service的负载均衡模式
            
                docker service inspect rng
                
                        "EndpointSpec": {
                        "Mode": "vip"
                        }
                },
                "Endpoint": {
                    "Spec": {
                        "Mode": "vip"
                    },
                    "VirtualIPs": [
                        {
                            "NetworkID": "396fwpd5ja6azh93dshalmxro",
                            "Addr": "10.0.0.6/24"
                        }
                        
                        
        容器之间是不联通的  可以通过 主机IP 还联通 、 实用自定义网络 联通
        
        
        注意!!
            如果是通过 服务名称访问  服务名称不要有 特殊字符  如 @ _  等
                
    
    删除服务
        
        docker service rm <service ID or Name>
    
    
    容器服务更新
    
        程序代码进行修改后  构建新版的号的镜像 上次到 镜像仓库   
        
        更新服务是同版本好来更新的
        
            docker service update 命令
            
                --update-parallelism指定每次update的容器数量, 
                --update-delay 每次更新之后的等待时间.
                --image后面跟服务镜像名称
                
            // 原先的版本号是 0.1  更新版本 为 0.01    
            docker service update 服务名称 --update-parallelism 2 --update-delay 5s --image localhost:5000/dockercoins_worker:v0.01

            以一次更新2个容器副本的    频率更新到v0.01版本.
        
    
    容器服务回滚
    
        和 容器服务更新 一样  只要 指定版本号就可以了
        
    
    
    
    
    
    跨主机问题  
        
        经过测试  可以 阿里云主机 与本地Docker Machine 创建的虚拟机 互联! 
       注意!!       要打开 端口! 
      Port 7946 TCP/UDP for container network discovery.
      Port 4789 UDP for the container ingress network.
 
     关于 获取请求 ip 地址的问题   在 swarm  overlay 模式下   获取的IP 是服务器IP地址 不是 用户请求IP 地址。   解决办法    目前为止   docker service create --publish mode=host,target=9221,published=9221      制定为 mode=host   直接将请求到容日 不进行转发。  据说 17.07 版本后 会解决。
    
    镜像仓库registry
        
        创建registry服务, 发布5000端口
            docker service create --name registry --publish 5000:5000 registry:2
        ps:
            启动了一个registry副本容器, 根据docker swarm集群的端口发布服务特性
            swarm集群所有节点都会自动发布本机的5000对应到registry
            所以不管你在哪个节点上执行curl localhost:5000/v2/_catalog
            都是可以访问到registry服务的.所以你不用关心这个registry跑在那个节点上
            
            
    推送镜像

        需要先tag这个镜像的名字成<registry>/<image name>:<tag>:
            docker tag alpine localhost:5000/test
        推送image        
            docker push <image name>   
            
    overlay网络
    
        docker 1.12以前, swarm集群需要一个额外的key-value存储(consul, etcd etc). 来同步网络配置
        保证所有容器在同一个网段中.在docker 1.12已经内置了这个存储, 集成了overlay networks的支持
            
            
        创建一个名为dockercoins的overlay network
            docker network create命令
                docker network create --driver overlay dockercoins
                
        指定网络
            直接使用--network <network name>参数, 在指定网络上创建service
            
            docker service create --network dockercoins --name redis redis
            
            
            
            
            
            
            
    指定service约束

    
        节点属性        匹配                    示例
        node.id            节点 ID                    node.id == 2ivku8v2gvtg4
        node.hostname    节点 hostname            node.hostname != node02
        node.role        节点 role: manager        node.role == manager
        node.labels        用户自定义 node labels    node.labels.security == high
        engine.labels    Docker Engine labels    engine.labels.operatingsystem == ubuntu 14.04    
            
    举例  约束 服务 在固定的  服务器节点
        
        由于swarm自动调度定义执行在某个节点上的 重启服务以后 服务可能会被启动再随机的节点  
        
        docker service create --name registry --publish 5000:5000 \
        --constraint 'node.hostname==node01' registry


    
            
    挂载本地文件夹


        docker service create --name registry --publish 5000:5000 \
        --mount source=registry-vol,type=volume,target=/var/lib/registry \
        -e SEARCH_BACKEND=sqlalchemy \
        --constraint 'node.hostname==node01' registry
        
        
        docker service create --mount type=bind,target=/container_data/,source=/host_data/

        例 - 本地目录:     target = 容器里面的路径, source = 本地硬盘路径
        docker service create --name nginx --mount type=bind,target=/usr/share/nginx/html/,source=/opt/web/ --replicas 2 --publish 80:80/tcp nginx



        docker service create --mount type=volume,source=<VOLUME-NAME>,target=<CONTAINER-PATH>,volume-driver=<DRIVER>,

        例 - 挂载volume卷:  source  =  volume 名称 ,  traget = 容器里面的路径
        docker service create --name nginx --mount type=volume,source=myvolume,target=/usr/share/nginx/html,volume-driver=local --replicas 2 --publish 80:80/tcp nginx
        
            
        约束服务在node01 服务器节点  
        暴露 绑定IP 5000
        
            source=registry-vol 中registry-vol为卷名字  target 是地址
            target = 容器里面的路径, source = 本地硬盘路径
            
        使用docker volume ls命令查看
            
            docker volume ls
        
            
            docker volume inspect registry-vol
            可以看到本机卷挂载到节点的目录.
            
    为启动的服务 挂载本地文件夹
            
            update
            
            docker service update registry \
               --mount-add type=volume,source=registry-vol,target=/var/lib/registry
    
    
    
    
    
    关于 cloud 
    
        直接使用  服务名称 
        
        
            指定  cloud 服务名称  与 docker 服务名称相同
        
            defaultZone: http://discovery:8761/eureka/
            
                应为 通过docker已经自动负载了
                
                
     本文 很多部分都是 摘自 https://guai.im/   很详细的介绍和搭建了 Docker 集群     感兴趣的 可以看看重要提示  关于 spring cloud docker 化的问题     由于容器隔离问题  会出现  spring cloud 服务无法访问的问题。        问题原因           docker 容器中 会有多个网卡  理论上  spring cloud 会获取 第一个网卡   也就是 在 docker 同一网络中 可以访问通的 IP     但是 很多情况下  获取到的缺不是  可以访问通的IP       解决方法        spring cloud 设置 网卡过滤      
spring:  cloud:    inetutils:      ignoredInterfaces:        - eth1        - eth2        - eth3        - lo    关于网卡名称到的是什么 可以运行   

        docker service create --network cloud  --replicas 1 --name centos registry.cn-hangzhou.aliyuncs.com/atliwen/centos6.8-ssh ifconfig

     查看 日志  docker service logs centos  看到

 docker 集群 网络 是由管理端 服务器 做中转的    只要可以访问到 管理端服务器  就可以加入该集群   容器就可以互通CentOS 7 修改主机名称     hostnamectl set-hostname <hostname>  hostnamectl set-hostname <主机名> CentOS 7 安装 Docker 

  Prerequisites


  Docker CE is supported on CentOS 7.3 64-bit.


    1. Set up the repository


      Set up the Docker CE repository on CentOS:


          sudo yum install -y yum-utils


          sudo yum-config-manager --add-repo https://download.docker.com/linux/centos/docker-ce.repo


          sudo yum makecache fast


    2. Get Docker CE


      Install the latest version of Docker CE on CentOS:


          sudo yum -y install docker-ce


      Start Docker:


          sudo systemctl start docker


    3. Test your Docker CE installation


      Test your installation:


          sudo docker run hello-world

    开机自启动

 

       sudo chkconfig docker on

    开放firewall防火墙端口

        firewall-cmd --zone=public --add-port=2377/tcp --permanent && \
        firewall-cmd --zone=public --add-port=7946/tcp --permanent && \
        firewall-cmd --zone=public --add-port=7946/udp --permanent && \
        firewall-cmd --zone=public --add-port=4789/tcp --permanent && \
        firewall-cmd --zone=public --add-port=4789/udp --permanent && \
        firewall-cmd --reload

    查看端口开放情况

        firewall-cmd --list-ports

    

    直接关闭防火墙

        systemctl stop firewalld.service #停止firewall

        systemctl disable firewalld.service #禁止firewall开机启动


 卸载docker   sudo yum -y remove docker*  rm -rf /var/lib/docker设置静态IP

    BOOTPROTO="static" #dhcp改为static
    ONBOOT="yes" #开机启用本配置
    IPADDR=192.168.18.129 #静态IP
    GATEWAY=192.168.18.2 #默认网关
    NETMASK=255.255.255.0 #子网掩码
    DNS1=192.168.18.2 #DNS 配置

 
poweroff  立刻关机 shutdown -h now 立刻关机(root用户使用)重启命令 reboot      shutdown -r now 立刻重启 shutdown -r 10

systemctl is-enabled iptables.service
systemctl is-enabled servicename.service #查询服务是否开机启动
systemctl enable *.service #开机运行服务
systemctl disable *.service #取消开机运行
systemctl start *.service #启动服务
systemctl stop *.service #停止服务
systemctl restart *.service #重启服务
systemctl reload *.service #重新加载服务配置文件
systemctl status *.service #查询服务运行状态
systemctl --failed #显示启动失败的服务

注:*代表某个服务的名字,如http的服务名为httpd

 

构建 DOcker 镜像

  构建镜像


      mvn clean package docker:build


  构建镜像并且推送到镜像表

 

      mvn clean package docker:build -DpushImage

 

 

 集群节点添加标识

     docker node update  djts-4 --label-add servertype=zuul

    集群节点删除标识 

    docker node update  djts-4 --label-rm   servertype

 

  集群服务编排 指定节点标签

    --constraint 'node.labels.servertype==zuul' 

 

 

 

 
易学教程内所有资源均来自网络或用户发布的内容,如有违反法律规定的内容欢迎反馈
该文章没有解决你所遇到的问题?点击提问,说说你的问题,让更多的人一起探讨吧!