DockerSwarm集群 新增节点 docker swarm集群部署

介绍

Swarm 在 Docker 1.12 版本之前属于一个独立的项目，在 Docker 1.12 版本发布之后，该项目合并到了 Docker 中，成为 Docker 的一个子命令。目前，Swarm 是 Docker 社区提供的唯一一个原生支持 Docker 集群管理的工具。它可以把多个 Docker 主机组成的系统转换为单一的虚拟 Docker 主机，使得容器可以组成跨主机的子网网络。

Swarm 是目前 Docker 官方唯一指定（绑定）的集群管理工具。Docker 1.12 内嵌了 swarm mode 集群管理模式。

Swarm 关键概念

1）Swarm

集群的管理和编排是使用嵌入到 docker 引擎的 SwarmKit，可以在 docker 初始化时启动 swarm 模式或者加入已存在的 swarm

2）Node

一个节点(node)是已加入到 swarm 的 Docker 引擎的实例 当部署应用到集群，你将会提交服务定义到管理节点，接着 Manager

管理节点调度任务到 worker 节点，manager 节点还执行维护集群的状态的编排和群集管理功能，worker 节点接收并执行来自

manager 节点的任务。通常，manager 节点也可以是 worker 节点，worker 节点会报告当前状态给 manager 节点

3）服务（Service）

服务是要在 worker 节点上要执行任务的定义，它在工作者节点上执行，当你创建服务的时，你需要指定容器镜像

4）任务（Task）

任务是在 docekr 容器中执行的命令，Manager 节点根据指定数量的任务副本分配任务给 worker 节点

docker swarm：集群管理，子命令有 init, join, leave, update。（docker swarm –help 查看帮助）

docker service：服务创建，子命令有 create, inspect, update, remove, tasks。（docker service–help 查看帮助）

docker node：节点管理，子命令有 accept, promote, demote, inspect, update, tasks, ls, rm。（docker node –help 查看帮助）

node 是加入到 swarm 集群中的一个 docker 引擎实体，可以在一台物理机上运行多个 node，node 分为：manager nodes管理节点，worker nodes工作节点。

 一、系统环境

　　1）服务器环境

节点名称	IP	操作系统	内核版本
manager	172.16.60.95	CentOs7	4.16.1-1.el7.elrepo.x86_64
node-01	172.16.60.96	CentOs7	4.16.1-1.el7.elrepo.x86_64
node-02	172.16.60.97	CentOs7	4.16.1-1.el7.elrepo.x86_64
node-03	172.16.60.98	CentOs7	4.16.1-1.el7.elrepo.x86_64

　　2）前提条件

• Docker版本1.12+
• 集群节点之间保证TCP 2377、TCP/UDP 7946和UDP 4789端口通信　　　

　　　　TCP端口2377集群管理端口

　　　　TCP与UDP端口7946节点之间通讯端口

　　　　TCP与UDP端口4789 overlay网络通讯端口

二、集群部署

　　1）master创建Swarm（要保存初始化后token，因为在节点加入时要使用token作为通讯的密钥）　　

1 2 3 4 5 6 7 8

[root@master ~] # docker swarm init --advertise-addr 172.16.60.95 Swarm initialized: current node (kfi2r4dw6895z5yvhlbyzfck6)  is  now a manager.   To add a worker to this swarm, run the following command:   docker swarm join  - - token SWMTKN - 1 - 3fzyz5knfbhw9iqlzxhb6dmzdtr0izno9nr7iqc5wid09uglh8 - 0mocmawzvm3xge6s37n5a48fw  172.16 . 60.95 : 2377   To add a manager to this swarm, run  'docker swarm join-token manager'  and  follow the instructions.

--advertise-addr参数表示其它swarm中的worker节点使用此ip地址与manager联系。命令的输出包含了其它节点如何加入集群的命令。

　　使用docker info 或者 docker node ls 查看集群中的相关信息　

1 2 3 4 5 6 7 8 9 10 11 12 13

docker info   ....... Swarm: active NodeID: kfi2r4dw6895z5yvhlbyzfck6 Is Manager: true ClusterID: y2zgs373cg0y6559t675yexcj Managers:  1 Nodes:  1 Orchestration: Task History Retention Limit:  5   .......

　　

　　2）添加节点到swarm集群中

　　所有节点执行　

1	docker swarm join  - - token SWMTKN - 1 - 3fzyz5knfbhw9iqlzxhb6dmzdtr0izno9nr7iqc5wid09uglh8 - 0mocmawzvm3xge6s37n5a48fw  172.16 . 60.95 : 2377

　　在master上查看集群节点的状态

　　

 　　到此Swarm集群就创建好了

　　3）docker  node 命令　

[root@master ~]# docker node --help

Usage:    docker node COMMAND

Manage Swarm nodes

Options:


Commands:
  demote      Demote one or more nodes from manager in the swarm
  inspect     Display detailed information on one or more nodes
  ls          List nodes in the swarm
  promote     Promote one or more nodes to manager in the swarm
  ps          List tasks running on one or more nodes, defaults to current node
  rm          Remove one or more nodes from the swarm
  update      Update a node


# demote
   将管理节点降级为普通节点
# inspect
    查看节点的详细信息
# ls
   列出节点
# promote
   将普通节点升级为管理节点
# ps
   查看运行的任务
# rm
   从swarm集群中删除节点
# update
   改变集群节点状态

[root@master ~]# docker node update --help

Usage:    docker node update [OPTIONS] NODE

Update a node

Options:
      --availability string   Availability of the node ("active"|"pause"|"drain")
      --label-add list        Add or update a node label (key=value)
      --label-rm list         Remove a node label if exists
      --role string           Role of the node ("worker"|"manager")


# 主要使用availability string

# active
    节点状态正常
# pause
    节点挂起、暂停
# drain
    排除节点，比如将master节点排除，不分配任务，只作为管理节点

三、在Swarm中部署服务

　　1)创建服务　

[root@master ~]# docker service --help

Usage:    docker service COMMAND

Manage services

Options:


Commands:
  create      Create a new service
  inspect     Display detailed information on one or more services
  logs        Fetch the logs of a service or task
  ls          List services
  ps          List the tasks of one or more services
  rm          Remove one or more services
  rollback    Revert changes to a service's configuration
  scale       Scale one or multiple replicated service

1 2 3 4 5

[root@master ~] # docker service create --replicas 1 --name hello busybox   #  --replicas : 副本集个数   # --name：服务名称

　　2）查看服务信息

1 2 3

[root@master ~] # docker service ls ID                   NAME                MODE                REPLICAS            IMAGE               PORTS kosznwn4ombx        hello               replicated           0 / 1                  busybox:latest

　　从REPLICAS中能看出这个 hello服务并没有启动起来，0/1 表示 1计划启动的副本数，0实际启动的数量。所以启动失败　　

 

　　

　　3）添加参数

　　在hello服务中busybox只是一个基础镜像，并没有一个持续运行的任务，所以manager会不断重启hello这个服务，所以有好多shutdown的记录。但是可以为其添加一个任务。　

1 2 3 4 5 6 7 8 9 10

[root@master ~] # docker service update --args "ping www.baidu.com" hello hello overall progress:  1  out of  1  tasks 1 / 1 : running   [ = = = = = = = = = = = = = = = = = = = = = = = = = = = = = = = = = = = = = = = = = = = = = = = = = = >] verify: Service converged     # update：更新状态   # --args：增加参数

　　再次查看状态：

　　

　　过滤不正常的状态：　

1 2 3 4 5 6

[root@master ~] # docker service ps -f "desired-state=running" hello ID                   NAME                IMAGE               NODE                DESIRED STATE       CURRENT STATE           ERROR               PORTS yxyivio4mzlg        hello. 1              busybox:latest      master              Running             Running  4  minutes ago      # -f "desired-state=running" : 状态为runngin的服务

　　4）为服务扩容（缩融）scale

　　刚才设置的replicas=1，可以增加副本数量

1 2 3 4 5 6 7 8 9 10 11 12

[root@master ~] # docker service scale hello=4   hello scaled to  4 overall progress:  4  out of  4  tasks 1 / 4 : running   2 / 4 : running   3 / 4 : running   4 / 4 : running   verify: Service converged     # scale : 指定服务的数量

　　

 

　　5）工作节点排除manager，manager只作为管理节点

　　上图中manager也运行了一个服务，将manager排除在外

1 2 3 4 5 6 7 8 9

[root@manager ~] # docker node update --availability drain manager   # node update ： 更改节点状态   # --availability : 三种状态   active: 正常 pause：挂起 drain：排除

　　排除manager后，其上面运行的服务会转移到其他节点　

　　

 

 四、滚动更新服务

　　例如升级服务的镜像版本　

1 2 3 4 5 6 7 8 9 10

[root@manager ~] # docker service create \ >  - - replicas  3  \ >  - - name redis \ >  - - update - delay  10s  \ > redis: 3.0 . 6     # 启动3个副本集的redis   # update-delay 10s ：每个容器依次更新，间隔10s

　　滚动更新：

1 2 3

docker service update  - - image redis: 3.0 . 7  redis   # --image : 指定版本

　　更新完成后新版本和历史记录都能查看

　　

　　查看配置信息：

　　

 

 五、服务更新和回滚策略

　　1）设置策略　　

1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21

[root@manager ~] # docker service create \ - - name my - web \ - - replicas  10  \ - - update - delay  10s  \ - - update - parallelism  2  \ - - update - failure - action  continue  \ - - rollback - parallelism  2  \ - - rollback - monitor  20s  \ - - rollback - max - failure - ratio  0.2  \ nginx: 1.12 . 1     # --update-parallelism 2  ： 每次允许两个服务一起更新   #--update-failure-action continue ： 更新失败后的动作是继续   # --rollback-parallelism 2  ：  回滚时允许两个一起   # --rollback-monitor 20s  ：回滚监控时间20s   # --rollback-max-failure-ratio 0.2 ： 回滚失败率20%

　　如果执行后查看状态不是设置的，可以在update一下，将服务状态设置为自己想要的

1 2 3 4 5

docker service update  - - rollback - monitor  20s   my - web   docker service update  - - rollback - max - failure - ratio  0.2  my - web   # 有两个地方设置数值没有成功，手动设置

　　查看状态：

　　

　　

　　2）服务更新

1	[root@manager ~] # docker service update --image nginx:1.13.5 my-web

　　和上述策略一致，两两更新

　　

 　　更新完成：

　　

　　3）手动回滚（策略是失败会回滚，现在没有失败）

　　刚才nginx版本已经是1.13.5了，现在将其还原到1.12.1　

1	[root@manager ~] # docker service update --rollback my-web

　　

　　手动回滚成功