Docker容器——Compose编排_consul集群_template模板

docker compose容器编排 

（1）docker compose的前身Fig，它是一个定义及运行多个docker容器的工具
（2）使用docker compose不再需要使用shell脚本启动容器
（3）docker compose非常适合组合使用多个容器进行开发的场景

YAML是一种标记语言很直观的数据序列化格式

文件格式及编写注意事项：

不支持制表符tab键缩进，需要使用空格缩进
通常开头缩进2个空格
字符后缩进1个空格，如冒号，逗号，横杆
用井号注释
如果包含特殊字符用单引号引起来
布尔值必须用引号括起来

docker compose配置常用字段

docker compose常用命令

compose命令说明

基本的使用格式

docker-compose [options] [COMMAND] [ARGS...]

docker-compose选项

--verbose 输出更多调试信息
--version 打印版本并退出
-f，--file FILE使用特定的compose模板文件，默认为docker-compose.yml
-p，--project-name NAME指定项目名称，默认使用目录名称

1，安装docker容器和compose编排工具

[[email protected] ~]# yum install -y > yum-utils \    ##设置源工具
> device-mapper-persistent-data \    ##映射工具
> lvm2   ##映射工具
[[email protected] ~]# yum-config-manager --add-repo https://mirrors.aliyun.com/docker-ce/linux/centos/docker-ce.repo
##加载阿里云镜像源
[[email protected] ~]# yum install docker-ce -y  ##安装docker容器
[[email protected] ~]# systemctl stop firewalld.service   ##关闭防火墙
[[email protected] ~]# setenforce 0
[[email protected] ~]# systemctl start docker   ##开启docker容器
[[email protected] ~]# systemctl enable docker  ##开机自启动
[[email protected] ~]# ps aux | grep docker  ##查看docker进程是否开启
[[email protected] ~]# tee /etc/docker/daemon.json <<-‘EOF‘   ##进行镜像加速
> {
>   "registry-mirrors": ["https://3a8s9zx5.mirror.aliyuncs.com"]
> }
> EOF
{
        "registry-mirrors": ["https://3a8s9zx5.mirror.aliyuncs.com"]
}
[[email protected] ~]# systemctl daemon-reload   ##重载守护进程
[[email protected] ~]# systemctl restart docker   ##重启docker服务
[[email protected] ~]# mount.cifs //192.168.100.3/LNMP-C7 /mnt/
Password for [email protected]//192.168.100.3/LNMP-C7:
[[email protected] ~]# cd /mnt/docker/
[[email protected] docker]# cp -p docker-compose /usr/bin/
##将docker-compose 复制到 /usr/bin/ 目录下
[[email protected] docker]# docker-compose -v   ##查看版本信息
docker-compose version 1.21.1, build 5a3f1a3

2，创建Nginx编排实例

[[email protected] docker]# cd ~
[[email protected] ~]# mkdir compose-nginx  ##创建工作目录
[[email protected] ~]# cd compose-nginx/
[[email protected] compose-nginx]# mkdir nginx   ##创建Nginx的目录
[[email protected] compose-nginx]# cd nginx/
[[email protected] nginx]# vim run.sh  ##编辑启动脚本
#!/bin/bash
/usr/local/nginx/sbin/nginx   ##启动Nginx服务
[[email protected] nginx]# mkdir /abc
[[email protected] nginx]# mount.cifs //192.168.100.3/LNMP-C7 /abc/
Password for [email protected]//192.168.100.3/LNMP-C7:
[[email protected] nginx]# cp /abc/nginx-1.12.2.tar.gz ./   ##将Nginx的压缩包复制到当前目录下
[[email protected] nginx]# vim Dockerfile  ##编写容器文件
FROM centos:7
RUN yum -y update
RUN yum -y install pcre-devel zlib-devel gcc gcc-c++ make
RUN useradd -M -s /sbin/nologin nginx
ADD nginx-1.12.2.tar.gz /usr/local/src
WORKDIR /usr/local/src
WORKDIR nginx-1.12.2
RUN ./configure --prefix=/usr/local/nginx --user=nginx --group=nginx --with-http_stub_status_module && make && make install
ENV PATH /usr/local/nginx/sbin:$PATH
EXPOSE 80
EXPOSE 443
RUN echo "daemon off;">>/usr/local/nginx/conf/nginx.conf
ADD run.sh /run.sh
RUN chmod 755 /run.sh
CMD ["/run.sh"]
[[email protected] nginx]# cd ../
[[email protected] compose-nginx]# vim docker-compose.yml   ##创建compose模板脚本
version: ‘3‘   ##版本
services:      ##服务
    nginx:
        hostname: nginx  ##容器主机名
        build:
            context: ./nginx  ##创建容器的文件路径
            dockerfile: Dockerfile
        ports:
            - 1216:80   ##映射端口
            - 1217:443
        networks:
            - abc      ##网络名称
        volumes:
            - ./wwwroot:/usr/local/nginx/html   ##数据卷关联宿主站点目录
networks:     ##对外申明网络
    abc:
[[email protected] compose-nginx]# docker-compose -f docker-compose.yml up -d
##执行compose脚本开启，-d守护进程
[[email protected] compose-nginx]# cd wwwroot/
[[email protected] wwwroot]# vim index.html
this is test!!!   ##编辑首页内容
[[email protected] wwwroot]# yum install tree -y
[[email protected] wwwroot]# tree ~   ##查看整个所需的内容结构
/root
├── anaconda-ks.cfg
├── compose-nginx
│?? ├── docker-compose.yml   ##编排模板
│?? ├── nginx
│?? │?? ├── Dockerfile   ##容器脚本
│?? │?? ├── nginx-1.12.2.tar.gz    ##安装包
│?? │?? └── run.sh  ##启动服务脚本
│?? └── wwwroot
│??     └── index.html   ##网站首页

3，用浏览器查看网页

docker consul容器服务更新与发现拓扑图

consul概述

consul是开源工具，用于实现分布式系统的服务发现与配置
consul的特性：
（1）consul支持健康检查，允许存储键值对
（2）一致性协议采用Raft算法，用来保证服务的高可用
（3）成员管理和消息广播采用GOSSIP协议，支持ACL访问控制
方便部署，与docker等轻量级容器可无缝配合

建立consul服务

每个提供服务的节点上都要部署和运行consul和agent
consul agent有两种运行模式：server，client
server和client知识consul集群层面的区分，与搭建在cluster之上的应用服务无关

架构拓扑图

实验环境

consul服务端 192.168.13.128 Docker-ce 、Compose 3、Consul、Consul-template
client客户节点 192.168.13.129 Docker-ce 、registrator

1，配置consul服务器

[[email protected] ~]# mkdir consul
[[email protected] ~]# mount.cifs //192.168.100.3/LNMP-C7 /mnt/
Password for [email protected]//192.168.100.3/LNMP-C7:
[[email protected] ~]# cd /mnt/docker/
[[email protected] docker]# cp consul_0.9.2_linux_amd64.zip /root/consul/
[[email protected] docker]# cd /root/consul/
[[email protected] consul]# unzip consul_0.9.2_linux_amd64.zip  ##解压consul
Archive:  consul_0.9.2_linux_amd64.zip
    inflating: consul
[[email protected] consul]# mv consul /usr/bin/   ##便于系统识别
[[email protected] consul]# consul agent \   ##代理
> -server \   ##提供server
> -bootstrap > -ui \   ##web访问界面
> -data-dir=/var/lib/consul-data \   ##数据存储目录
> -bind=192.168.13.128 \   ##本地地址
> -client=0.0.0.0 \   ##所有节点
> -node=consul-server01 &> /var/log/consul.log &   ##指定本地节点名称
[[email protected] consul]# consul members   ##查看群集信息
Node             Address              Status  Type    Build  Protocol  DC
consul-server01  192.168.13.128:8301  alive   server  0.9.2  2         dc1
[[email protected] consul]# consul info | grep leader  ##查看leader
                leader = true
                leader_addr = 192.168.13.128:8300
[[email protected] consul]# systemctl stop firewalld.service   ##关闭防火墙
[[email protected] consul]# setenforce 0

通过httpd api获取集群信息

[[email protected] consul]# curl 127.0.0.1:8500/v1/status/peers                 ##查看群集server成员
[[email protected] consul]# curl 127.0.0.1:8500/v1/status/leaders               ##群集中 Raf leader
[[email protected] consul]# curl 127.0.0.1:8500/v1/catalog/services             ##注册的所有服务
[[email protected] consul]# curl 127.0.0.1:8500/v1/catalog/nodes                ##群集节点详细信息
[[email protected] consul]# curl 127.0.0.1:8500/v1/catalog/nginx                ##查看 nginx 服务信息

2，配置client节点服务器

[[email protected] ~]# docker run -d > --name=registrator \   ##安装registrator自动注册功能
> --net=host \   ##指定网络
> -v /var/run/docker.sock:/tmp/docker.sock \  ##指定数据卷
> --restart=always \
> gliderlabs/registrator:latest \   ##镜像
> -ip=192.168.13.129 \    ##本地地址
> consul://192.168.13.128:8500    ##consul服务器地址

3，在节点服务器上测试发现功能是否正常

[[email protected] ~]# docker run -itd -p 83:80 --name test-01 -h test01 nginx
[[email protected] ~]# docker run -itd -p 84:80 --name test-02 -h test02 nginx
[[email protected] ~]# docker run -itd -p 88:80 --name test-03 -h test03 httpd
[[email protected] ~]# docker run -itd -p 89:80 --name test-04 -h test04 httpd
[[email protected] ~]# systemctl stop firewalld.service ##关闭防火墙
[[email protected] ~]# setenforce 0

4，验证http和Nginx服务是否注册到consul

consul-template概述

是基于 Consul 的自动替换配置文件的应用；
可以查询 Consul 中的服务目录：Key、Key-values等；
特别适合动态的创建配置文件；
是一个守护进程，用于实时查询 consul 集群信息；

1，在consul服务器上配置模板文件

[[email protected] consul]# vim /root/consul/nginx.ctmpl
upstream http_backend {           ##申明后端服务器池
        {{range service "nginx"}}
         server {{.Address}}:{{.Port}};
         {{end}}
}

server {
             listen 1216;   ##代理端口
             server_name localhost 192.168.13.128;   ##本地地址
             access_log /var/log/nginx/kgc.cn-access.log;
             index index.html index.php;
             location / {
                    proxy_set_header HOST $host;    ##头部信息
                    proxy_set_header X-Real-IP $remote_addr;
                    proxy_set_header Client-IP $remote_addr;
                    proxy_set_header X-Fprwarded-For $proxy_add_x_forwarded_for;
                    proxy_pass http://http_backend;  ##跳转后端服务器池
                    }
}

2，在consul服务器上安装配置Nginx

[[email protected] consul]# cd /mnt/
[[email protected] mnt]# tar zxvf nginx-1.12.2.tar.gz -C /opt/   ##解压Nginx
[[email protected] mnt]# cd /opt/nginx-1.12.2
[[email protected] nginx-1.12.2]# yum install gcc gcc-c++ pcre-devel zlib-devel -y ##安装组件
[[email protected] nginx-1.12.2]# ./configure --prefix=/usr/local/nginx  ##配置
[[email protected] nginx-1.12.2]# make && make install
[[email protected] nginx-1.12.2]# vim /usr/local/nginx/conf/nginx.conf  ##修改Nginx配置文件
 17 http {
 18     include       mime.types;
 19     include     vhost/*.conf;   ##指定虚拟主机目录
 [[email protected] nginx-1.12.2]# mkdir /usr/local/nginx/conf/vhost  ##创建虚拟主机目录
[[email protected] nginx-1.12.2]# mkdir /var/log/nginx   ##创建模板中日志文件目录
[[email protected] nginx-1.12.2]# ln -s /usr/local/nginx/sbin/nginx /usr/local/sbin/  ##创建软连接
[[email protected] nginx-1.12.2]# nginx   ##开启Nginx服务
[[email protected] nginx-1.12.2]# netstat -natp | grep nginx

3，在consul服务器上配置并启动templeta

[[email protected] nginx-1.12.2]# cd /mnt/docker/
[[email protected] docker]# cp consul-template_0.19.3_linux_amd64.zip /root/
[[email protected] docker]# cd /root/
[[email protected] ~]# unzip consul-template_0.19.3_linux_amd64.zip  ##安装templeta
Archive:  consul-template_0.19.3_linux_amd64.zip
    inflating: consul-template
[[email protected] ~]# mv consul-template /usr/bin
[[email protected] ~]# consul-template -consul-addr 192.168.13.128:8500 \  ##指定consul本地地址
> -template "/root/consul/nginx.ctmpl:/usr/local/nginx/conf/vhost/kgc.conf:/usr/local/nginx/sbin/nginx -s reload" ##指定template的路径
> --log-level=info   ##日志级别
[[email protected] ~]# cd /usr/local/nginx/conf/vhost/
[[email protected] vhost]# ls
kgc.conf   ##自动生成配置文件模板
upstream http_backend {

         server 192.168.13.129:83;   ##自动生成后端容器服务地址及端口号

         server 192.168.13.129:84;

}

server {
             listen 1216;
             server_name localhost 192.168.13.128;
             access_log /var/log/nginx/kgc.cn-access.log;
             index index.html index.php;
             location / {
                    proxy_set_header HOST $host;
                    proxy_set_header X-Real-IP $remote_addr;
                    proxy_set_header Client-IP $remote_addr;
                    proxy_set_header X-Fprwarded-For $proxy_add_x_forwarded_for;
                    proxy_pass http://http_backend;
                    }
}
##用浏览器查看

##可在后端节点服务器上通过docker logs -f test-01查看来访地址为128

4，在client端创建一个 nginx 容器节点，检测服务发现及配置更新（一定不要关闭防火墙！！！）

[[email protected] ~]# docker run -itd -p:85:80 --name test-05 -h test05 nginx
##继续浏览器访问128服务端
[[email protected] ~]# docker logs -f test-05
192.168.13.128 - - [09/Jan/2020:11:05:39 +0000]
##轮询访问，还是128服务端访问的节点，实现了负载均衡

谢谢阅读！

原文地址：https://blog.51cto.com/14080162/2465662

时间： 2024-08-08 19:34:44

Docker容器——Compose编排_consul集群_template模板的相关文章

docker容器中搭建kafka集群环境

Kafka集群管理.状态保存是通过zookeeper实现,所以先要搭建zookeeper集群 zookeeper集群搭建 一.软件环境: zookeeper集群需要超过半数的的node存活才能对外服务,所以服务器的数量应该是2*N+1,这里使用3台node进行搭建zookeeper集群. 1. 3台linux服务器都使用docker容器创建,ip地址分别为 NodeA:172.17.0.10 NodeB:172.17.0.11 NodeC:172.17.0.12 2. zookeeper的doc

docker 使用compose安装zookeeper集群

新建文件 docker-compose.yml version: '2' services: zookeeper1: image: zookeeper container_name: zk1.cloud ports: - "2181:2181" environment: - SERVER_ID=1 - ADDITIONAL_ZOOKEEPER_1=server.1=0.0.0.0:2888:3888 - ADDITIONAL_ZOOKEEPER_2=server.2=zk2.cloud

在Docker下搭建Spark+HDFS集群

在Docker下搭建Spark+HDFS集群 1.      在VM中安装Ubuntu OS并实现root登录 (http://jingyan.baidu.com/article/148a1921a06bcb4d71c3b1af.html) 安装Vm增强工具 http://www.jb51.net/softjc/189149.html 2.      安装Docker docker安装方法一 ubuntu14.04以上的版本都是自带docker安装包的:所以可以直接安装:但是这个一般不是最先版本

使用docker安装elasticsearch伪分布式集群

docker安装elasticsearch伪分布式集群 0.在安装es之前,首先编辑一下宿主机的内核参数,否则配置es集群的时候极有可能启动不成功: [[email protected] ~]# vim /etc/sysctl.conf vm.max_map_count=655360 [[email protected] ~]# sysctl -p # 加载参数 1.搜索es的镜像,如下第一个就是官方镜像: 2.拉取镜像: [[email protected] ~]# docker pull e

使用Docker Swarm搭建分布式爬虫集群

在爬虫开发过程中,你肯定遇到过需要把爬虫部署在多个服务器上面的情况.此时你是怎么操作的呢?逐一SSH登录每个服务器,使用git拉下代码,然后运行?代码修改了,于是又要一个服务器一个服务器登录上去依次更新? 有时候爬虫只需要在一个服务器上面运行,有时候需要在200个服务器上面运行.你是怎么快速切换的呢?一个服务器一个服务器登录上去开关?或者聪明一点,在Redis里面设置一个可以修改的标记,只有标记对应的服务器上面的爬虫运行? A爬虫已经在所有服务器上面部署了,现在又做了一个B爬虫,你是不是又得依次

(六) Docker 部署 Redis 高可用集群 (sentinel 哨兵模式)

参考并感谢 官方文档 https://hub.docker.com/_/redis GitHub https://github.com/antirez/redis happyJared https://blog.csdn.net/qq_28804275/article/details/80938659 下载redis镜像(不带tag标签则表示下载latest版本) docker pull redis 从github 下载最新的redis.conf,注意重要参数 # 端口 port 6379 #

基于Docker的Consul服务发现集群搭建

原文:基于Docker的Consul服务发现集群搭建 在去年的.NET Core微服务系列文章中,初步学习了一下Consul服务发现,总结了两篇文章.本次基于Docker部署的方式,以一个Demo示例来搭建一个Consul的示例集群,最后给出一个HA的架构示范,也会更加贴近于实际应用环境. 一.示例整体架构 此示例会由一个API Gateway, 一个Consul Client以及三个Consul Server组成,有关Consul的Client和Server这两种模式的Agent的背景知识,请

docker version 1.12+ swarm 集群

初次接触docker 是在2016年初,当时是在一家初创公司 Docker从v1.12.0后开始集成swarm mode(swarmkit),关于swarm的所有操作可以直接使用docker swarm 命令来完成.Docker Swarm是docker原生的用于管理docker集群的工具,内置kv存储功能,不再需要外置的etcd,目前的功能主要有: a. Docker节点集群的管理,包括集群的创建,master,worker节点的加入删除. b. 服务的管理,包括service的创建删除,up

docker+phantomjs+haproxy 搭建phantomjs集群

目标: 搭建一个远程的phantomjs服务器,提供高可用服务,支持并发. 原料: 1.docker环境.docker-compose环境 2.phantomjs镜像: docker.io/wernight/phantomjs 3.haproxy镜像:haproxy:latest docker-compose 项目目录结构 phantomjs/ haproxy/ haproxy.cfg docker-compose.yml 配置文件内容 docker-compose.yml 配置 version