Docker consul 的容器服务更新与发现

目录

一、Consul 简介

1.什么是服务注册与发现

2. 什么是consul

3.consul 架构 

二、部署 consul 服务器（192.168.88.10）

1.建立 Consul 服务

2.查看集群信息

3.通过 http api 获取集群信息

三、registrator服务器（192.168.88.60）

1.安装 Gliderlabs/Registrator

2.测试服务发现功能是否正常

3.验证 http 和 nginx 服务是否注册到 consul

四、consul-template

1.准备 template nginx 模板文件

2.yum安装nginx

3.配置并启动 template

4.访问 template-nginx

5.增加一个 nginx 容器节点

5.1增加一个 nginx 容器节点，测试服务发现及配置更新功能。

5.2查看/usr/local/nginx/conf/vhost/kgc.conf 文件内容

5.3查看三台 nginx 容器日志，请求正常轮询到各个容器节点上

五、consul 多节点

一、Consul 简介

1.什么是服务注册与发现

服务注册与发现是微服务架构中不可或缺的重要组件。起初服务都是单节点的，不保障高可用性，也不考虑服务的压力承载，服务之间调用单纯的通过接口访问。直到后来出现了多个节点的分布式架构，起初的解决手段是在服务前端负载均衡，这样前端必须要知道所有后端服务的网络位置，并配置在配置文件中。这里就会有几个问题：

  • 如果需要调用后端服务A-N，就需要配置N个服务的网络位置，配置很麻烦
  • 后端服务的网络位置变化，都需要改变每个调用者的配置

既然有这些问题，那么服务注册与发现就是解决这些问题的。后端服务A-N可以把当前自己的网络位置注册到服务发现模块，服务发现就以K-V的方式记录下来，K一般是服务名，V就是IP:PORT。服务发现模块定时的进行健康检查，轮询查看这些后端服务能不能访问的了。前端在调用后端服务A-N的时候，就跑去服务发现模块问下它们的网络位置，然后再调用它们的服务。这样的方式就可以解决上面的问题了，前端完全不需要记录这些后端服务的网络位置，前端和后端完全解耦！

2. 什么是consul

consul是google开源的一个使用go语言开发的服务管理软件。支持多数据中心、分布式高可用的、服务发现和配置共享。采用Raft算法，用来保证服务的高可用。内置了服务注册与发现框架、分布一致性协议实现、健康检查、Key/Value存储、多数据中心方案，不再需要依赖其他工具（比如ZooKeeper等）。服务部署简单，只有一个可运行的二进制的包。每个节点都需要运行agent，他有两种运行模式server 和 client。 每个数据中心官方建议需要3或5个server节点以保证数据安全，同时保证server-leader的选举能够正确的进行。

在client模式下，所有注册到当前节点的服务会被转发到server节点，本身是不持久化这些信息。
在server模式下，功能和client模式相似，唯一不同的是，它会把所有的信息持久化到本地，这样遇到故障，信息是可以被保留的。
server-leader是所有server节点的老大，它和其它server节点不同的是，它需要负责同步注册的信息给其它的server节点，同时也要负责各个节点的健康监测。

consul提供的一些关键特性：

  • 服务注册与发现：consul通过DNS或者HTTP接口使服务注册和服务发现变的很容易，一些外部服务，例如saas提供的也可以一样注册。
  • 健康检查：健康检测使consul可以快速的告警在集群中的操作。和服务发现的集成，可以防止服务转发到故障的服务上面。
  • Key/Value存储：一个用来存储动态配置的系统。提供简单的HTTP接口，可以在任何地方操作。
  • 多数据中心：无需复杂的配置，即可支持任意数量的区域。

安装consul是用于服务注册，也就是容器本身的一些信息注册到consul里面，其他程序可以通过consul获取注册的相关服务信息，这就是服务注册与发现。

3.consul 架构 

  • registrator组件：发现应用的网络位置，发送给consul server/client 的自动发现模块进行注册。
  • consul server组件：收集自动发现的信息，将所有需要注册的信息持久化本地。可以通过server-leader将注册信息同步给其它server节点，以及对各节点做健康检查。
  • consul template组件：基于consul的注册信息自动根据配置文件模板生成配置文件并替换。
  • 代理服务器：用nginx做负载均衡器，根据consul template生成的配置进行代理转发。

二、部署 consul 服务器（192.168.88.10）

1.建立 Consul 服务

mkdir /opt/consul
cp consul_0.9.2_linux_amd64.zip /opt/consul
cd /opt/consul
unzip consul_0.9.2_linux_amd64.zip
mv consul /usr/local/bin/

#设置代理，在后台启动 consul 服务端
consul agent \
-server \
-bootstrap \
-ui \
-data-dir=/var/lib/consul-data \
-bind=192.168.88.10 \
-client=0.0.0.0 \
-node=consul-server01 &> /var/log/consul.log &

-server： 以server身份启动。默认是client。
-bootstrap ：用来控制一个server是否在bootstrap模式，在一个数据中心中只能有一个server处于bootstrap模式，当一个server处于 bootstrap模式时，可以自己选举为 server-leader。
-bootstrap-expect=2 ：集群要求的最少server数量，当低于这个数量，集群即失效。
-ui ：指定开启 UI 界面，这样可以通过 http://localhost:8500/ui 这样的地址访问 consul 自带的 web UI 界面。
-data-dir ：指定数据存储目录。
-bind ：指定用来在集群内部的通讯地址，集群内的所有节点到此地址都必须是可达的，默认是0.0.0.0。
-client ：指定 consul 绑定在哪个 client 地址上，这个地址提供 HTTP、DNS、RPC 等服务，默认是 127.0.0.1。
-node ：节点在集群中的名称，在一个集群中必须是唯一的，默认是该节点的主机名。
-datacenter ：指定数据中心名称，默认是dc1。

netstat -natp | grep consul

启动consul后默认会监听5个端口：
8300：replication、leader farwarding的端口，集群内数据的读写和复制
8301：lan cossip的端口，单个数据中心gossip协议通讯
8302：wan gossip的端口，跨数据中心gossip协议通讯
8500：web ui界面的端口，提供获取服务列表、注册服务、注销服务等HTTP接口；提供UI服务
8600：使用dns协议查看节点信息的端口，采用DNS协议提供服务发现功能

2.查看集群信息

#查看members状态
consul members

#查看集群状态
consul operator raft list-peers

#查看leader状态
consul info | grep leader

3.通过 http api 获取集群信息

curl 192.168.88.10:8500/v1/status/peers 			#查看集群server成员
curl 192.168.88.10:8500/v1/status/leader			#集群 server-leader
curl 192.168.88.10:8500/v1/catalog/services			#注册的所有服务
curl 192.168.88.10:8500/v1/catalog/nginx			#查看 nginx 服务信息
curl 192.168.88.10:8500/v1/catalog/nodes			#集群节点详细信息

#访问ui页面
http://192.168.88.10:8500/ui

三、registrator服务器（192.168.88.60）

1.安装 Gliderlabs/Registrator

Gliderlabs/Registrator 可检查容器运行状态自动注册，还可注销 docker 容器的服务到服务配置中心。目前支持 Consul、Etcd 和 SkyDNS2。

docker pull gliderlabs/registrator:latest 

docker run -d \
--name=registrator \
--net=host \
-v /var/run/docker.sock:/tmp/docker.sock \
--restart=always \
gliderlabs/registrator:latest \
--ip=192.168.88.60 \
consul://192.168.88.10:8500

--net=host ：把运行的docker容器设定为host网络模式。
-v /var/run/docker.sock:/tmp/docker.sock ：把宿主机的Docker守护进程(Docker daemon)默认监听的Unix域套接字挂载到容器中。
--restart=always ：设置在容器退出时总是重启容器。
--ip ：刚才把network指定了host模式，所以我们指定ip为宿主机的ip。
consul ：指定consul服务器的IP和端口。

2.测试服务发现功能是否正常

docker run -itd -p:83:80 --name test-01 -h test01 nginx
docker run -itd -p:84:80 --name test-02 -h test02 nginx   	#-h：设置容器主机名

3.验证 http 和 nginx 服务是否注册到 consul

浏览器中，输入 http://192.168.80.15:8500，在 Web 页面中“单击 NODES”，然后单击“consurl-server01”，会出现 3 个服务。

//在consul服务器使用curl测试连接服务器
curl 192.168.88.10:8500/v1/catalog/services 
{"consul":[],"httpd":[],"nginx":[]}

四、consul-template

Consul-Template是基于Consul的自动替换配置文件的应用。Consul-Template是一个守护进程，用于实时查询Consul集群信息，并更新文件系统上任意数量的指定模板，生成配置文件。更新完成以后，可以选择运行 shell 命令执行更新操作，重新加载 Nginx。

Consul-Template可以查询Consul中的服务目录、Key、Key-values 等。这种强大的抽象功能和查询语言模板可以使 Consul-Template 特别适合动态的创建配置文件。例如：创建Apache/Nginx Proxy Balancers 、 Haproxy Backends等。

1.准备 template nginx 模板文件

//在consul服务器上操作
vim /opt/consul/nginx.ctmpl
#定义nginx upstream一个简单模板
upstream http_backend {
  {{range service "nginx"}}
   server {{.Address}}:{{.Port}};
   {{end}}
}

#定义一个server，监听8000端口，反向代理到upstream
server {
    listen 8000;
    server_name www.my.com;
    access_log /var/log/nginx/my.com-access.log;					#修改日志路径
 
    location / {
        proxy_set_header HOST $host;
        proxy_set_header X-Real-IP $remote_addr;
        proxy_set_header Client-IP $remote_addr;
        proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;
        proxy_pass http://http_backend;
    }
}

2.yum安装nginx

vim /etc/yum.repos.d/nginx.repo
[nginx-stable]
name=nginx stable repo
baseurl=http://nginx.org/packages/centos/7/$basearch/
gpgcheck=0
enabled=1

yum -y install nginx

systemctl start nginx

3.配置并启动 template

unzip consul-template_0.19.3_linux_amd64.zip -d /opt/
cd /opt/
mv consul-template /usr/local/bin/

//在前台启动 template 服务，启动后不要按 ctrl+c 中止 consul-template 进程。
consul-template --consul-addr 192.168.88.10:8500 \
--template "/opt/consul/nginx.ctmpl:/etc/nginx/conf.d/my.conf:/usr/sbin/nginx -s reload" \
--log-level=info

//另外打开一个终端查看生成配置文件
vim /etc/nginx/conf.d/my.conf
upstream http_backend {
  
   server 192.168.80.10:83;
   
   server 192.168.80.10:84;
   
}

server {
  listen 8000;
  server_name localhost 192.168.80.15;
  access_log /var/log/nginx/kgc.cn-access.log;
  index index.html index.php;
  location / {
    proxy_set_header HOST $host;
    proxy_set_header X-Real-IP $remote_addr;
    proxy_set_header Client-IP $remote_addr;
    proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;
    proxy_pass http://http_backend;
  }
}

4.访问 template-nginx

docker ps -a

docker exec -it test-01 bash
echo "this is test1 web" > /usr/share/nginx/html/index.html

docker exec -it test-02 bash
echo "this is test2 web" > /usr/share/nginx/html/index.html

浏览器访问：http://192.168.88.70:8000/ ，并不断刷新。

5.增加一个 nginx 容器节点

5.1增加一个 nginx 容器节点，测试服务发现及配置更新功能。

docker run -itd -p:85:80 --name test-05  nginx:centos

//观察 template 服务，会从模板更新/usr/local/nginx/conf/vhost/kgc.conf 文件内容，并且重载 nginx 服务。

5.2查看/usr/local/nginx/conf/vhost/kgc.conf 文件内容

cat /usr/local/nginx/conf/mycom.conf

5.3查看三台 nginx 容器日志，请求正常轮询到各个容器节点上

docker logs -f test-01
docker logs -f test-02
docker logs -f test-05

五、consul 多节点

//添加一台已有docker环境的服务器192.168.88.20/24加入已有的群集中
consul agent \
-server \
-ui \
-data-dir=/var/lib/consul-data \
-bind=192.168.88.20 \
-client=0.0.0.0 \
-node=consul-server02 \
-enable-script-checks=true  \
-datacenter=dc1  \
-join 192.168.88.10 &> /var/log/consul.log &

-enable-script-checks=true ：设置检查服务为可用
-datacenter : 数据中心名称
-join ：加入到已有的集群中

本文来自互联网用户投稿，该文观点仅代表作者本人，不代表本站立场。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如若转载，请注明出处：/a/50577.html

如若内容造成侵权/违法违规/事实不符，请联系我们进行投诉反馈qq邮箱809451989@qq.com，一经查实，立即删除！

相关文章

mac 删除自带的ABC输入法保留一个搜狗输入法，搜狗配置一下可以减少很多的敲击键盘和鼠标点击次数

mac 删除自带的ABC输入法保留一个搜狗输入法，搜狗配置一下可以减少很多的敲击键盘和鼠标点击次数

0. 背景 对于开发者来说，经常被中英文切换输入法所困扰，我这边有一个方法，删除mac默认的ABC输入法 仅仅保留搜狗一个输入法，配置一下搜狗输入：哪些指定为英文输入，哪些指定为中文输入（符号也可…
阅读更多...
Intel RealSense D455(D400系列) Linux-ROS 安装配置（亲测可用）

Intel RealSense D455(D400系列) Linux-ROS 安装配置（亲测可用）

硬件：Intel RealSense D455 系统：Ubuntu 18.04 Part_1: 安装librealsense SDK2.0 1.1 注册密钥 sudo apt-key adv --keyserver keyserver.ubuntu.com --recv-key F6E65AC044F831AC80A06380C8B3A55A6F3EFCDE或者 sudo apt-key adv --keyserver hkp:/…
阅读更多...
【已解决】电脑连上网线但无法上网

【已解决】电脑连上网线但无法上网

文章目录 案例情况解决方案必要的解决方法简要概括详细步骤1、打开控制面板2、打开更改适配器设置3、 找Internet协议版本44、修改配置 可能有用的解决方法 问题解决原理Internet 协议版本 4（TCP/IPv4）确保IP地址和DNS服务器设置为自动获取 案例情况 网…
阅读更多...
小程序UV：衡量用户规模与活跃度的重要指标

小程序UV：衡量用户规模与活跃度的重要指标

什么是UV UV是Unique Visitor（独立访客）的缩写，指的是在特定时间段内访问某个网站、应用或平台的独立用户数量。UV是根据设备、IP地址、Cookie等来识别不同的用户，对于相同的用户多次访问，只计算为一个UV。UV是衡量网…
阅读更多...
redis的四种模式优缺点

redis的四种模式优缺点

redis简介 Redis是一个完全开源的内存数据结构存储工具，它支持多种数据结构，以及多种功能。Redis还提供了持久化功能，可以将数据存储到磁盘上，以便在重启后恢复数据。由于其高性能、可靠性和灵活性，Redis被广泛应用于…
阅读更多...
力扣天天练--week3-LeetCode75

力扣天天练--week3-LeetCode75

topic75-9-t443:压缩字符串 题目描述： 给你一个字符数组 chars ，请使用下述算法压缩： 从一个空字符串 s 开始。对于 chars 中的每组 连续重复字符 ： 如果这一组长度为 1 ，则将字符追加到 s 中。 否则，需…
阅读更多...
【图像处理】使用自动编码器进行图像降噪（改进版）

【图像处理】使用自动编码器进行图像降噪（改进版）

阿里雷扎凯沙瓦尔兹 一、说明 自动编码器是一种学习压缩和重建输入数据的神经网络。它由一个将数据压缩为低维表示的编码器和一个从压缩表示中重建原始数据的解码器组成。该模型使用无监督学习进行训练，旨在最小化输入和重建输出之间的差异。自动编码器可用于降维、…
阅读更多...
Linux之Shell 编程详解（一）

Linux之Shell 编程详解（一）

第 1 章 Shell 概述 1）Linux 提供的 Shell 解析器有 [atguiguhadoop101 ~]$ cat /etc/shells /bin/sh /bin/bash /usr/bin/sh /usr/bin/bash /bin/tcsh /bin/csh2）bash 和 sh 的关系 [atguiguhadoop101 bin]$ ll | grep bash -rwxr-xr-x. 1 root root …
阅读更多...
Ubuntu-解决包依赖关系

Ubuntu-解决包依赖关系

Ubuntu-解决包依赖关系的办法 安装软件包的时候，有时会遇到类似下图的依赖问题，无法正常安装，下面提供三种方法解决依赖问题。 1.可以尝试用下面方法处理依赖问题，紧跟前一条安装命令后面输入下面命令，然后再执行安装…
阅读更多...
【学习笔记】行为识别SOTA方法比较

【学习笔记】行为识别SOTA方法比较

这里写目录标题 前言方法1 基于CNN的方法Slow-fast： 2 基于Vision-Transformer的方法Video TimeSformer :Video Swin Transformer : 3、基于自监督的方法VideoMAE： 4、基于多模态的方法Intern video: 前言 常用行为识别数据集包括：HMDB-51、…
阅读更多...
windows使用多账户Git，多远程仓库版本管理

windows使用多账户Git，多远程仓库版本管理

1 清除全局配置 git config --global --list // 看一下是否配置过user.name 和 user.email git config --global --unset user.name // 清除全局用户名 git config --global --unset user.email // 清除全局邮箱 2 本地仓库，每个远程对应的本地仓库目录下执行 $…
阅读更多...
AddForce

AddForce

ForceMode： Force：关注的是力整体 Impulse：关注的是冲量，与质量相关 VelocityChange：关注的是速度，与质量无关 Acceleration：关注的是加速度，与质量无关 public void AddForce…
阅读更多...
基于FasterRCNN深度学习网络的车辆检测算法matlab仿真

基于FasterRCNN深度学习网络的车辆检测算法matlab仿真

目录 1.算法运行效果图预览 2.算法运行软件版本 3.部分核心程序 4.算法理论概述 5.算法完整程序工程 1.算法运行效果图预览 2.算法运行软件版本 MATLAB2022A 3.部分核心程序 ....................................................................... % 训练Faster R-…
阅读更多...
hw技战法整理参考

hw技战法整理参考

目录 IP溯源反制 账户安全策略及预警 蜜罐部署联动方案
阅读更多...
数据结构【查找】

数据结构【查找】

第八章 查找 提前了解： 1、关键字： 若关键字能唯一标识一个数据元素，则关键字称为主关键字；若能标识若干个数据元素的关键字称为次关键字； 2、查找（检索）：顾名思义，给定…
阅读更多...
GitHub上怎么寻找项目？

GitHub上怎么寻找项目？

前言 下面由我精心整理的关于github项目资源搜索的一些方法，这些方法可以帮助你更快更精确的搜寻到你需要的符合你要求的项目。 写文章不易，如果这一篇问文章对你有帮助，求点赞求收藏~ 好，下面我们直接进入正题——> 首先我…
阅读更多...
尚医通06：数据字典+EasyExcel+mongodb

尚医通06：数据字典+EasyExcel+mongodb

内容介绍 1、数据字典列表前端 2、EasyExcel介绍、实例 3、数据字典导出接口、前端 4、数据字典导入接口、前端 5、数据字典添加redis缓存 6、MongoDB简介 7、MongoDB安装 8、MongoDB基本概念 数据字典列表前端 1、测试问题 （1）报错日志 &am…
阅读更多...
升讯威在线客服系统是如何实现对 IE8 完全完美支持的（怎样从 WebSocket 降级到 Http）【干货】

升讯威在线客服系统是如何实现对 IE8 完全完美支持的（怎样从 WebSocket 降级到 Http）【干货】

简介 升讯威在线客服与营销系统是基于 .net core / WPF 开发的一款在线客服软件，宗旨是： 开放、开源、共享。努力打造 .net 社区的一款优秀开源产品。 完整私有化包下载地址 💾 https://kf.shengxunwei.com/freesite.zip 当前版本信息 发布…
阅读更多...
QTDAY3

QTDAY3

闹钟 头文件 #ifndef WIDGET_H #define WIDGET_H#include <QWidget> #include <QTimerEvent> //定时器事件处理函数 #include <QTime> //时间类 #include <QString> #include <QPushButton> #include <QTextToSpeech> #include …
阅读更多...
【嵌入式学习笔记】嵌入式基础9——STM32启动过程

【嵌入式学习笔记】嵌入式基础9——STM32启动过程

1.MAP文件浅析 1.1.MDK编译后生成的中间过程文件 1.2.Map文件构成&#xff1a; 程序段交叉引用关系&#xff08;Section Cross References&#xff09;&#xff1a;描述各文件之间函数调用关系删除映像未使用的程序段&#xff08;Removing Unused input sections from the im…
阅读更多...
最新文章

Copyright @ 2022~2023