Consul在linux环境的集群部署


Posted in Servers onApril 08, 2022

1.Consul概念

1.1什么是Consul?

Consul是一种服务网格解决方案,是HashiCorp公司推出的开源组件,由Go语言开发,部署起来很容易,只需要极少的可执行程序和配置。同时Consul也是一个分布式的,高度可用的系统,它附带了一个简单的内置代理,开箱即用,也支持Envoy等第三方代理集成,它还提供了具有服务发现,配置和分段功能。

1.2Consul的特点

●服务发现(Service Discovery):Consul提供了通过DNS或者HTTP接口的方式来注册服务和发现服务。一些应用程序通过Consul很容易的找到它所依赖的服务。
●健康检查(Health Checking):Consul的Client可以提供任何数量的健康检查,这些健康检查与应用服务(“ Web服务器是否返回200 OK”)或本地节点(“内存利用率低于90%”)相关联。操作员可以使用此信息来监视集群的健康状况,通过服务发现组件监控,避免流量路由到健康状况不佳的应用主机中。
●Key/Value存储(Key/Value Store):应用程序可以根据自己的需求使用Consul提供的Key/Value存储。Consul提供了简单易用的HTTP接口,结合其他工具可以实现动态配置(dynamic configuration)、功能标记(feature flagging)、协调(coordination)、领袖选举( leader election)等等功能。
●安全的服务通信(Secure Service Communication):Consul可以为服务生成和分发TLS证书,以建立相互的TLS连接。意图可用于定义允许哪些服务通信。服务分割可以很容易地进行管理,其目的是可以实时更改的,而不是使用复杂的网络拓扑和静态防火墙规则。
●多数据中心(Multi Datacenter):Consul支持开箱即用的多数据中心。这意味着用户不需要担心需要建立额外的抽象层让业务扩展到多个区域。

1.3Consul架构

Consul在linux环境的集群部署

根据这幅图可以看到有两个数据中心,分别为DataCenter1和DataCenter2。Consul拥有对多个数据中心的一流支持,这是比较常见的情况。
在每个数据中心中,我们都有客户端和服务器。最好是有三到五台服务器,这对于在故障情况下的可用性和性能之间取得了平衡,因为随着添加更多的机器,一致性会逐渐变慢。但是,客户端的数量没有限制,可以很容易地扩展到数千或数万。
Consul实现多个数据中心都依赖于gossip protocol协议。这样做有几个目的:首先,不需要使用服务器的地址来配置客户端;服务发现是自动完成的。其次,健康检查故障的工作不是放在服务器上,而是分布式的。这使得故障检测比单纯的心跳模式更具可伸缩性。为节点提供故障检测;如果无法访问代理,则节点可能经历了故障。
每个数据中心中的服务器都是一个Raft对等集的一部分。这意味着它们一起工作来选举单个leader,一个被选中的服务器有额外的职责。领导负责处理所有的查询和事务。事务还必须作为协商一致协议的一部分复制到所有对等方。由于这个需求,当非leader服务器接收到RPC请求时,它会将其转发给集群leader。

1.4Consul的应用场景包括服务发现、服务隔离与服务配置

●服务发现场景中consul作为注册中心,服务地址被注册到consul中以后,可以使用consul提供的dns、http接口查询,consul支持health check。
●服务隔离场景中consul支持以服务为单位设置访问策略,能同时支持经典的平台和新兴的平台,支持tls证书分发,service-to-service加密。
●服务配置场景中consul提供key-value数据存储功能,并且能将变动迅速地通知出去,借助Consul可以实现配置共享,需要读取配置的服务可以从Consul中读取到准确的配置信息。
●Consul可以帮助系统管理者更清晰的了解复杂系统内部的系统架构,运维人员可以将Consul看成一种监控软件,也可以看成一种资产(资源)管理系统。

2.Consul在linux上的集群部署

在consul官网(https://www.consul.io/downloads)上下载linux系统组件的最新版本,示例版本是1.8.5:
Consul在linux环境的集群部署

2.1前期准备

在虚拟机上准备三台CentOS:

CentOS 7-No.1:192.168.113.128
CentOS 7-No.2:192.168.113.129
CentOS 7-No.3:192.168.113.130

通过Xftp(或者其他工具)把解压好的consul组件分别上传到三台linux服务器里面,组件安装目录随自己喜好,我是放在/root目录里面的:
Consul在linux环境的集群部署

2.2集群部署

通过Xshell(或者其他工具)输入命令安装集群,先在三台服务器上切换到安装目录:

cd /root/consul_1.8.5_linux_amd64

然后分别在三台服务器上输入如下命令启动对应的Consul组件:

192.168.113.128:./consul agent -server -bootstrap-expect=3 -data-dir=/root/consul_1.8.5_linux_amd64 -node=server1 -bind=192.168.113.128 -client=0.0.0.0 -datacenter=myservicedc1 -ui
192.168.113.129:./consul agent -server -bootstrap-expect=3 -data-dir=/root/consul_1.8.5_linux_amd64 -node=server2 -bind=192.168.113.129 -client=0.0.0.0 -datacenter myservicedc1
192.168.113.130:./consul agent -server -bootstrap-expect=3 -data-dir=/root/consul_1.8.5_linux_amd64 -node=server3 -bind=192.168.113.130 -client=0.0.0.0 -datacenter myservicedc1

如果报执行权限不够(Permission denied),执行如下命令授予执行权限:

//授予执行权限
chmod +x consul

代理配置参数如下,想要了解更加详细配置参数也可以到官网文档(https://www.consul.io/docs/agent/options)查询:
●-server:此标志用于控制代理是处于服务器还是客户端模式。提供后,代理将充当Consul服务器。
●-bootstrap-expect:集群要求的最少server数量,当低于这个数量,集群即失效。
●-data-dir:data存储目录路径。
●-node:节点id,集群中的每个node必须有一个唯一的名称。默认情况下,Consul使用机器的hostname。
●-bind:监听的ip地址。默认绑定0.0.0.0,可以不指定。表示Consul监听的地址,而且它必须能够被集群中的其他节点访问。Consul默认会监听第一个Private IP,但最好还是提供一个。生产设备上的服务器通常有好几个网卡,所以指定一个不会出错。
●-client:客户端的ip地址,0.0.0.0是指谁都可以访问(不加这个,下面的ui :8500无法访问)。
●-ui:可以访问Consul UI管理界面。
●-config-dir:指定配置文件夹,Consul会加载其中的所有文件。
●-datacenter:指定数据中心名称,默认是dc1。
启动Consul集群组件后,会看到如下信息(No cluster leader):
Consul在linux环境的集群部署
这是因为集群没有指定一个leader,所以需要在128、129跟130服务器上之间指定一个为leader。因为这里我指定了128服务器为leader,所以需要在129、130服务器上输入如下命令加入以128为leader的Consul集群:

./consul join 192.168.113.128

输入命令后会看到如下信息:
Consul在linux环境的集群部署
这样说明129、130服务器的Consul组件加入集群成功!以下再列举下如何查看集群成员跟状况的命令:
●查看集群成员

./consul members

●查看集群状况

./consul operator raft list-peers

在浏览器上输入leader的Consul地址访问:
Consul在linux环境的集群部署
通过上述示例图片可以看到,Consul集群部署成功!

参考文献:
Consul官网

Servers 相关文章推荐
Nginx反向代理多个服务器的实现方法
Mar 31 Servers
基于Nginx实现限制某IP短时间访问次数
Mar 31 Servers
如何利用map实现Nginx允许多个域名跨域
Mar 31 Servers
使用 Apache Superset 可视化 ClickHouse 数据的两种方法
Jul 07 Servers
nginx安装以及配置的详细过程记录
Sep 15 Servers
nginx中封禁ip和允许内网ip访问的实现示例
Mar 17 Servers
Nginx配置根据url参数重定向
Apr 11 Servers
配置nginx负载均衡
May 06 Servers
腾讯云服务器部署前后分离项目之前端部署
Jun 28 Servers
nginx静态资源的服务器配置方法
Jul 07 Servers
搭建zabbix监控以及邮件报警的超级详细教学
Jul 15 Servers
windows10 家庭版下FTP服务器搭建教程
Aug 05 Servers
nginx.conf配置文件结构小结
docker-compose部署Yapi的方法
Apr 08 #Servers
Nginx隐藏式跳转(浏览器URL跳转后保持不变)
Apr 07 #Servers
Nginx动静分离配置实现与说明
Nginx禁止ip访问或非法域名访问
Apr 07 #Servers
Nginx流量拷贝ngx_http_mirror_module模块使用方法详解
Apr 07 #Servers
忘记Grafana不要紧2种Grafana重置admin密码方法详细步骤
Apr 07 #Servers
You might like
php.ini中文版
2006/10/09 PHP
PHP实现用户登录的案例代码
2018/05/10 PHP
JavaScript高级程序设计(第3版)学习笔记11 内建js对象
2012/10/11 Javascript
Extjs4实现两个GridPanel之间数据拖拽功能具体方法
2013/11/21 Javascript
JQuery 图片滚动轮播示例代码
2014/03/24 Javascript
Nodejs实现的一个静态服务器实例
2014/12/06 NodeJs
javascript实现简单的鼠标拖动效果实例
2015/04/10 Javascript
jQuery仅用3行代码实现的显示与隐藏功能完整实例
2015/10/08 Javascript
再谈Javascript中的异步以及如何异步
2016/08/19 Javascript
微信小程序实践之动态控制组件的显示/隐藏功能
2018/07/18 Javascript
React router动态加载组件之适配器模式的应用详解
2018/09/12 Javascript
vue滚动固定顶部及修改样式的实例代码
2019/05/30 Javascript
jquery实现简易验证插件封装
2020/09/13 jQuery
[04:11]DOTA2上海特级锦标赛主赛事首日TOP10
2016/03/03 DOTA
[02:10]探秘浦东源深体育馆 DOTA2 Supermajor不见不散
2018/05/17 DOTA
Python写的Discuz7.2版faq.php注入漏洞工具
2014/08/06 Python
python脚本实现分析dns日志并对受访域名排行
2014/09/18 Python
编写Python脚本把sqlAlchemy对象转换成dict的教程
2015/05/29 Python
快速了解Python开发中的cookie及简单代码示例
2018/01/17 Python
python2 与 python3 实现共存的方法
2018/07/12 Python
python的命名规则知识点总结
2019/10/04 Python
使用python实现哈希表、字典、集合操作
2019/12/22 Python
python连接mysql有哪些方法
2020/06/24 Python
如何解决pycharm调试报错的问题
2020/08/06 Python
python调用百度AI接口实现人流量统计
2021/02/03 Python
css3 给页面加个半圆形导航条主要利用旋转和倾斜样式
2014/02/10 HTML / CSS
blueseventy官网:铁人三项和比赛泳衣
2021/02/06 全球购物
人事助理自荐信
2014/02/02 职场文书
历史专业学生的自我评价
2014/02/28 职场文书
黄金酒广告词
2014/03/21 职场文书
幼儿园五一劳动节活动总结
2015/02/09 职场文书
公司市场部岗位职责
2015/04/15 职场文书
唐山大地震观后感
2015/06/05 职场文书
php中pcntl_fork详解
2021/04/01 PHP
MySQL 分组查询的优化方法
2021/05/12 MySQL
Java数组与堆栈相关知识总结
2021/06/29 Java/Android