MySQL数据库⾼可⽤HA实现小结


Posted in MySQL onJanuary 22, 2022

MySQL数据库⾼可⽤HA实现

1、 数据库⾼可⽤分析

⾼可⽤的衡量标准
数据库实现⾼可⽤的⼏种⽅式
MySQL数据库实现⾼可⽤

2、MySQL主从复制的容灾处理

MySQL⽀持的复制⽅式分析
主从场景切换⽅式
主从结构如何实现容灾

1. 什么是数据库⾼可⽤

1.1. 什么是⾼可⽤集群

N+1:N就是集群,1就是⾼可⽤,⾼可⽤的核⼼就是冗余,集群是保证服务最低使⽤标准的

1.2. ⾼可⽤集群的衡量标准

⼀般是通过系统的可靠性和可维护性来衡量的
MTTF:平均⽆故障时间,这是衡量可靠性的
MTTR:衡量系统的可维护性的
HA=MTTF/(MTTF+MTTR)*100%
SLA:99.999%:表示⼀年故障时间/宕机时间不超过6分钟

1.3. 实现⾼可⽤的三种⽅式

主从⽅式(⾮对称)
    这种⽅式的组织形式通常都是通过两个节点和⼀个或多个服务器,其中⼀台作为主节点
(active),另⼀台作为备份节点(standy),备份节点应该随时都在检测主节点的健康状况,当
    主节点发⽣故障,服务会⾃动切换到备份节点保障服务正常运⾏
对称⽅式
    两个节点,都运⾏着不同的服务且相互备份,相互检测对⽅的健康,当任意⼀个节点发⽣故障,这
    个节点上的服务就会⾃动切换到另⼀节点
多机⽅式
    包含多个节点多个服务,每个节点都要备份运⾏不同的服务,出现问题⾃动迁移

1.4. MySQL数据的⾼可⽤实现

1.4.1. 主从⽅式(⾮对称)

资源:两台同版本的MySQL数据库
主从实现的内部运⾏原理和机制
    First Step:主数据库服务器会把数据的修改记录记录进binlog⽇志,binlog⼀定要打开
    Second Step:从库的I/O进⾏读取主库的binlog内容后存⼊⾃⼰的Relay Log中继⽇志中,这
    个I/O线程会和主库建⽴⼀个普通的客户端连接,然后主库启动⼀个⼆进制转储线程,I/O线
    程通过转储线程读取binlog更新事件,同步完毕后I/O进⼊sleep,有新的更新会再唤醒
            Relay Log和Binlog的格式是⼀样的,可以⽤mysqlbinlog读取,也可show
            mysql> show relaylog events in 'relay-log.000001';
            ⽬前数据库有两种复制⽅式
                    binlog⽇志点position
                    GTID⽅式也要依赖binlog
    第三步:从服务器的SQL进程会从Relay Log中读取事件并在从库中重放
            从服务器执⾏重放操作时是可以在配置⾥声明是否写⼊服务器的binlog⽇志中

MySQL数据库⾼可⽤HA实现小结

1.4.2. 配置主从服务步骤

1.4.2.1. Binlog的⽇志点⽅式配置主从同步

配置主从服务器参数
在Master服务器上创建⽤于复制并授权的数据库账号
备份Master数据库并初始化Slave服务器数据
启动复制链路

Master服务器配置

chown -R mysql:mysql /usr/local/binlog/
#配置⽂件
server_id=163
log_bin=/usr/local/binlog/mysql-bin
12345

Slave服务器配置

server_id=196
log_bin=/usr/local/binlog/mysql-bin
relay_log=/usr/local/relaylog/relay-bin
#当slave宕机后,如果relay log损坏了,导致⼀部分中继⽇志没有处理,则放弃所有未完成的,
重新获取执⾏,保证完整性
relay_log_recovery=1 #让从库数据只读,super⽤户,super_read_only=on
read_only=on
#从库的复制链路服务不会随数据库重启⽽重启,需要⼿动启动
skip_slave_start=on
#确保数据⼀致性,通过innoDB的崩溃恢复机制来保护哦
master_info_repository=TABLE
relay_log_info_repository=TABLE
#select * from mysql.slave_master_info;
#select * from mysql.slave_relay_log_info;

主库授权

mysql> use msyql;
mysql> grant replication slave on *.* to 'syncuser'@'192.168.0.103'
identified by '123456';
mysql> flush privileges;
set global validate_password_policy=LOW;
set global validate_password_length=6;

初始化数据

mysqldump -uroot -p123456 --master-data=2 --single-transaction --routines -
-triggers --events --databases mydb > mydb.sql

创建复制链路

mysql>
CHANGE MASTER TO
MASTER_HOST='192.168.0.102',
MASTER_PORT=3306,
MASTER_USER='syncuser',
MASTER_PASSWORD='123456',
MASTER_LOG_FILE='mysql-bin.000001',
MASTER_LOG_POS=8122;
mysql> start slave;
mysql> show slave status \G;

从库的binlog是否写⼊?

默认情况下是不写⼊的:因为写⼊binlog会消耗I/O,所以性能会下降,如果需要在从库上恢复数
据就到Relay Log⾥进⾏导出处理
直接在从库上操作更⾏语句则会写⼊binlog
如果就是需要写⼊?在从库的my.cnf : log_slave_updates=on #开启同步并写⼊binlog
开启同步并写⼊binlog应⽤于从到从的情况

问题:只同步其中三个表

#Master配置⽂件
#不同步哪些数据库
binlog-ignore-db=mysql
binlog-ignore-db=test
binlog-ignore-db=information_schema
#同步哪些库
binlog-do-db=game
binlog-do-db=mydb

#Slave配置⽂件
#复制哪些数据库
replicate-do-db=mydb
replicate-do-db=game
#不复制哪些数据库
replicate-ignore-db=mysql
replicate-ignore-db=test

--replicate-wild-ignore-table=foo%.bar% 不复制使⽤表名称以开头foo且表名称以开头
的表的更新bar

1.4.2.1. GTID的⽅式来进⾏主从复制

不同点
	主从服务器的参数有不同的地⽅

#在上⾯的基础上,需要给主从服务器都加上
gtid_mode=on
enforce_gtid_consistency=on #开启强制GTID的⼀致性确保事务		

GTID下复制链路的启动
mysql>
CHANGE MASTER TO
MASTER_HOST='192.168.0.102',
MASTER_PORT=3306,
MASTER_USER='syncuser',
MASTER_PASSWORD='123456',
MASTER_AUTO_POSITION=1;

启动GTID后以下数据库操作不可⽤
	create table tableName.... select
	在⼀个事务中创建临时表
	在⼀个transaction中更新innoDB表和myisam表

2. 数据主从复制⽅式的容灾处理

2.1. MySQL⽀持的复制格式

2.1.1. 基于语句的复制(statement)

优点:记录少,只记录执⾏语句,易懂
    缺点:insert into table1(create_time) values(now()),这个now就不是当时的时间了

2.1.2. 基于⾏复制(row)

优点:⼏乎没有基于⾏复制⽆法处理的场景
    缺点:数据量太⼤了

2.1.3. 混合类型的复制(MIXED)

mixed格式默认采⽤statement,⽐如⽤到UUID(),ROW_COUNT()

2.1. MySQL主从复制模式

异步复制:MySQL默认就是异步复制,性能最好,但主从复制的数据不⼀致性概率最⼤
同步复制:当客户端发过来⼀个请求后,只有当所有的从库都写到Relay Log中,才回复给前端事
务完成,性能最差,但⼀致性很强
半同步复制:⾄少⼀个从库完成Relay Log写⼊后就返回事务完成给前端

主从上都要安装
mysql> install plugin rpl_semi_sync_master soname='semisync_master.so'
rpl_semi_sync_master_enabled
rpl_semi_sync_master_timeout #单位是毫秒,如果主库等待从库回复超过这个时间就⾃动切换
为异步

到此这篇关于MySQL数据库⾼可⽤HA实现的文章就介绍到这了,更多相关MySQL数据库⾼可⽤HA内容请搜索三水点靠木以前的文章或继续浏览下面的相关文章希望大家以后多多支持三水点靠木!

MySQL 相关文章推荐
mysql 8.0.24版本安装配置方法图文教程
May 12 MySQL
详解mysql三值逻辑与NULL
May 19 MySQL
MySQL 8.0 之不可见列的基本操作
May 20 MySQL
浅谈mysql增加索引不生效的几种情况
Jun 23 MySQL
MySQL对数据表已有表进行分区表的实现
Nov 01 MySQL
MySQL派生表联表查询实战过程
Mar 20 MySQL
MySQL库表太大怎么办? 数据库分库分表项目实践
Apr 11 MySQL
mysql性能优化以及配置连接参数设置
May 06 MySQL
mysql如何查询连续记录
May 11 MySQL
Mysql 一主多从的部署
May 20 MySQL
MySQL8.0 Undo Tablespace管理详解
Jun 16 MySQL
weblogic服务建立数据源连接测试更新mysql驱动包的问题及解决方法
Jan 22 #MySQL
解决Mysql多行子查询的使用及空值问题
Jan 22 #MySQL
如何避免mysql启动时错误及sock文件作用分析
Jan 22 #MySQL
教你使用VS Code的MySQL扩展管理数据库的方法
Jan 22 #MySQL
彻底解决MySQL使用中文乱码的方法
Jan 22 #MySQL
mysql分组后合并显示一个字段的多条数据方式
Jan 22 #MySQL
MySQL中int (10) 和 int (11) 的区别
Jan 22 #MySQL
You might like
PHP开发大型项目的一点经验
2006/10/09 PHP
php显示页码分页类的封装
2017/06/08 PHP
tp5框架内使用tp3.2分页的方法分析
2019/05/05 PHP
THREE.JS入门教程(2)着色器-上
2013/01/24 Javascript
js格式化货币数据实现代码
2013/09/04 Javascript
js快速排序的实现代码
2013/12/08 Javascript
理解jQuery stop()方法
2014/11/21 Javascript
jQuery中的jQuery()方法用法分析
2014/12/27 Javascript
AngularJS基础 ng-csp 指令详解
2016/08/01 Javascript
使用Node.js给图片加水印的方法
2016/11/15 Javascript
JavaScript Ajax实现异步通信
2016/12/14 Javascript
小程序开发实战:实现九宫格界面的导航的代码实现
2017/01/19 Javascript
详解Node.js 命令行程序开发教程
2017/06/07 Javascript
基于jquery实现五星好评
2017/11/18 jQuery
Vue实现web分页组件详解
2017/11/28 Javascript
mongodb初始化并使用node.js实现mongodb操作封装方法
2019/04/02 Javascript
详解vue 在移动端体验上的优化解决方案
2019/05/20 Javascript
vue 集成jTopo 处理方法
2019/08/07 Javascript
浅谈Vue.js之初始化el以及数据的绑定说明
2019/11/14 Javascript
JavaScript数组去重实现方法小结
2020/01/17 Javascript
jQuery实现简单评论区功能
2020/10/26 jQuery
linux环境下python中MySQLdb模块的安装方法
2017/06/16 Python
Python实现手写一个类似django的web框架示例
2018/07/20 Python
python抓取京东小米8手机配置信息
2018/11/13 Python
python 去除二维数组/二维列表中的重复行方法
2019/01/23 Python
Python人脸识别第三方库face_recognition接口说明文档
2019/05/03 Python
python字典的常用方法总结
2019/07/31 Python
python之yield和Generator深入解析
2019/09/18 Python
Python-openCV读RGB通道图实例
2020/01/17 Python
PyQt5实现画布小程序
2020/05/30 Python
大学英语专业求职信
2014/06/21 职场文书
创先争优标语
2014/06/27 职场文书
科技工作者先进事迹
2014/08/16 职场文书
2014年党员评议表自我评价
2014/09/27 职场文书
不尊敬老师的检讨书
2014/12/21 职场文书
《黑岩★★射手 DAWN FALL》BD发售宣传CM公开
2022/04/04 日漫