MySQL数据库(八)-- MMM高可用集群搭建

一、MySQL-MMM概述

1、MySQL-MMM的概念

MMM(Master-Master replication manager for MvSQL,MySQL主主复制管理器)是一套支持双主故障切换和双主日常管理的脚本程序。 MMM 使用 Perl 语言开发,主要用来监控和管理 MySQL Master-Master (双主)复制,虽然叫做双主复制,但是业务上同一时刻只允许对一个主进行写入,另一台备选主上提供部分读服务,以加速在主主切换时备选主的预热 可以说MMM这套脚本程序一方面实现了故障切换的功能,另一方面其内部附加的工具脚本也可以实现多个 Slave 的 read 负载均衡。

2、MySQL-MMM的优缺点以及应用场景

MMM提供了自动和手动两种方式移除一组服务器中复制延迟较高的服务器的虚拟ip,同时它还可以备份数据,实现两节点之间的数据同步等。由于MMM无法完全保证数据的一致性,所以MMM适用于对数据的一致性要求不是很高,但是又想最大程度地保证业务可用性的场景。

优点:高可用性,扩展性好,出现故障自动切换,对于主主同步,在同一时间只提供一台数据库写操作,保证 的数据的一致性。当主服务器挂掉以后,另一个主立即接管,其他的从服务器能自动切换,不用人工干预。

缺点:monitor节点是单点,不过这个你也可以结合keepalived或者haertbeat做成高可用;至少三个节点,对主机的数量有要求,需要实现读写分离,还需要在前端编写读写分离程序。在读写非常繁忙的业务系统下表现不是很 稳定,可能会出现复制延时、切换失效等问题。MMM方案并不太适应于对数据安全性要求很高,并且读、写 繁忙的环境中。

使用场景: MMM的适用场景为数据库访问量大,并且能实现读写分离的场景。

3、MySQL-MMM工作原理

MMM是一套灵活的脚本程序,基于perl实现,用来对 mysql replication 进行监控和故障迁移,并能管理 MySQL Master-Master 复制的配置。 关于 MMM 高可用架构的说明如下:

  • mmm_mon:监控进程,负责所有的监控工作,决定和处理所有节点角色活动。此脚本需要在监控主机上运行。

  • mmm_agent:运行在每个MySQL服务器上的代理进程,完成监控的探针工作和执行简单的远端服务设置。此脚本需要在被监管机上运行。

  • mmm_control:一个简单的脚本,提供管理 mmm_mon 进程的命令。 mysql-mmm 的监管端会提供多个虚拟 IP(VIP),包括一个可写 VIP,多个可读 VIP,通过监管的管理,这些 IP 会绑定在可用 MySQL 之上,当某一台 MySQL 宕机时,监管会将 VIP 迁移至其他 MySQL。 在整个监管过程中,需要在 MySQL 中添加相关授权用户,以便让 MySQL 可以支持监控主机的维护。 授权的用户包括一个 mmm_monitor 用户和一个 mmm_agent 用户。

MySQL数据库(八)-- MMM高可用集群搭建

4、高可用的概念 指的是通过尽量缩短因日常维护操作(计划)和突发的系统崩溃(非计划)所导致的停机时间,以提高系统和应用的可用性。

5、单点故障的概念 指一个系统提供相同功能的组件只有一个,如果失效,会影响整个系统的正常使用

二、搭建 MySQL MMM的操作步骤

1、环境准备 MMM服务器角色对应关系:

本文环境:

主库:CentOS6.7 x64 192.168.237.10 mysql-5.7
主库:CentOS6.7 x64 192.168.237.20 mysql-5.7
备库:CentOS6.7 x64 192.168.237.30 mysql-5.7
备库:CentOS6.7 x64 192.168.237.40 mysql-5.7
管理:CentOS6.7 x64 192.168.237.50

 

### MMM服务器角色对应关系:

主机 IP Hostname server id
node1(主1) 192.168.237.10 db1 10
node1(主2) 192.168.237.20 db2 11
node1(从1) 192.168.237.30 db3 20
node1(从2) 192.168.237.40 db4 21
node1(监控) 192.168.237.50 monitor

### 配置完成后,使用下面的VIP访问MySQL Cluster(下面是虚拟ip)

ip role
192.168.237.100 writer
192.168.237.101 reader
192.168.237.102 reader

### 数据库同步需要的用户

function description privileges
monitor user mmm监控用于对mysql服务器进程健康检查 REPLICATION  CLIENT
agent user mmm代理用来更改只读模式,复制主服务器等 SUPER,  REPLICATION CLIENT, PROCESS
agent user 用于复制 REPLICATION SLAVE

### 所有服务器关闭防火墙

systemctl stop firewalld
setenforce 0

 

systemctl stop firewalld
setenforce 0

---------------------- 搭建 MySQL 多主多从模式 ----------------------
//修改 master01 配置文件
vim /etc/my.cnf
......
[mysqld]
user = mysql
basedir = /usr/local/mysql
datadir = /usr/local/mysql/data
port = 3306
character_set_server=utf8
pid-file = /usr/local/mysql/mysqld.pid
socket = /usr/local/mysql/mysql.sock
server-id = 1 #每台 Mysql 主机的 server-id 不能相同
log-error=/usr/local/mysql/data/mysql_error.log #错误日志
general_log=ON #通用查询日志
general_log_file=/usr/local/mysql/data/mysql_general.log
slow_query_log=ON #慢查询日志
slow_query_log_file=mysql_slow_query.log
long_query_time=5
binlog-ignore-db=mysql,information_schema #不需要同步的库名
log_bin=mysql_bin #开启二进制日志用于主从数据复制
log_slave_updates=true #允许slave从master复制数据时可以写入到自己的二进制日志
sync_binlog=1 #"双1设置",MySQL 在每写一次二进制日志时都会同步到磁盘中去
innodb_flush_log_at_trx_commit=1 #"双1设置",每次事务提交时MySQL都会把缓存的数据写入日志文件,并且刷到磁盘中去
auto_increment_increment=2 #自增字段一次递增多少
auto_increment_offset=1 #自增字段的起始值

//把配置文件复制到其它 3 台数据库服务器上并启动服务器,注意:配置文件中的 server_id 要修改
scp /etc/my.cnf root@192.168.80.30:/etc/
scp /etc/my.cnf root@192.168.80.13:/etc/
scp /etc/my.cnf root@192.168.80.14:/etc/

systemctl restart mysqld

//配置主主复制,两台主服务器相互复制

在两台主服务器上都执行授予从的权限,从服务器上不需要执行#######

grant replication slave on . to 'replication'@'192.168.80.%' identified by '123456';

#############在两台主服务器上查看,记录日志文件名称和同步点##########
show master status;
+-------------------+----------+--------------+------------------+
| File | Position | Binlog_Do_DB | Binlog_Ignore_DB |
+-------------------+----------+--------------+------------------+
| master-bin.000002 | 154 | | |
+-------------------+----------+--------------+------------------+

#######在 master01 上配置同步##########
change master to master_host='192.168.80.30',master_user='replication',master_password='123456',master_log_file='mysql_bin.000002',master_log_pos=154;

start slave;

show slave status\G
Slave_IO_Running: Yes
Slave_SQL_Running: Yes

#######在 master02 上配置同步#########
change master to master_host='192.168.80.20',master_user='replication',master_password='123456',master_log_file='mysql_bin.000002',master_log_pos=154;

start slave;

show slave status\G
Slave_IO_Running: Yes
Slave_SQL_Running: Yes

//配置主从复制,在两台从服务器上做
change master to master_host='192.168.80.20',master_user='replication',master_password='123456',master_log_file='mysql_bin.000002',master_log_pos=154;

start slave;

show slave status\G
Slave_IO_Running: Yes
Slave_SQL_Running: Yes

//测试主主、主从 同步情况
create database db_test;

---------------------- 安装配置 MySQL-MMM ----------------------
//在所有服务器上安装 MySQL-MMM
wget -O /etc/yum.repos.d/CentOS-Base.repo http://mirrors.aliyun.com/repo/Centos-7.repo
yum -y install epel-release
yum -y install mysql-mmm*

//在 master01 上对 MySQL-MMM 进行配置
cd /etc/mysql-mmm/
vim mmm_common.conf
……
<host default>
cluster_interface ens33
……
replication_user replication
replication_password 123456
agent_user mmm_agent
agent_password 123456

<host db1>
ip 192.168.80.20
mode master
peer db2
</host>

<host db2>
ip 192.168.80.30
mode master
peer db1
</host>

<host db3>
ip 192.168.80.13
mode slave
</host>

<host db4>
ip 192.168.80.14
mode slave
</host>

<role writer>
hosts db1, db2
ips 192.168.80.188
mode exclusive #只有一个 host 可以进行写操作模式
</role>

<role reader>
hosts db3, db4
ips 192.168.80.198, 192.168.80.199
mode balanced #多个 slave 主机可以进行读操作模式
</role>

//把配置文件复制到其它 4 台主机,所有主机该配置文件内容都是一样的
scp mmm_common.conf root@192.168.80.30:/etc/mysql-mmm/
scp mmm_common.conf root@192.168.80.13:/etc/mysql-mmm/
scp mmm_common.conf root@192.168.80.14:/etc/mysql-mmm/
scp mmm_common.conf root@192.168.80.15:/etc/mysql-mmm/

//修改所有数据库服务器的代理配置文件 mmm_agent.conf
vim /etc/mysql-mmm/mmm_agent.conf
include mmm_common.conf
this db1 #根据不同的主机分别修改为 db1,db2,db3,db4

//在 monitor 监控服务器上修改监控配置文件 mmm_mon.conf
vim /etc/mysql-mmm/mmm_mon.conf
include mmm_common.conf
<monitor>
.....
ping_ips 192.168.80.20,192.168.80.30,192.168.80.13,192.168.80.14 #######指定所有数据库服务器的 IP##########
auto_set_online 10 #指定自动上线时间
</monitor>

<host default>
monitor_user mmm_monitor #指定 mmm_monitor 的用户名
monitor_password 123456 #指定 mmm_monitor 的密码
</host>

//在所有数据库上为 mmm_agent(代理进程)授权
grant super, replication client, process on . to 'mmm_agent'@'192.168.80.%' identified by '123456';

//在所有数据库上为 mmm_moniter(监控进程)授权
grant replication client on . to 'mmm_monitor'@'192.168.80.%' identified by '123456';

flush privileges;

//在所有数据库服务器上启动 mysql-mmm-agent
systemctl start mysql-mmm-agent.service
systemctl enable mysql-mmm-agent.service

//在 monitor 服务器上启动 mysql-mmm-monitor
systemctl start mysql-mmm-monitor.service

//在 monitor 服务器上测试群集
############查看各节点的情况###########
mmm_control show
db1(192.168.80.20) master/ONLINE. Roles: writer(192.168.80.188)
db2(192.168.80.30) master/ONLINE. Roles:
db3(192.168.80.13) slave/ONLINE. Roles: reader(192.168.80.198)
db4(192.168.80.14) slave/ONLINE. Roles: reader(192.168.80.199)

########检测监控功能是否都完善,需要各种OK##########
mmm_control checks all

###########指定绑定 VIP 的主机################
mmm_control move_role writer db2

//故障测试
mmm_control move_role writer db1

#########停止 master01 确认 VIP 是否移动到 master02 上。注意:master01 主服务器恢复服务后,不会抢占#########

mmm_control show
db1(192.168.80.20) master/HARD_OFFLINE. Roles:
db2(192.168.80.30) master/ONLINE. Roles: writer(192.168.80.188)

#######停止一台从服务器,另一台将接管两个虚拟IP,以保证业务不停止##############
mmm_control show

//客户端测试
###########在 master01 服务器上为 monitor 服务器地址授权登录############
grant all on . to 'testdba'@'192.168.80.15' identified by '123456';
flush privileges;

###########在 monitor 服务器上使用 VIP 登录##############
yum install -y mariadb-server mariadb
systemctl start mariadb.service

mysql -utestdba -p -h 192.168.235.188

########创建数据,测试同步情况#############
create database testdba;

 

2、关闭所有服务器防火墙

MySQL数据库(八)-- MMM高可用集群搭建

3、修改 master01 配置文件

MySQL数据库(八)-- MMM高可用集群搭建
MySQL数据库(八)-- MMM高可用集群搭建

MySQL数据库(八)-- MMM高可用集群搭建

4、把配置文件复制到其它 3 台数据库服务器上并重启mysql,注意:配置文件中的 server_id 要修改

MySQL数据库(八)-- MMM高可用集群搭建

5、配置主主复制,两台主服务器相互复制

在两台主服务器上都执行授予从的权限,从服务器上不需要执行

MySQL数据库(八)-- MMM高可用集群搭建

MySQL数据库(八)-- MMM高可用集群搭建

6、在 master01 上配置同步

MySQL数据库(八)-- MMM高可用集群搭建

7、在 master02 上配置同步

MySQL数据库(八)-- MMM高可用集群搭建

8、配置主从复制,在两台从服务器上做

MySQL数据库(八)-- MMM高可用集群搭建

9、测试主主、主从 同步情况

在master1服务器上创建数据库,测试是否同步

MySQL数据库(八)-- MMM高可用集群搭建

MySQL数据库(八)-- MMM高可用集群搭建

MySQL数据库(八)-- MMM高可用集群搭建

MySQL数据库(八)-- MMM高可用集群搭建

10、在所有服务器上安装 MySQL-MMM

MySQL数据库(八)-- MMM高可用集群搭建

11、在 master01 上对 MySQL-MMM 进行配置

MySQL数据库(八)-- MMM高可用集群搭建
MySQL数据库(八)-- MMM高可用集群搭建

MySQL数据库(八)-- MMM高可用集群搭建

12、把配置文件复制到其它 4 台主机,所有主机该配置文件内容都是一样的

MySQL数据库(八)-- MMM高可用集群搭建

13、修改所有数据库服务器的代理配置文件 mmm_agent.conf

MySQL数据库(八)-- MMM高可用集群搭建

MySQL数据库(八)-- MMM高可用集群搭建

MySQL数据库(八)-- MMM高可用集群搭建

MySQL数据库(八)-- MMM高可用集群搭建

MySQL数据库(八)-- MMM高可用集群搭建

14、在 monitor 监控服务器上修改监控配置文件 mmm_mon.conf

MySQL数据库(八)-- MMM高可用集群搭建

MySQL数据库(八)-- MMM高可用集群搭建

15、在所有数据库上为 mmm_agent(代理进程)授权

MySQL数据库(八)-- MMM高可用集群搭建

16、在所有数据库上为 mmm_moniter(监控进程)授权

MySQL数据库(八)-- MMM高可用集群搭建

17、在所有数据库服务器上启动 mysql-mmm-agent

MySQL数据库(八)-- MMM高可用集群搭建

18、在 monitor 服务器上启动 mysql-mmm-monitor

MySQL数据库(八)-- MMM高可用集群搭建

三、在 monitor 服务器上测试群集

1、查看各节点的情况

MySQL数据库(八)-- MMM高可用集群搭建

2、检测监控功能是否都完善,需要各种OK

MySQL数据库(八)-- MMM高可用集群搭建

3、指定绑定 VIP 的主机

MySQL数据库(八)-- MMM高可用集群搭建

四、故障测试

MySQL数据库(八)-- MMM高可用集群搭建

1、停止 master01 确认 VIP 是否移动到 master02 上。注意:master01 主服务器恢复服务后,不会抢占

MySQL数据库(八)-- MMM高可用集群搭建

MySQL数据库(八)-- MMM高可用集群搭建

2、停止一台从服务器,另一台将接管两个虚拟IP,以保证业务不停止

MySQL数据库(八)-- MMM高可用集群搭建

MySQL数据库(八)-- MMM高可用集群搭建

五、客户端测试

1、在 master01 服务器上为 monitor 服务器地址授权登录

MySQL数据库(八)-- MMM高可用集群搭建

MySQL数据库(八)-- MMM高可用集群搭建

MySQL数据库(八)-- MMM高可用集群搭建

2、创建数据,测试同步情况

MySQL数据库(八)-- MMM高可用集群搭建

上一篇:Mybatis-generator 逆向工程 自定义PO,xml,mapper,example


下一篇:MySQL 高可用MMM安装部署以及故障转移详细资料汇总