一、MySQL主从搭建
主从配置原理:
- 主库写日志到 BinLog
- 从库开个 IO 线程读取主库的 BinLog 日志,并写入 RelayLog
- 再开一个 SQL 线程,读 RelayLog 日志,回放到从库中
主从配置流程:
- master 会将变动记录到二进制日志里面;
- master 有一个 I/O 线程将二进制日志发送到 slave;
- salve 有一个 I/O 线程把 master 发送的二进制写入到 relay 日志里面;
- slave 有一个 SQL 线程,按照 relay 日志处理 slave 的数据;
操作步骤
使用 docker 模拟两台 MySQL 数据库机器
1、修改配置文件:
主库的配置文件
[mysqld]
user=mysql
character-set-server=utf8
default_authentication_plugin=mysql_native_password
secure_file_priv=/var/lib/mysql
expire_logs_days=7
sql_mode=STRICT_TRANS_TABLES,NO_ZERO_IN_DATE,NO_ZERO_DATE,ERROR_FOR_DIVISION_BY_ZERO,NO_ENGINE_SUBSTITUTION
max_connections=1000
server-id=100 # 主库,同一局域网内注意要唯一
log-bin=mysql-bin # 开启二进制日志功能,可以随便取名字(二进制文件名)
[client]
default-character-set=utf8
[mysql]
default-character-set=utf8
从库的配置文件
[mysqld]
user=mysql
character-set-server=utf8
default_authentication_plugin=mysql_native_password
secure_file_priv=/var/lib/mysql
expire_logs_days=7
sql_mode=STRICT_TRANS_TABLES,NO_ZERO_IN_DATE,NO_ZERO_DATE,ERROR_FOR_DIVISION_BY_ZERO,NO_ENGINE_SUBSTITUTION
max_connections=1000
server-id=101 # 从库设置server_id,注意要唯一
log-bin=mysql-slave-bin # 开启二进制日志功能,定义名字,以备Slave作为其它Slave的Master时使用
relay_log=edu-mysql-relay-bin # relay_log配置中继日志
[client]
default-character-set=utf8
[mysql]
default-character-set=utf8
启动docker
#启动主库容器(挂载外部目录,端口映射成33307,密码设置为123456)
docker run -di -v /home/mysql/data/:/var/lib/mysql -v /home/mysql/conf.d:/etc/mysql/conf.d -v /home/mysql/my.cnf:/etc/mysql/my.cnf -p 33307:3306 --name mysql-master -e MYSQL_ROOT_PASSWORD=123456 mysql:5.7
#启动从库容器(挂载外部目录,端口映射成33306,密码设置为123456)
docker run -di -v /home/mysql2/data/:/var/lib/mysql -v /home/mysql2/conf.d:/etc/mysql/conf.d -v /home/mysql2/my.cnf:/etc/mysql/my.cnf -p 33306:3306 --name mysql-slave -e MYSQL_ROOT_PASSWORD=123456 mysql:5.7
2、由于主库和从库都需要对日志文件进行操作,这就需要另一个用户来操作,所以主从都需要创建一个用户
# 连接库
mysql -h 192.168.88.131 -P 33307 -u root -p123456
# 在主库创建用户并授权
# 创建test用户
create user ‘test‘ identified by ‘123‘;
# 授权用户
grant all privileges on *.* to ‘test‘ ;
# 刷新权限
flush privileges;
3、连接从库配置
# 连接从库
mysql -h 192.168.88.131 -P 33306 -u root -p123456
# 命令如下
change master to master_host=‘192.168.88.131‘,master_port=33307,master_user=‘test‘,master_password=‘123‘,master_log_file=‘mysql-bin.000003‘,master_log_pos=0;
# 启用从库
start slave;
# 停止从库
stop slave;
# 查看从库状态
show slave status\G;
# 这两个yes表示匹配成功
-Slave_IO_Running: Yes
-Slave_SQL_Running: Yes
# 配置详解
change master to
master_host=‘MySQL主服务器IP地址‘,
master_user=‘之前在MySQL主服务器上面创建的用户名‘,
master_password=‘之前创建的密码‘,
master_log_file=‘MySQL主服务器状态中的二进制文件名‘, # show master status; 查看
master_log_pos=‘MySQL主服务器状态中的position值‘; # show master status; 查看
二、Django实现读写分离
首先主从搭建好了后:
在 setting 中配置
DATABASES = {
# 主库
‘default‘: {
‘ENGINE‘: ‘django.db.backends.mysql‘,
‘NAME‘: ‘test‘,
‘USER‘: ‘root‘,
‘PASSWORD‘: ‘123456‘,
‘HOST‘: ‘192.168.88.131‘,
‘PORT‘: 33307,
},
# 从库
‘slave‘: {
‘ENGINE‘: ‘django.db.backends.mysql‘,
‘NAME‘: ‘test‘,
‘USER‘: ‘root‘,
‘PASSWORD‘: ‘123456‘,
‘HOST‘: ‘192.168.88.131‘,
‘PORT‘: 33306,
},
}
在数据库迁移的时候,可以指定把那个app的表结构迁移到那个库
python manage.py migrate app01 --database=default
手动指定
# 去default库写——>主库
content = models.User.objects.using(‘default‘).create(name=‘小杨‘, age=‘20‘)
# 去slave库查——>从库
content = models.User.objects.using(‘slave‘).all().first()
自动指定
1、新建一个py文件
db_router.py
class Router:
def db_for_read(self, model, **hints):
return ‘slave‘
def db_for_write(self, mode, **hints):
return ‘default‘
# 更细粒度
class Router1:
def db_for_read(self, model, **hints):
if model._meta.model_name == ‘user‘: # 只有User表才会去从库读
return ‘slave‘
else:
return ‘default‘
def db_for_write(self, model, **hints):
return ‘default‘
2、在 setting 中注册
DATABASE_ROUTERS = [‘db_router.Router‘,]
# 以后只要是写操作就会用default,只要是读操作自动去slave