10592字,475行!带你玩转 MyCat 读写分离!

2021/02/07 09:17
阅读数 44

一、MySQL主从复制原理

复制是指将主数据库的 DDLDML 操作通过二进制日志传到从库服务器中,然后在从库上对这些日志重新执行(也叫重做),从而使得从库和主库的数据保持同步。

MySQL支持一台主库同时向多台从库进行复制, 从库同时也可以作为其他从服务器的主库,实现链状复制。

MySQL主从复制的原理如下 :

从上层来看,复制分成三步:

  • Master 主库在事务提交时,会把数据变更作为时间 Events 记录在二进制日志文件 Binlog中。
  • 主库推送二进制日志文件 Binlog 中的日志事件到从库的中继日志 Relay Log 。
  • slave重做中继日志中的事件,将改变反映它自己的数据。

MySQL 复制的优点:

  • 主库出现问题,可以快速切换到从库提供服务。
  • 可以在从库上执行查询操作,从主库中更新,实现读写分离,降低主库的访问压力。
  • 可以在从库中执行备份,以避免备份期间影响主库的服务。

二、MySQL一主一从搭建

准备的两台机器:

1.master

  1. 在master 的配置文件(/usr/my.cnf)中,配置如下内容:
#mysql 服务ID,保证整个集群环境中唯一 
server-id=1 

#mysql binlog 日志的存储路径和文件名 
log-bin=/var/lib/mysql/mysqlbin 

#设置logbin格式 
binlog_format=STATEMENT 

#是否只读,1 代表只读, 0 代表读写 
read-only=0 

#忽略的数据, 指不需要同步的数据库 
#binlog-ignore-db=mysql 

#指定同步的数据库 
binlog-do-db=db01
  1. 执行完毕之后,需要重启Mysql:
service mysql restart ;
  1. 创建同步数据的账户,并且进行授权操作:
grant replication slave on *.* to 'itcast'@'192.168.192.158' identified by 'itcast'; 

flush privileges;
  1. 查看master状态:
show master status;


字段含义:

File : 从哪个日志文件开始推送日志文件 
Position : 从哪个位置开始推送日志 
Binlog_Ignore_DB : 指定不需要同步的数据库

2.slave

  1. 在 slave 端配置文件/usr/my.cnf中,配置如下内容:
#mysql服务端ID,唯一 
server-id=2 

#指定binlog日志 
log-bin=/var/lib/mysql/mysqlbin 

#启用中继日志 
relay-log=mysql-relay
  1. 执行完毕之后,需要重启Mysql:
service mysql restart;
  1. 执行如下指令 :
change master to master_host= '192.168.192.157', master_user='itcast', 
master_password='itcast', master_log_file='mysqlbin.000001', master_log_pos=413;

指定当前从库对应的主库的IP地址,用户名,密码,从哪个日志文件开始的那个位置开始同步推送日志。

  1. 开启同步操作
start slave; 

show slave status;


5. 停止同步操作

stop slave;

3.验证主从同步

  1. 在主库中创建数据库,创建表,并插入数据 :
create database db01; 

user db01; 

create table user( 
	id int(11) not null auto_increment, 
	name varchar(50) not null, 
	sex varchar(1), 
	primary key (id) 
)engine=innodb default charset=utf8; 

insert into user(id,name,sex) values(null,'Tom','1');
insert into user(id,name,sex) values(null,'Trigger','0'); 
insert into user(id,name,sex) values(null,'Dawn','1');
  1. 在从库中查询数据,进行验证 :

在从库中,可以查看到刚才创建的数据库:

在该数据库中,查询user表中的数据:




参考资料:《开源数据库中间件MyCat实战笔记》
想要快速获取资料的同学:请添加助理VX:C18173184271,备注一下CSDN+工作年限!免费获取
不要再犹犹豫豫了,不然就要错过金三银四春招了!



三、MyCat一主一从读写分离

1.读写分离原理


读写分离,简单地说是把对数据库的读和写操作分开,以对应不同的数据库服务器。主数据库提供写操作,从数据库提供读操作,这样能有效地减轻单台数据库的压力。

通过MyCat即可轻易实现上述功能,不仅可以支持MySQL,也可以支持OracleSQL Server

MyCat控制后台数据库的读写分离负载均衡schema.xml文件datahost标签balance属性控制。

2.读写分离配置

配置如下:

  1. 检查MySQL的主从复制是否运行正常 .
  2. 修改MyCat 的conf/schema.xml 配置如下:
<?xml version="1.0"?> 
<!DOCTYPE mycat:schema SYSTEM "schema.dtd"> 
<mycat:schema xmlns:mycat="http://io.mycat/"> 
	<schema name="ITCAST" checkSQLschema="true" sqlMaxLimit="100"> 
		<table name="user" dataNode="dn1" primaryKey="id"/> 
	</schema> 
	
	<dataNode name="dn1" dataHost="localhost1" database="db01" /> 
	
	<dataHost name="localhost1" maxCon="1000" minCon="10" balance="1" writeType="0" dbType="mysql" dbDriver="native" switchType="1" slaveThreshold="100"> 
		<heartbeat>select user()</heartbeat> 
		<writeHost host="hostM1" url="192.168.192.157:3306" user="root" password="itcast"> 
			<readHost host="hostS1" url="192.168.192.158:3306" user="root" password="itcast" /> 
		</writeHost> 
	</dataHost> 
</mycat:schema>
  1. 修改conf/server.xml
<user name="root" defaultAccount="true"> 
	<property name="password">123456</property> 
	<property name="schemas">ITCAST</property> 
</user> 

<user name="test"> 
	<property name="password">123456</property>
	<property name="schemas">ITCAST</property> 
</user> 

<user name="user"> 
	<property name="password">123456</property> 
	<property name="schemas">ITCAST</property> 
	<property name="readOnly">true</property> 
</user>
  1. 配置完毕之后, 重启MyCat服务;

属性含义说明:

checkSQLschema 
	当该值设置为true, 如果我们执行语句"select * from test01.user ;" 语句时, MyCat则会 把schema字符去掉 , 
	可以避免后端数据库执行时报错 ; 

balance 
	负载均衡类型, 目前取值有4: 
	
	balance="0" : 不开启读写分离机制 , 所有读操作都发送到当前可用的writeHost上. 
	
	balance="1" : 全部的readHost 与 stand by writeHost (备用的writeHost) 都参与 select 语句的负载均衡,
	简而言之,就是采用双主双从模式(M1 --> S1 , M2 --> S2, 正常情况下, M2,S1,S2 都参与 select 语句的负载均衡。); 
	
	balance="2" : 所有的读写操作都随机在writeHost , readHost上分发 
	
	balance="3" : 所有的读请求随机分发到writeHost对应的readHost上执行, writeHost不负担 读压力 ;balance=3 只在MyCat1.4 之后生效 .

3.验证读写分离

修改balance的值, 查询MyCat中的逻辑表中的数据变化;

四、MySQL双主双从搭建

1.架构

一个主机 Master1 用于处理所有写请求,它的从机 Slave1 和另一台主机 Master2 还有它的从机 Slave2 负责所有读请求。当 Master1 主机宕机后,Master2 主机负责写请求,Master1Master2 互为备机。架构图如下:

2.双主双从配置

准备的机器如下:

  1. 双主机配置

Master1配置:

#主服务器唯一ID 
server-id=1 

#启用二进制日志 
log-bin=mysql-bin 

# 设置不要复制的数据库(可设置多个) 
# binlog-ignore-db=mysql 
# binlog-ignore-db=information_schema 

#设置需要复制的数据库 
binlog-do-db=db02 
binlog-do-db=db03 
binlog-do-db=db04 

#设置logbin格式 
binlog_format=STATEMENT 

# 在作为从数据库的时候,有写入操作也要更新二进制日志文件 
log-slave-updates

Master2配置:

#主服务器唯一ID 
server-id=3 

#启用二进制日志 
log-bin=mysql-bin 

# 设置不要复制的数据库(可设置多个) 
#binlog-ignore-db=mysql 
#binlog-ignore-db=information_schema 

#设置需要复制的数据库 
binlog-do-db=db02 
binlog-do-db=db03
binlog-do-db=db04 

#设置logbin格式 
binlog_format=STATEMENT 

# 在作为从数据库的时候,有写入操作也要更新二进制日志文件 
log-slave-updates
  1. 双从机配置

Slave1配置:

#从服务器唯一ID 
server-id=2 

#启用中继日志 
relay-log=mysql-relay

Salve2配置:

#从服务器唯一ID 
server-id=4 

#启用中继日志 
relay-log=mysql-relay
  1. 双主机、双从机重启 mysql 服务
  2. 主机从机都关闭防火墙
  3. 在两台主机上建立帐户并授权 slave
#在主机MySQL里执行授权命令 
GRANT REPLICATION SLAVE ON *.* TO 'itcast'@'%' IDENTIFIED BY 'itcast'; 

flush privileges;

查询Master1的状态 :

查询Master2的状态 :
在这里插入图片描述

  1. 在从机上配置需要复制的主机

Slave1 复制 Master1Slave2 复制 Master2

slave1 指令:

CHANGE MASTER TO MASTER_HOST='192.168.192.157', 
MASTER_USER='itcast', 
MASTER_PASSWORD='itcast', 
MASTER_LOG_FILE='mysql-bin.000001',MASTER_LOG_POS=409;

slave2 指令:

CHANGE MASTER TO MASTER_HOST='192.168.192.159', 
MASTER_USER='itcast', 
MASTER_PASSWORD='itcast', 
MASTER_LOG_FILE='mysql-bin.000001',MASTER_LOG_POS=409;
  1. 启动两台从服务器复制功能 , 查看主从复制的运行状态
start slave; 

show slave status\G;



  1. 两个主机互相复制

Master2 复制 Master1Master1 复制 Master2

Master1 执行指令:

CHANGE MASTER TO MASTER_HOST='192.168.192.159', 
MASTER_USER='itcast', 
MASTER_PASSWORD='itcast', 
MASTER_LOG_FILE='mysql-bin.000001',MASTER_LOG_POS=409;

Master2 执行指令:

CHANGE MASTER TO MASTER_HOST='192.168.192.157', 
MASTER_USER='itcast', 
MASTER_PASSWORD='itcast', 
MASTER_LOG_FILE='mysql-bin.000001',MASTER_LOG_POS=409;
  1. 启动两台主服务器复制功能 , 查看主从复制的运行状态
start slave; 

show slave status\G;



  1. 验证
create database db03; 

use db03; 

create table user( 
	id int(11) not null auto_increment, 
	name varchar(50) not null, 
	sex varchar(1), 
	primary key (id) 
)engine=innodb default charset=utf8; 

insert into user(id,name,sex) values(null,'Tom','1'); 
insert into user(id,name,sex) values(null,'Trigger','0'); 
insert into user(id,name,sex) values(null,'Dawn','1'); 

insert into user(id,name,sex) values(null,'Jack Ma','1'); 
insert into user(id,name,sex) values(null,'Coco','0'); 
insert into user(id,name,sex) values(null,'Jerry','1');

在Master1上创建数据库:

在Master1上创建表 :



  1. 停止从服务复制功能
stop slave;
  1. 重新配置主从关系
stop slave; 
reset master;

五、MyCat双主双从读写分离

1.配置

修改<dataHost>balance属性,通过此属性配置读写分离的类型 ;

<?xml version="1.0"?> 
<!DOCTYPE mycat:schema SYSTEM "schema.dtd"> 
<mycat:schema xmlns:mycat="http://io.mycat/"> 

	<schema name="ITCAST" checkSQLschema="true" sqlMaxLimit="100"> 
		<table name="user" dataNode="dn1" primaryKey="id"/>
	</schema> 
	
	<dataNode name="dn1" dataHost="localhost1" database="db03" /> 
	<dataHost name="localhost1" maxCon="1000" minCon="10" balance="1" writeType="0" dbType="mysql" dbDriver="native" switchType="1" slaveThreshold="100"> 
		<heartbeat>select user()</heartbeat> 
		<writeHost host="hostM1" url="192.168.192.147:3306" user="root" password="itcast"> 
			<readHost host="hostS1" url="192.168.192.149:3306" user="root" password="itcast" /> 
		</writeHost> 
			
		<writeHost host="hostM2" url="192.168.192.150:3306" user="root" password="itcast"> 
			<readHost host="hostS2" url="192.168.192.151:3306" user="root" password="itcast" /> 
		</writeHost> 
	</dataHost> 
</mycat:schema>
  1. balance

1 : 代表 全部的 readHoststand by writeHost 参与 select 语句的负载均衡,简单的说,当双主双从模式(M1->S1,M2->S2,并且 M1 与 M2 互为主备),正常情况下,M2,S1,S2都参与 select 语句的负载均衡 ;

  1. writeType

0 : 写操作都转发到第1台writeHost, writeHost1挂了, 会切换到writeHost2上;
1 : 所有的写操作都随机地发送到配置的writeHost上 ;

  1. switchType

-1 : 不自动切换
1 : 默认值, 自动切换
2 : 表示基于MySQL的主从同步状态决定是否切换, 心跳语句 : show slave status

2. 读写分离验证

查询数据 : select * from user;


插入数据 : insert into user(id,name,sex) values(null,'Dawn','1');


3.可用性验证

关闭Master1 , 然后再执行写入的SQL语句 , 通过日志查询当前写入操作, 操作的是那台服务器 ;


如果你需要这份完整版的《开源数据库中间件MyCat实战笔记》,只需你多多支持我这篇文章。

多多支持,即可免费获取资料——三连之后(承诺:100%免费)

快速入手通道:添加助理VX:C18173184271,备注一下CSDN+工作年限! 免费获取!诚意满满!!!

展开阅读全文
加载中

作者的其它热门文章

打赏
0
0 收藏
分享
打赏
0 评论
0 收藏
0
分享
返回顶部
顶部
返回顶部
顶部