本篇文章给大家带来了关于mysql的相关知识,主要介绍了mysql基于gtid主从搭建,文章首先通过xtarbackup来同步数据展开文章内容详情,感兴趣的小伙伴可以参考一下。
推荐学习:mysql视频教程
用xtarbackup来同步数据,然后基于gtid来设置主从。
一、用xtarbackup备份数据库1.1 优势使用xtarbackup来做主从的前期准备是因为xtarbackup备份数据和恢复数据都很快,特别适合数据量很大的数据库备份,而且它的安装非常的简单,使用也很简单....(巴拉巴拉,废话编不出来了)。
1.2 安装具体版本根据自己的具体情况来选择。就下面这几步就安装好了,是不是非常简单.....
# rpm -uvh https://www.percona.com/redir/downloads/percona-release/redhat/percona-release-0.1-3.noarch.rpm# yum list | grep percona# yum -y install perl perl-devel libaio libaio-devel perl-time-hires perl-dbd-mysql # rpm -uvh ftp://rpmfind.net/linux/epel/6/x86_64/libev-4.03-3.el6.x86_64.rpm# yum install percona-xtrabackup –y
1.3 使用1.3.1 普通备份innobackupex --defaults-file=/etc/my.cnf --user=root --password=123456 /data/backupmysql/
1.3.2 tar备份(1)、备份到本地
# 不压缩innobackupex --defaults-file=/etc/my.cnf --user=root --password=123456 --stream=tar /data/backupmysql/>/data/mysql.tar# 压缩innobackupex --defaults-file=/etc/my.cnf --user=root --password=123456 --stream=tar /data/backupmysql/ | gzip >/data/mysql.tar.gz
(2)、备份到远程
# 不压缩innobackupex --defaults-file=/etc/my.cnf --user=root --password=123456 --stream=tar /data/backupmysql/ | ssh root@192.168.1.7 \ "cat - >/data/mysql.tar# 压缩innobackupex --defaults-file=/etc/my.cnf --user=root --password=123456 --stream=tar /data/backupmysql/ | | ssh root@192.168.1.7 \ "gzip >/data/mysql.tar.gz
(3)、解压方式
# 未经过压缩的文件解压tar xvf mysql.tar -c /data# 压缩过的文件解压tar zxvf mysql.tar.gz -c /data
1.3.3 xbstream备份(1)、备份到本地
# 不压缩innobackupex --defaults-file=/etc/my.cnf --user=root --password=123456 --stream=xbstream /data/backupmysql/>/data/mysql.xbstream# 压缩innobackupex --defaults-file=/etc/my.cnf --user=root --password=123456 --stream=xbstream --compress /data/backupmysql/ >/data/mysql_compress.xbstream
(2)、备份要远程
# 不压缩innobackupex --defaults-file=/etc/my.cnf --user=root --password=123456 --stream=xbstream /data/backupmysql/| ssh root@192.168.1.7 "xbstream -x -c /backup/stream"# 压缩innobackupex --defaults-file=/etc/my.cnf --user=root --password=123456 --stream=xbstream --compress /data/backupmysql/ | ssh root@192.168.1.7 "xbstream -x -c /backup/stream"
(3)、解压方式
#### 未压缩的xbstream -x < mysql.xbstream -c /data#### 压缩过的# 1、先解压xbstreamxbstream -x < mysql_compress.xbstream -c /data# 2、再解压qp压缩格式for bf in `find . -iname "*\.qp"`; do qpress -d $bf $(dirname $bf) && rm $bf; done注:如果xtrabackup版本大于2.1.4,可以直接通过以下方式解压第二步。innobackupex --decompress /data
1.3.4 恢复先将原备份压缩包解压到一个目录,然后执行下面语句恢复。
innobackupex --defaults-file=/etc/my.cnf --user=root --password=123456 --copy-back /var/lib/mysql/backup/
注:在做备份,解压,恢复的过程中可以借助分屏工具,我喜欢用screen。
二、基于gtid做数据同步2.1 gtid的概念1、全局事务标识:global transaction identifiers。2、gtid是一个事务一一对应,并且全局唯一id。3、一个gtid在一个服务器上只执行一次,避免重复执行导致数据混乱或者主从不一致。4、gtid用来代替传统复制方法,不再使用master_log_file+master_log_pos开启复制。而是使用master_auto_postion=1的方式开始复制。5、mysql-5.6.5开始支持的,mysql-5.6.10后开始完善。6、在传统的slave端,binlog是不用开启的,但是在gtid中slave端的binlog是必须开启的,目的是记录执行过的gtid(强制)。2.2 gtid的组成gtid = source_id:transaction_id source_id:用于鉴别原服务器,即mysql服务器唯一的的server_uuid,由于gtid会传递到slave,所以也可以理解为源id。
transaction_id:为当前服务器上已提交事务的一个序列号,通常从1开始自增长的序列,一个数值对应一个事务。
示例: 3e11fa47-71ca-11e1-9e33-c80aa9429562:23 前面的一串为服务器的server_uuid,即3e11fa47-71ca-11e1-9e33-c80aa9429562,后面的23为transaction_id
2.3 gtid的原理1、当一个事务在主库端执行并提交时,产生gtid,一同记录到binlog日志中。
2、binlog传输到slave,并存储到slave的relaylog后,读取这个gtid的这个值设置gtid_next变量,即告诉slave,下一个要执行的gtid值。
3、sql线程从relay log中获取gtid,然后对比slave端的binlog是否有该gtid。
4、如果有记录,说明该gtid的事务已经执行,slave会忽略。
5、如果没有记录,slave就会执行该gtid事务,并记录该gtid到自身的binlog,在读取执行事务前会先检查其他session持有该gtid,确保不被重复执行。
6、在解析过程中会判断是否有主键,如果没有就用二级索引,如果没有就用全部扫描。
2.4 gtid的优势1、更简单的实现failover,不用以前那样在需要找log_file和log_pos。2、更简单的搭建主从复制。3、比传统的复制更加安全。4、gtid是连续的没有空洞的,保证数据的一致性,零丢失。2.5 具体搭建过程对于gtid的配置,主要修改配置文件中与gtid特性相关的几个重要参数,mysql版本建议mysql-5.6.5版本以上。
2.5.1 开启主(master)gtid其主要配置如下:
[mysqld]#gtid:server_id=135 #服务器idgtid_mode=on #开启gtid模式enforce_gtid_consistency=on #强制gtid一致性,开启后对于特定create table不被支持#binloglog_bin=master-binloglog-slave-updates=1 binlog_format=row #强烈建议,其他格式可能造成数据不一致#relay logskip_slave_start=1
2.5.2 在master上进行数据备份innobackupex --defaults-file=/etc/my.cnf --user=root --password=123456 --stream=tar /data/backupmysql/ | | ssh root@192.168.1.7 \ "gzip >/data/mysql.tar.gz
2.5.3 解压备份的数据tar zxvf /data/mysql.tar.gz -c /data/baskup
2.5.4 配置slave的配置文件[mysqld]#gtid:gtid_mode=onenforce_gtid_consistency=onserver_id=143#binloglog-bin=slave-binloglog-slave-updates=1binlog_format=row #强烈建议,其他格式可能造成数据不一致#relay logskip_slave_start=1
2.5.5 恢复数据innobackupex --defaults-file=/etc/my.cnf --user=root --password=123456 --copy-back /data/backup
2.5.6 获取gtid节点more /data/backup/2018-02-08_15-03-18/xtrabackup_binlog_info
2.5.7 配置主从(1)、在master上授权
grant replication slave on *.* to slaveuser@'192.168.1.7' identified by "c2xhdmv1c2vy";
(2)、在slave上配置
stop slave;set global gtid_purged="c5b5ffe7-ce66-11e7-9a19-00163e00013d:1-515758";change master to master_host='192.168.1.6',master_port=3306,master_user='slaveuser',master_password='c2xhdmv1c2vy',master_auto_position=1;start slave;
2.6 已运行经典复制mysql服务器转向gtid复制a、按本文2.5.2描述配置参数文件;b、所有服务器设置global.read_only参数,等待主从服务器同步完毕; mysql> set @@global.read_only = on;c、依次重启主从服务器;d、使用change master 更新主从配置;mysql> change master to > master_host = host, > master_port = port, > master_user = user, > master_password = password, > master_auto_position = 1;e、从库开启复制 mysql> start slave; f、验证主从复制推荐学习:mysql视频教程
以上就是归纳整理之mysql基于gtid主从搭建的详细内容。