mysql 主从数据库中的数据一样吗

如题所述

用 pt-table-checksum 时,会不会影响业务性能?

实验


实验开始前,给大家分享一个小经验:任何性能评估,不要相信别人的评测结果,要在自己的环境上测试,并(大概)知晓原理。

我们先建一对主从:

然后用 mysqlslap跑一个持续的压力:

开另外一个会话,将 master 上的 general log 打开:

然后通过 pt-table-checksum 进行一次比较:

查看 master 的 general log,由于 mysqlslap 的影响,general log 中有很多内容,我们找到与 pt-table-checksum 相关的线程:

将该线程的操作单独列出来:

操作比较多,我们一点一点来说明:

这里工具调小了 innodb 锁等待时间。使得之后的操作,只要在 innodb 上稍微有锁等待,就会马上放弃操作,对业务影响很小。

另外工具调小了 wait_timeout 时间,倒是没有特别的作用。


工具将隔离级别调整为了 RR 级别,事务的维护代价会比 RC 要高,不过后面我们会看到工具使用的每个事务都很小,加上之前提到 innodb 锁等待时间调到很小,对线上业务产生的成本比较小。

RR 级别是数据对比的基本要求。

工具通过一系列操作,了解表的概况。工具是一个数据块一个数据块进行校验,这里获取了第一个数据块的下边界。

接下来工具获取了下一个数据块的下边界,每个 SQL前都会 EXPLAIN 一下,看一下执行成本,非常小心翼翼。

之后工具获取了一个数据块的 checksum,这个数据块不大,如果跟业务流量有冲突,会马上出发 innodb 的锁超时,立刻退让。

以上是 pt-table-checksum 的一些设计,可以看到这几处都是精心维护了业务流量不受影响。

工具还设计了其他的一些机制保障业务流量,比如参数 --max-load 和 --pause-file 等,还有精心设计的数据块划分方法,索引选择方法等。大家根据自己的情况配合使用即可达到很好的效果。


总结

本期我们介绍了简单分析 pt-table-checksum 是否会影响业务流量,坊间会流传工具的各种参数建议或者不建议使用,算命的情况比较多,大家都可以用简单的实验来分析其中机制。

还是那个观点,性能测试不能相信道听途说,得通过实验去分析。

温馨提示:内容为网友见解,仅供参考
第1个回答  2019-03-31
mysql的主从复制开启之后,从数据库会立马复制主数据库中的数据。
然后,对主数据库进行增,删,改操作之后,从数据库也会进行相同的操作。
不过,对从数据库进行增,删,改操作的话,对主数据库是没有任何影响的

mysql 主从数据库中的数据一样吗
之后工具获取了一个数据块的 checksum,这个数据块不大,如果跟业务流量有冲突,会马上出发 innodb 的锁超时,立刻退让。以上是 pt-table-checksum 的一些设计,可以看到这几处都是精心维护了业务流量不受影响。工具还设计了其他的一些机制保障业务流量,比如参数 --max-load 和 --pause-file 等,还有...

MySQL 主从复制数据不一致,怎么办?
3. 查看主服务器当前二进制日志名和偏移量:用于从机启动后的数据恢复。主从配置完成后,开始创建数据库和表。接下来在主服务器插入数据,从机会自动同步。若数据同步出现不一致,可能原因在于binlog格式不同。在主服务器上,使用binlog查看命令,以事件方式查看binlog内容,发现插入操作中包含uuid()函数...

MySQL主主复制和主从的区别及作用mysql主主复制主从
首先,主主复制是多个 MySQL 服务器之间的双向复制。这种复制模式可以将任何两个或多个MySQL实例之间的数据保持一致,在用户实施主主复制之后,任何一台服务器都可以成为读\/写服务器,可以检索和修改数据,而所有的修改操作都会同步到其它的主服务器上;而主从复制只能形成 主->从 的单向复制,也就是说,...

mysql的主从复制会同步mysql数据库吗
mysql的主从复制开启之后,从数据库会立马复制主数据库中的数据。然后,对主数据库进行增,删,改操作之后,从数据库也会进行相同的操作。不过,对从数据库进行增,删,改操作的话,对主数据库是没有任何影响的

MySQL 主从,5 分钟带你掌握
所谓 MySQL 主从,就是建立两个完全一样的数据库,一个是主库,一个是从库, 主库对外提供读写的操作,从库对外提供读的操作 ,下面是一主一从模式:对于数据库单机部署,在 4 核 8G 的机器上运行 MySQL 5.7 时,大概可以支撑 500 的 TPS 和 10000 的 QPS, 当遇到一些活动时,...

MySQL实现一主对多从配置详解mysql一主对多从
在MySQL中,主从同步模式实现了一个主库向多个从库的数据同步,主库上的数据变化会被同步到所有的从库中,实现数据库的负载均衡。主从同步必须要建立一个稳定的网络信道,确保从库能够及时接受主库的变更日志。二、配置流程 1.修改主库的配置 我们需要修改主库的my.cnf配置文件,开启二进制日志功能。在...

如何恢复MySQL主从数据一致性
最近被告知,MySQL主从数据库的数据不一致,猜测备库在同步过程中出现了问题,于是,登上备库,使用 mysql> show slave status\\G查看,果然,备库在insert语句中因违反主键约束,导致备库停止了同步。现在的问题很明确,就是如何恢复主从库数据的一致性。可选方案如下:一、查看Master最新的Position,将其...

mysql数据库的主从同步是数据同步还是结构同步?
表示跳过一步错误,后面的数字可变 set global sql_slave_skip_counter =1;start slave;之后再用mysql> show slave status\\G 查看:Slave_IO_Running: Yes Slave_SQL_Running: Yes ok,现在主从同步状态正常了。。。方式二:重新做主从,完全同步 该方法适用于主从库数据相差较大,或者要求数据完全...

MySQL的主从数据表设置与应用mysql中主从数据表
从数据表是指在MySQL集群中进行数据读取和备份的数据库表。在从数据表中,不允许进行INSERT、UPDATE、DELETE等操作。从数据表中的数据是从主数据表中同步过来的。二、主从数据表的配置方法 在MySQL中,可以通过配置my.cnf文件来实现主从数据表的设置。具体步骤如下:1. 在主服务器上设置主数据表 (1)...

mysql主主同步,从库不同步应该怎么解决
本文介绍使用percona-toolkit工具对mysql主从数据库的同步状态进行检查和重新同步。一:安装percona-toolkit二:修改mysql 的binlog格式binlog_format参数为row格式mysql binlog日志有三种格式,分别为Statement, Mixed,以及ROW!1.Statement:每一条会修改数据的sql都会记录在binlog中。优点:不需要记录每一行的...

相似回答