什么是大事务?

2020-06-11 00:00:00 专区 参数 事务 导入 调整

  • 定义:运行时间比较长,操作的数据比较多的事务我们称之为大事务。
  • 大事务风险:
    ∘ 锁定太多的数据,造成大量的阻塞和锁超时,回滚所需要的时间比较长。
    ∘ 执行时间长,容易造成主从延迟。
    ∘ undo log膨胀
  • 避免大事务:我这里按公司实际场景,规定了,每次操作/获取数据量应该少于5000条,结果集应该小于2M


mysqldump出来的SQL文件有大事务吗?前提,MySQL 默认是自提交的,所以如果没有明确地开启事务,一条 SQL 语句就是一条事务。在 mysqldump 里,就是一条 SQL 语句为一条事务。
按照我的“避免大事务”自定义规定,答案是没有的。原来,mysqldump 会按照参数–net-buffer-length,来自动切分 SQL 语句。默认值是 1M。按照我们前面定义的标准,没有达到我们的 2M 的大事务标准。–net-buffer-length 大可设置为 16777216,人手设置大于这个值,会自动调整为 16777216,即 16M。设置 16M,可以提升导出导入性能。如果为了避免大事务,那就不建议调整这个参数,使用默认值即可。

  1. [root@192-168-199-198 ~]# mysqldump --net-buffer-length=104652800 -uroot -proot -P3306 -h192.168.199.198 test t >16M.sql
  2. mysqldump: [Warning] option 'net_buffer_length': unsigned value 104652800 adjusted to 16777216
  3. #设置大于16M,参数被自动调整为16M


注意,指的是 mysqldump 的参数,而不是 mysqld 的参数。官方文档提到: If you increase this variable, ensure that the MySQL server net_buffer_length system variable has a value at least this large.
意思是 mysqldump 增大这个值,mysqld 也得增大这个值,测试结论是不需要的。怀疑官方文档有误。
不过,在导入的时候,受到服务器参数 max_allowed_packet 影响,它控制了服务器能接受的数据包的大大小,默认值是 4194304,即 4M。所以导入数据库时需要调整参数 max_allowed_packet 的值。

相关文章