加入收藏 | 设为首页 | 会员中心 | 我要投稿 92站长网 (https://www.92zz.com.cn/)- 科技、建站、经验、云计算、5G、大数据,站长网!
当前位置: 首页 > 综合聚焦 > 移动互联 > 通讯 > 正文

怎么领略MySQL中多源复制引起的内存泄漏

发布时间:2021-12-20 10:51:57 所属栏目:通讯 来源:互联网
导读:怎么理解MySQL中多源复制引起的内存泄漏,针对这个问题,这篇文章详细介绍了相对应的分析和解答,希望可以帮助更多想解决这个问题的小伙伴找到更简单易行的方法。 场景 : MySQL-5.7, 所有的小版本(=17), percona-mysql-5.7所有版本; 开启多源复制的只读实例的
怎么理解MySQL中多源复制引起的内存泄漏,针对这个问题,这篇文章详细介绍了相对应的分析和解答,希望可以帮助更多想解决这个问题的小伙伴找到更简单易行的方法。
 
 
 
场景 :
MySQL-5.7, 所有的小版本(<=17), percona-mysql-5.7所有版本;
开启多源复制的只读实例的内存无限增长, 直到触发系统的OOM Kill;
 
结论 :
mysql bug, 附上bug单链接: https://bugs.mysql.com/bug.php?id=85371
  
问题原因:
目前只能基于现象来分析;
 
开启binlog_rows_query_log_events之后, 启用多源复制的slave会出现内存泄漏;
表现为内存使用率不断增长: 占用内存的为slave_sql线程, 数据库事件为memory/sql/Log_event;
 
 
相关数据(来源于截图中的实例):
重启只读slave之后, 相关事件的内存使用:
申请了内存,但是没有释放过: COUNT_FREE, SUM_NUMBER_OF_BYTES_FREE为0
 
 
 
点击(此处)折叠或打开
 
*************************** 2. row ***************************
                   THREAD_ID: 18189
                  EVENT_NAME: memory/sql/Log_event
                 COUNT_ALLOC: 521692
                  COUNT_FREE: 0
   SUM_NUMBER_OF_BYTES_ALLOC: 117988604
    SUM_NUMBER_OF_BYTES_FREE: 0
...
    LOW_NUMBER_OF_BYTES_USED: 25286276
CURRENT_NUMBER_OF_BYTES_USED: 117988604
   HIGH_NUMBER_OF_BYTES_USED: 117988604
*************************** 3. row ***************************
                   THREAD_ID: 18183
                  EVENT_NAME: memory/sql/Log_event
                 COUNT_ALLOC: 521426
                  COUNT_FREE: 0
   SUM_NUMBER_OF_BYTES_ALLOC: 117732632
    SUM_NUMBER_OF_BYTES_FREE: 0
...
    LOW_NUMBER_OF_BYTES_USED: 25154914
CURRENT_NUMBER_OF_BYTES_USED: 117732632
   HIGH_NUMBER_OF_BYTES_USED: 117732632
 
两小时以后:
 
 
 
点击(此处)折叠或打开
 
*************************** 1. row ***************************
                   THREAD_ID: 18189
                  EVENT_NAME: memory/sql/Log_event
                 COUNT_ALLOC: 2297022
                  COUNT_FREE: 0
   SUM_NUMBER_OF_BYTES_ALLOC: 525744164
    SUM_NUMBER_OF_BYTES_FREE: 0
...
    LOW_NUMBER_OF_BYTES_USED: 25286276
CURRENT_NUMBER_OF_BYTES_USED: 525744164
   HIGH_NUMBER_OF_BYTES_USED: 525744164
*************************** 2. row ***************************
                   THREAD_ID: 18183
                  EVENT_NAME: memory/sql/Log_event
                 COUNT_ALLOC: 2296412
                  COUNT_FREE: 0
   SUM_NUMBER_OF_BYTES_ALLOC: 524600639
    SUM_NUMBER_OF_BYTES_FREE: 0
...
    LOW_NUMBER_OF_BYTES_USED: 25154914
CURRENT_NUMBER_OF_BYTES_USED: 524600639
   HIGH_NUMBER_OF_BYTES_USED: 524600639
 
event对应的线程:
 
 
 
点击(此处)折叠或打开
 
*************************** 1. row ***************************
        thd_id: 18183
       conn_id: 18158
          user: sql/slave_sql
       command: Sleep
         state: Slave has read all relay log; waiting for more updates
current_memory: 532.28 MiB
*************************** 2. row ***************************
        thd_id: 18189
       conn_id: 18164
          user: sql/slave_sql
       command: Sleep
         state: Slave has read all relay log; waiting for more updates
current_memory: 533.50 MiB
2 rows in set (0.10 sec)
 
解决方案 :
关闭binlog_rows_query_log_events(默认就是关闭的),
实际上这个参数主要是控制binlog中是否记录原始SQL语句的, 主要是Debug用;
而平时用-vv来解析binlog以后, 本身也会注明row模式中的SQL语句, 可读性也还可以接受;
 
这个bug目前是S2(Serious)
 
关闭这个配置以后, 内存变化如上图的后半部分, 基本可以看到不再有明显的上升趋势;
需要注意的是, 并不一定就不再有内存泄漏的问题了。
 
关于怎么理解MySQL中多源复制引起的内存泄漏问题的解答就分享到这里了,希望以上内容可以对大家有一定的帮助,如果你还有很多疑惑没有解开,可以关注亿速云行业资讯频道了解更多相关知识。

(编辑:92站长网)

【声明】本站内容均来自网络,其相关言论仅代表作者个人观点,不代表本站立场。若无意侵犯到您的权利,请及时与联系站长删除相关内容!

    热点阅读