AskOverflow.Dev

AskOverflow.Dev Logo AskOverflow.Dev Logo

AskOverflow.Dev Navigation

  • 主页
  • 系统&网络
  • Ubuntu
  • Unix
  • DBA
  • Computer
  • Coding
  • LangChain

Mobile menu

Close
  • 主页
  • 系统&网络
    • 最新
    • 热门
    • 标签
  • Ubuntu
    • 最新
    • 热门
    • 标签
  • Unix
    • 最新
    • 标签
  • DBA
    • 最新
    • 标签
  • Computer
    • 最新
    • 标签
  • Coding
    • 最新
    • 标签
主页 / dba / 问题 / 16950
Accepted
Max
Max
Asked: 2012-04-25 04:59:45 +0800 CST2012-04-25 04:59:45 +0800 CST 2012-04-25 04:59:45 +0800 CST

调查 MySQL 吞吐量的峰值

  • 772

最近我们的一台服务器内存不足并崩溃了。查看munin图表后,似乎在崩溃前达到峰值的唯一指标(内存使用率除外)是MySQL throughput. 然而,我们预计会看到相应的增加数量MySQL queries并没有发生:

在此处输入图像描述 在此处输入图像描述

我们想找出导致 MySQL 吞吐量达到峰值的原因。以下是崩溃中的 bin 日志列表:

101M Apr 17 01:27 drupal_master-bin.001270
106M Apr 17 03:00 drupal_master-bin.001271
101M Apr 17 04:05 drupal_master-bin.001272
104M Apr 17 05:53 drupal_master-bin.001273
104M Apr 17 06:39 drupal_master-bin.001274
101M Apr 17 07:02 drupal_master-bin.001275
104M Apr 17 07:22 drupal_master-bin.001276  # 100M filled up in 1 min
106M Apr 17 07:23 drupal_master-bin.001277
101M Apr 17 07:33 drupal_master-bin.001278
101M Apr 17 07:43 drupal_master-bin.001279
104M Apr 17 07:46 drupal_master-bin.001280
102M Apr 17 08:29 drupal_master-bin.001281
102M Apr 17 08:46 drupal_master-bin.001282
105M Apr 17 08:54 drupal_master-bin.001283
 13M Apr 17 09:26 drupal_master-bin.001284  # crash of server around 09:50
# prior to crashing load went very high (we saw 45) and server was extremely slow (few min delay when typing in an SSH session)
101M Apr 17 10:54 drupal_master-bin.001285  # server up again, nothing wrong since then

我一直在寻找分析这些 bin 日志的工具。到目前为止,我发现:

binlog-analyze.pl:为我提供了已处理查询的概述,并在select, insert, update.. 上进行了细分(仅供参考,我在脚本中替换select into为select,因为它似乎是错误的)。

$ mysqlbinlog /path/to/bin.log | binlog-analyze.pl -v

pt-query-digest:给我关于查询大小的统计信息(最小,最大,平均......)。该实用程序有很多选择,但我不知道要寻找什么。

$ mysqlbinlog /path/to/bin.log | pt-query-digest

我们想知道是哪些查询导致 MySQL 输出增加。

有人可以指导如何查看 MySQL bin 日志以识别导致 MySQL 吞吐量突然增加的查询吗?

mysql performance
  • 2 2 个回答
  • 3779 Views

2 个回答

  • Voted
  1. Best Answer
    RolandoMySQLDBA
    2012-04-25T07:58:52+08:002012-04-25T07:58:52+08:00

    分析二进制日志可能无法为您提供准确的图片,因为二进制日志包含已完成并插入二进制日志中的查询,如 FIFO 队列。

    您真正需要寻找的是主动运行查询的直方图是什么样的。换句话说,您需要捕获进程列表,以揭示特定情况出现时的查询和性能。

    我强烈推荐使用 pt-query-digest 但你需要以不同的方式使用它。让查询摘要处理二进制日志条目,让它处理进程列表 LIVE !!!

    我写了一篇过去的帖子(2011 年 11 月 24 日)关于如何使用pt-query-digest(我的帖子使用mk-query-digest)作为慢查询日志的替代品(我已经发布了我使用的实际脚本以及如何读取查询摘要输出):MySQL 一般查询日志的性能影响。我过去的帖子基于一个 YouTube 视频,展示了如何做到这一点。我只是简单地使用mk-query-digest模拟自己。

    • 1
  2. Rick James
    2012-05-18T14:53:16+08:002012-05-18T14:53:16+08:00

    最近我们的一台服务器内存不足并崩溃了。

    你不允许交换吗?否则,MySQL 会变慢(惨不忍睹),但不会崩溃。交换应该避免,但不能阻止。

    您是否将某些可调参数设置得太高?见http://mysql.rjweb.org/doc.php/memory

    • 0

相关问题

  • 我在哪里可以找到mysql慢日志?

  • 如何优化大型数据库的 mysqldump?

  • 什么时候是使用 MariaDB 而不是 MySQL 的合适时机,为什么?

  • 组如何跟踪数据库架构更改?

Sidebar

Stats

  • 问题 205573
  • 回答 270741
  • 最佳答案 135370
  • 用户 68524
  • 热门
  • 回答
  • Marko Smith

    如何查看 Oracle 中的数据库列表?

    • 8 个回答
  • Marko Smith

    mysql innodb_buffer_pool_size 应该有多大?

    • 4 个回答
  • Marko Smith

    列出指定表的所有列

    • 5 个回答
  • Marko Smith

    从 .frm 和 .ibd 文件恢复表?

    • 10 个回答
  • Marko Smith

    如何在不修改我自己的 tnsnames.ora 的情况下使用 sqlplus 连接到位于另一台主机上的 Oracle 数据库

    • 4 个回答
  • Marko Smith

    你如何mysqldump特定的表?

    • 4 个回答
  • Marko Smith

    如何选择每组的第一行?

    • 6 个回答
  • Marko Smith

    使用 psql 列出数据库权限

    • 10 个回答
  • Marko Smith

    如何从 PostgreSQL 中的选择查询中将值插入表中?

    • 4 个回答
  • Marko Smith

    如何使用 psql 列出所有数据库和表?

    • 7 个回答
  • Martin Hope
    Mike Walsh 为什么事务日志不断增长或空间不足? 2012-12-05 18:11:22 +0800 CST
  • Martin Hope
    Stephane Rolland 列出指定表的所有列 2012-08-14 04:44:44 +0800 CST
  • Martin Hope
    haxney MySQL 能否合理地对数十亿行执行查询? 2012-07-03 11:36:13 +0800 CST
  • Martin Hope
    qazwsx 如何监控大型 .sql 文件的导入进度? 2012-05-03 08:54:41 +0800 CST
  • Martin Hope
    markdorison 你如何mysqldump特定的表? 2011-12-17 12:39:37 +0800 CST
  • Martin Hope
    pedrosanta 使用 psql 列出数据库权限 2011-08-04 11:01:21 +0800 CST
  • Martin Hope
    Jonas 如何使用 psql 对 SQL 查询进行计时? 2011-06-04 02:22:54 +0800 CST
  • Martin Hope
    Jonas 如何从 PostgreSQL 中的选择查询中将值插入表中? 2011-05-28 00:33:05 +0800 CST
  • Martin Hope
    Jonas 如何使用 psql 列出所有数据库和表? 2011-02-18 00:45:49 +0800 CST
  • Martin Hope
    bernd_k 什么时候应该使用唯一约束而不是唯一索引? 2011-01-05 02:32:27 +0800 CST

热门标签

sql-server mysql postgresql sql-server-2014 sql-server-2016 oracle sql-server-2008 database-design query-performance sql-server-2017

Explore

  • 主页
  • 问题
    • 最新
    • 热门
  • 标签
  • 帮助

Footer

AskOverflow.Dev

关于我们

  • 关于我们
  • 联系我们

Legal Stuff

  • Privacy Policy

Language

  • Pt
  • Server
  • Unix

© 2023 AskOverflow.DEV All Rights Reserve