问题描述
MySQL 实例 CPU 利用率过高通常容易导致系统异常,例如响应变慢、无法获取连接、超时等,大量的超时重试往往是性能“雪崩”的罪魁祸首。而 CPU 利用率过高场景,很多时候均是由异常 SQL 所导致,大量锁冲突、锁等待或事务未提交也有可能导致 MySQL 实例 CPU 利用率高。
当数据库执行业务查询、修改语句时,CPU 会先从内存中请求数据块(默认是8kb):
如果内存中存在对应的数据,CPU 执行计算任务后会将结果返回给用户,可能涉及到排序类高消耗 CPU 的动作。
如果内存中不存在对应的数据,数据库会触发从磁盘获取数据的动作。
这两个数据获取过程分别称为逻辑读和物理读。因此,性能较低的 SQL,在执行时容易让数据库产生大量的逻辑读,从而导致 CPU 利用率过高,也可能让数据库产生大量的物理读,从而导致 IOPS 和 I/O 时延过高。
解决方案
DBbrain 为用户提供三大功能来排查和优化导致 CPU 利用率过高的异常 SQL 语句:
异常诊断:7 * 24小时异常发现诊断,提供实时优化建议。
慢 SQL 分析:针对当前实例出现的慢 SQL 进行分析,并给出慢 SQL 的优化建议。
审计日志分析:利用云数据库审计数据(全量 SQL),多维度深入分析 SQL 语句并给出优化建议。
方式一:使用“异常诊断”功能排查数据库异常情况(推荐)
异常诊断功能提供故障主动定位和优化,不需要任何数据库运维经验,不仅包括 CPU 利用率过高的异常,还几乎涵盖所有 MySQL 实例高频的异常和故障。
操作步骤及示例如下:
2. 在左上角选择实例 ID(可输入和搜索),切换至目标实例。
3. 在页面中选择“实时”或“历史”要查询的时间,若该时间段内存在故障,可在右侧的“诊断提示”中查看到概要信息。
4. 单击“实时/历史诊断”栏的查看详情或“诊断提示”栏的诊断项可进入诊断详情页。
事件概要:包括诊断项、起止时间、风险等级、持续时长、概要等信息。
现象描述:异常事件(或健康巡检事件)的外在表现现象的快照和性能趋势。
智能分析:分析导致性能异常的根本原因,定位具体操作。
专家建议:提供优化指导建议,包括但不限于 SQL 优化(索引建议、重写建议)、资源配置优化和参数调优。
5. 选择专家建议页,即可查看 DBbrain 针对该故障给出的优化建议,本例中是 SQL 语句的优化建议。本例中的 SQL 语句执行时缺少对应的索引,导致该语句执行时要进行全表扫描,单次执行成本高,所以大量并发场景下就很容易导致 CPU 利用率过高,可能会达到100%的状况。
方式二:使用“慢 SQL 分析”功能排查导致 CPU 利用率过高的 SQL
2. 在左上角选择实例 ID(可输入和搜索),切换至目标实例。
3. 在页面中选择要查询的时间,若此实例在该时间段中有慢 SQL,SQL 统计会以柱形图的方式展示慢 SQL 产生的时间点和个数。
单击柱形图,下方的列表会显示对应的所有慢 SQL 信息(模板聚合之后的 SQL),右方会显示该时间段内 SQL 的耗时分布。
4. 针对 SQL 列表中 SQL 执行的数据进行判断和筛选,下面简单介绍一种判断方式:
1. 先按照平均耗时(或者最大耗时)降序,重点关注耗时处在 top 的 SQL,不推荐使用总耗时,容易受到执行次数多而累加的干扰。
2. 然后关注返回行数和扫描行数的值。
若发现“返回行数”与“扫描行数”值相等的 SQL,大概率是全表查找并返回了。
若发现几行 SQL 都有很多扫描行数,但返回行数都为0或特别小,说明系统产生了大量的逻辑读和物理读。当查找的数据量过大且内存不足时,该请求必然会产生大量的物理 I/O 请求,导致 I/O 资源大量消耗;大量的逻辑读便会占用大量的 CPU 资源,导致 CPU 利用率过高。
3. 单击 SQL 语句,可查看该 SQL 语句的详情、资源消耗以及优化建议。
分析页:可查看完整的 SQL 模板、SQL 样例以及优化建议和说明,您可根据 DBbrain 给出的专家建议优化 SQL,提升 SQL 性能,降低 SQL 执行的耗时。
统计页:可根据统计报表的总锁等待时间占比、总扫描行数占比、总返回行数占比,横向分析该条慢 SQL 产生的具体原因,以及进行对应优化。
耗时分布页:可查看该类型的 SQL(经过聚合后汇总的)运行的时间分布区间,以及来源 IP 的访问占比。
方式三:使用“审计日志分析”功能排查导致 CPU 利用率过高的 SQL
前提条件:实例需要开通数据库审计功能。
2. 在左上角选择实例 ID(可输入和搜索),切换至目标实例。
3. SQL 透视图可选择 QPS 或慢查询次数维度。单击视图右上角的创建审计任务,选择任务开始时间和时间间隔,单击确定。
任务创建后,任务列表中会显示任务生成,任务完成后,找到目标记录并单击查看SQL分析,进入 SQL 分析详情页。
4. 在 SQL 分析页,可选择 SQL Type、Host、User 或 SQL Code 维度的视图,并可选择时间段拉伸视图来查看具体时间点的数据。
下面表格中会展示该时间段内 SQL 的聚合详情以及执行信息。若对图中时间进行部分拉伸选中,表格中的 SQL 数据会随之变化,仅展示图中时间范围内的 SQL 分析结果。
5. SQL 分析详情页下方表格中展示了聚合后的 SQL 执行的信息,包括执行次数、总延迟、最大延迟、最小延迟、总影响行数、最大影响行数、最小影响行数等。可根据各项信息的组合排序,识别出待优化的SQL。
示例:
根据执行次数降序排列,以定位执行次数较大或者执行次数有异常变化的语句,然后分析 SQL 执行次数的合理性并根据 DBbrain 给出的建议优化 SQL 语句。
通过查看执行次数、总延迟、最大延迟,可以判断出执行次数最多的前两个 SQL 语句的平均执行延迟很短,说明这两个 SQL 语句性能未出现异常。
但观察第三条语句就会明显发现其单条执行时间在100s左右,因为执行次数较少,故总延迟未在 top 前2,但这类 SQL 是需要进行优化的,可单击 SQL 查看 DBbrain 给出的专家建议、资源消耗分析曲线以及来源 IP 分析等。
还有一类 SQL 也需要引起重视,可以看到第四条语句的最大延迟和最小延迟相差很大,达到了200s以上,说明整个系统存在波动,需要进一步分析波动是因为网络问题还是数据量变化导致了执行计划改变。
如果 SQL 语句的执行次数和平均耗时相对比较合理,而且执行次数大的 SQL 也是最优的,如果性能达到瓶颈的话,建议 升级实例规格配置 或者使用 读写分离功能 来打散执行次数较大的 SQL 语句,或者采用前置缓存数据库进行优化。
本页内容是否解决了您的问题?