MySQL 调优笔记

1.如何定位慢查询?

定位慢查询主要依靠 MySQL 的慢查询日志配合工具如 pt-query-digest ,mysqldumpslow 进行分析,或者通过 performance_schema 进行实时监控,进一步可以使用 EXPLAIN 分析执行计划。

-> 开启慢查询日志

-- 查看慢查询日志是否开启:
SHOW VARIABLES LIKE 'slow_query_log%';
-- 开启慢查询日志(立即生效)
SET GLOBAL slow_query_log = 'ON';
-- 设置慢查询时间阈值为 1 秒:
SET GLOBAL long_query_time = 1;
-- 设置慢查询日志文件路径(可选)
SET GLOBAL slow_query_log_file = '/var/log/mysql/mysql-slow.log';
-- 查看慢查询文件位置:
SHOW VARIABLES LIKE 'slow_query_log_file';
-- 查看慢查询总数:
SHOW GLOBAL STATUS LIKE 'Slow_queries';

-> 收集慢查询日志(慢于 long_query_time 的语句)

-> 使用工具提取 Top N 慢 SQL(如 pt-query-digest)

mysqldumpslow -s t -t 10 /var/log/mysql/slow.log
pt-query-digest /var/log/mysql/slow.log

-> 对具体 SQL 使用 EXPLAIN 或 EXPLAIN ANALYZE 分析执行计划

EXPLAIN SELECT * FROM user WHERE name LIKE '%abc%';
EXPLAIN ANALYZE SELECT * FROM user WHERE id = 123;

-> 判断是否索引失效 / 全表扫描 / 关联顺序不佳等

-> 优化 SQL 或加索引,重复测试

2.一个 SQL 语句执行很慢,如何分析 ?

我用 EXPLAIN 分析 SQL 时,重点关注以下几个字段:

type 是访问类型,性能最好的是 const(主键查单条)、eq_ref/ref(使用索引查找),次一点的是 range(范围扫描),最差的是 ALL(全表扫描),index(全索引扫描);

key 表示实际使用的索引,若为 NULL 则说明没有用到索引,通常性能较差,如果 possible_key 有值,而 key 为 null,证明有索引可能能用但是没命中,就需要考虑是什么原因导致了索引失效;

rows 代表预估扫描的行数,数字越小越好,过大说明扫描量大,效率低;

Extra 字段里如果出现 Using filesort 或 Using temporary,说明使用了额外的排序或临时表,通常是性能瓶颈;如果看到 Using index 则说明是覆盖索引,性能很好,避免了回表;

综上,通过这些字段可以判断 SQL 是否命中索引,扫描量是否合理,以及是否存在额外开销,从而指导优化方案。

3.什么情况下索引会失效 ?

1.违反最左前缀匹配原则: 复合索引(多列索引)只有从最左边的列开始按顺序使用,跳过最左列会失效。

2.使用了函数: 如 WHERE YEAR(create_time) = 2023,索引失效,因为函数包裹了列,MySQL 无法用索引直接匹配。

3. 使用了通配符 % 开头的 LIKE:LIKE '%abc' 无法使用索引,因为前缀不确定,但 LIKE 'abc%' 是可以走索引的。

4. 隐式类型转换: 查询条件的数据类型与索引列类型不匹配,会导致索引失效。

5. OR 条件没有覆盖所有列的索引:如果只用部分索引,另一部分条件需要全表扫描,这样部分索引的使用反而可能加重了整体扫描成本。

6. 使用了 NOT 或 <> 等否定条件: 例如 WHERE col <> 1,MySQL一般无法利用索引。

7. 不等式比较符号(<, >, !=)后面的列索引不能用: 在复合索引中,使用不等式后,后续的列索引无法使用。 复合索引中,遇到范围查询(如 b > 10)后,索引只能定位该范围,后续列(如 c)索引失效,需回表过滤;而对同一列的多范围条件(如 b > 10 AND b < 20)则仍能利用索引缩小扫描范围。

4.MYSQL 超大分页怎么处理 ?

超大分页避免使用 LIMIT offset, size,改用基于唯一索引的范围查询(如 WHERE id > last_id LIMIT size)实现延迟关联,极大提升查询效率。或者分表分库通过拆分数据减少单表数据量。亦或者热点数据可考虑缓存。

5.谈谈你对 SQL 的优化的经验

1. 合理设计索引

根据查询条件设计覆盖索引,尽量减少回表。

避免冗余和过多索引,减少写入负担。

注意复合索引最左前缀原则,尽量让查询条件匹配索引顺序。

2. 优化查询语句

避免 SELECT *,只查需要的列。

避免在索引列上使用函数或表达式,保证索引可用。

拆分复杂查询,避免过多 JOIN 或子查询。

OR 语句可拆成多条 UNION 查询。

3. 合理使用分页

避免大偏移量分页,使用基于唯一索引的延迟关联分页。

热点数据可考虑缓存。

4. 分析执行计划

使用 EXPLAIN 分析查询路径,重点看 typepossible_keyskeyrowsExtra 字段。

确认索引是否被使用,避免全表扫描。

注意是否有 Using filesortUsing temporary,这可能是性能瓶颈。

5.数据量与分区

对超大表考虑分区或分表,降低单表压力。

归档历史数据,减少热点数据量。

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.pswp.cn/pingmian/84918.shtml

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

嵌入式 STM32 开发问题:烧录 STM32CubeMX 创建的 Keil 程序没有反应

烧录 STM32CubeMX 创建的 Keil 程序没有反应问题原因 大概率是因为没有勾选 Reset and Run&#xff0c;程序成功烧录到&#xff0c;但芯片不会自动复位并执行&#xff0c;而是保持停止状态 处理策略 在 Keil 中勾选 Reset and Run 点击 【Options for Target】 点击 【Debu…

Flower框架中noise_multiplier与clipped_count_stddev的关系

noise_multiplier 与 clipped_count_stddev 的数学关系 在差分隐私联邦学习中&#xff0c;noise_multiplier 和 clipped_count_stddev 是两个核心参数&#xff0c;它们共同决定了隐私保护强度和模型精度的权衡。理解它们的关系需要从差分隐私的数学原理入手&#xff1a; 1. 高…

Laravel 从版本 5 到 12 每个版本都引入了一些新的特性、改进和弃用的功能

Laravel 从版本 5 到 12 经历了多次更新,每个版本都引入了一些新的特性、改进和弃用的功能。下面是这些主要版本之间的关键区别: Laravel 5 Lumen: 引入了微框架 Lumen。Elixir: Elixir 是一个用于编译和合并前端资源的工具,后来被 Laravel Mix 取代。Middleware Groups: 引…

Lambda 表达式的语法与使用:更简洁、更灵活的函数式编程!

全文目录&#xff1a; 开篇语Lambda 表达式的语法与使用&#xff1a;更简洁、更灵活的函数式编程一、Lambda 表达式的语法1.1 Lambda 表达式的基本语法形式 二、Lambda 表达式的使用2.1 Lambda 表达式与匿名内部类的对比代码示例&#xff1a;使用匿名内部类和 Lambda 表达式实现…

从0到1开发一个自己的工具 MCP 并发布到 test PyPi(Python个人版)

目录 1. 我理解的 MCP2. 写一个自己的MCP然后发布到 PyPi 上&#xff0c;包括加法工具和获取当前 ip 工具2.1 先碎碎念一下 uv2.2 初始化项目&#xff08;全程在 cmd 下运行命令&#xff09;2.3 添加 mcp 依赖2.4 添加 server.py&#xff0c;先把加法功能添加上2.5 运行并测试加…

RabbitMQ缓存详解:由来、发展、核心场景与实战应用

一、RabbitMQ的由来与发展历程 1.1 RabbitMQ的诞生背景 RabbitMQ诞生于金融行业的需求,最初由Rabbit Technologies Ltd开发,后被SpringSource收购,最终成为Pivotal的一部分。它的设计初衷是为了解决分布式系统中消息可靠传输的问题。在早期金融交易系统中,系统间的通信需…

机器学习与深度学习18-线性代数01

目录 前文回顾1.特征向量和特征值2.矩阵与模型3.内积和外积4.向量的范数5.正交矩阵 前文回顾 上一篇文章地址&#xff1a;链接 1.特征向量和特征值 在机器学习中&#xff0c;特征向量和特征值是用于描述数据集中的特征或变量之间关系的重要概念。它们在降维技术&#xff08;…

如何让 VS Code 仅通过滚轮放大字体,而不缩放整个界面?

在 VS Code 中&#xff0c;默认情况下使用 Ctrl滚轮&#xff08;Windows/Linux&#xff09;或 Cmd滚轮&#xff08;Mac&#xff09;会同时缩放整个界面&#xff08;包括 UI 元素和编辑器字体&#xff09;。如果你希望仅放大编辑器字体而不影响界面缩放&#xff0c;可以通过以下…

Vue3中v-bind指令用法详解

在 Vue 3 中&#xff0c;v-bind 是一个核心指令&#xff0c;用于动态绑定 HTML 属性或组件的 props 到 Vue 实例的数据。以下是详细讲解&#xff1a; 一、基础用法 1. 绑定单个属性 vue 复制 下载 <template><!-- 绑定 img 的 src 属性 --><img v-bind:src…

算法题(169):最大子段和(分治思想)

审题&#xff1a; 本题需要我们找到区间的最大子段和并输出结果 思路&#xff1a; 方法一&#xff1a;分治思想 我们可以把给定区间平均分成两部分&#xff0c;然后获取左段区间的最大子段和&#xff0c;右段区间的最大子段和&#xff0c;以及跨区间的最大子段和。最后比较出他…

Linux 线程深度解析:从内存管理到线程控制的核心机制

文章目录 引言一、Linux 线程概念1.1 什么是线程1.2 分页式存储管理1.2.1 虚拟地址和页表的由来1.2.2 物理内存管理struct page 的主要用途 1.2.3 页表1.2.4 页目录结构1.2.5 两级页表的地址转换1.2.6 缺页异常 1.3 线程的优点1.4 线程缺点1.5 线程异常1.6 线程用途 二、Linux进…

玩转计算机视觉——按照配置部署paddleOCR(英伟达环境与昇腾300IDUO环境)

英伟达环境安装 创建虚拟环境 conda create -n paddleOCR python3.10 -y conda activate paddleOCRconda install jupyterlab -y conda install ipykernel -y python -m ipykernel install --user --name paddleOCR --display-name "paddle OCR"下载PaddleOCR的GPU…

Java机器学习全攻略:从基础原理到实战案例详解

在当今AI驱动的技术浪潮中,机器学习已成为Java开发者必须掌握的核心技能之一。本文将系统性地介绍Java机器学习的原理基础、常用框架,并通过多个实战案例展示如何在实际项目中应用这些技术。无论你是刚接触机器学习的Java开发者,还是希望巩固基础的中级工程师,这篇文章都将…

eBPF 技术详解及其在网络安全领域的应用与挑战

摘要 eBPF&#xff08;extended Berkeley Packet Filter&#xff09;是 Linux 内核中的一项革命性技术&#xff0c;它允许用户在不修改内核代码或加载内核模块的情况下&#xff0c;安全、高效地运行自定义程序。eBPF 的出现极大地扩展了 Linux 内核的可编程性&#xff0c;使其…

error:MISCONF Redis is configured to save RDB snapshots

一、背景 在使用redis异步驱动方式下&#xff0c;执行hset指令时&#xff0c;报错 redisAsyncCommand((redisAsyncContext *)c, dumpReply, "hset role:10001", "hset role:10001 name %s age %d sex %s", "mark", 31, "male");二、原…

Android-Mod-Menu 使用教程

目录 简介前提条件安装步骤1. 下载和解压项目2. 配置 Android Studio3. 安装到设备 修改游戏 APK1. 确定游戏主活动2. 集成模组菜单方法 1&#xff1a;通过服务启动&#xff08;推荐&#xff09;方法 2&#xff1a;通过活动启动&#xff08;仅在游戏检测模组时使用&#xff09;…

SpringBoot 自动化部署实战:从环境搭建到 CI/CD 全流程

SpringBoot 自动化部署全流程实战 一、环境准备&#xff08;开发侧&#xff09; 基础工具链安装&#xff1a; # JDK 17 brew install openjdk17 # Maven 构建工具 brew install maven # Docker 环境 brew install --cask docker项目配置验证&#xff1a; <!-- pom.xml 关…

Flutter动画与交互:打造流畅用户体验的完整指南

在移动应用开发中&#xff0c;流畅的动画和自然的交互是提升用户体验的关键因素。Flutter作为Google推出的跨平台UI工具包&#xff0c;提供了一套强大而灵活的动画系统&#xff0c;使开发者能够轻松创建专业级的动画效果。本文将深入探讨Flutter中的动画与交互技术&#xff0c;…

山东大学软件学院项目实训:基于大模型的模拟面试系统项目总结(九)

在山东大学软件学院的项目实训中&#xff0c;团队成员们围绕基于大模型的模拟面试系统展开了一系列开发与优化工作。以下是本周项目的核心进展与成果总结。 前端界面优化与 Bug 修复&#xff08;吴尤&#xff09; Logo 显示问题修复 在项目开发过程中&#xff0c;团队发现项…

14.vue.js的watch()的注意事项(1)

一、 Q &#xff1a;因为 state 有内部的属性 也就是id。 因为要追逐id。所以要写函数&#xff1f;而不能直接监听state。 只监听state &#xff0c;监听不到id的变化吗&#xff1f; A&#xff1a; 为什么监听 state 不等于监听 state.id&#xff1f; 在 Vue 3 中&#xff0…