」工欲善其事,必先利其器。「—孔子《論語.錄靈公》
首頁 > 程式設計 > 管理 MySQL 中長時間運行的查詢

管理 MySQL 中長時間運行的查詢

發佈於2024-08-31
瀏覽:194

长时间运行的查询可能会严重影响 MySQL 数据库性能,导致从响应时间缓慢到影响每个用户的全面瓶颈等各种问题。处理这些烦人的查询——了解它们是什么、为什么发生以及如何管理它们——是保持数据库平稳运行的关键。

无论是尽早发现它们、阻止它们,还是设置自动处理它们的方法,本指南都能满足您的要求。

什么是长时间运行的查询?

MySQL 中的长时间运行查询是指执行时间异常长的查询。
将查询归类为“长时间运行”的具体持续时间可能会有所不同,具体取决于应用程序的性能标准。一般来说,如果查询运行时间比平常长并且开始减慢数据库速度,则它被视为长时间运行。

长时间运行查询的根本原因

长时间运行查询的原因可能多种多样:

  • 缺乏适当的索引 – 如果没有适当的索引,MySQL 必须扫描整个表才能检索所需的数据。此过程效率非常低,特别是对于大型表,因为它消耗大量时间和资源。

  • 重负载情况 – 当服务器处理大量查询或同时处理一些复杂的查询时,可用资源(如 CPU 和内存)就会紧张。这种资源竞争可能会延迟查询的执行,从而导致运行时间更长,尤其是在高峰使用期间。

  • 锁争用 – 当多个事务需要同时访问相同数据但由于其他操作持有必要的锁而被阻止时,就会发生这种情况。例如,如果一个事务正在更新一行,则想要读取或更新同一行的另一个事务将必须等待第一个事务完成并释放锁。

  • 不正确的规范化 – 虽然规范化有助于避免数据冗余并提高数据完整性,但过度规范化的数据库可能会导致涉及多个联接的复杂查询。这些会降低性能。另一方面,标准化不足可能会导致过多的数据重复,从而导致表更大和查询速度更慢。

  • 大型联接 – 涉及联接大型表的查询,尤其是没有适当索引的查询可能会很慢。数据库必须根据连接条件匹配表中的行,如果没有有效的索引,这个过程可能会占用大量资源并且速度很慢。

识别长时间运行的查询

为了有效管理长时间运行的查询,您首先需要识别它们。这里有几个方法:

1.使用 SHOW PROCESSLIST

显示进程列表;命令是获取服务器上运行的所有活动查询快照的快速方法。此命令显示每个查询以及几条关键信息,包括每个查询运行的时间。那些具有较高“时间”值的查询可能是您长时间运行的查询。以下是如何使用此命令:

显示完整流程列表;

此命令将列出所有当前进程,显示谁启动了它们,它们正在运行什么类型的命令,以及最重要的是,它们已经运行了多长时间。如果您发现任何查询运行时间异常长,那么这些查询就是长时间运行的查询。然后,您可以决定是否深入优化它们,或者如果它们拖累了系统性能,则干脆将它们杀死。

2. 慢查询日志

设置慢查询日志是捕获这些有问题的查询的另一个好策略。这个方便的 MySQL 功能会记录执行时间超过特定阈值的任何查询。它不仅仅是捕获长时间运行的查询 - 它还可以帮助您识别未有效使用索引的查询。

要启动并运行慢查询日志,您需要调整 MySQL 配置文件(my.cnf 或 my.ini)中的一些设置:

  • Slow_query_log – 将其设置为 1 以启用日志。
  • Slow_query_log_file – 指定要保存日志的文件路径。
  • Long_query_time – 设置记录查询的最短执行时间(以秒为单位)。 例如,将其设置为“2”将记录任何执行时间超过两秒的查询。

3. 性能架构

MySQL 的性能模式对于更详细的调查非常有价值。该工具旨在监控服务器事件并跟踪性能指标,让您更清晰地了解查询执行和整体系统性能。

通过添加以下行确保在 MySQL 配置中启用它:

[mysqld]
性能模式 = 开

激活后,您可以探索各种性能架构表来分析查询的性能。例如,如果您要精确定位长时间运行的查询,您可能需要查看 events_statements_history_long 表。查询方法如下:

SELECT EVENT_ID, SQL_TEXT, TIMER_WAIT/1000000000 AS '持续时间(秒)'
FROM Performance_schema.events_statements_history_long
WHERE TIMER_WAIT > 10000000000;

此查询可帮助您查找任何运行时间超过 10 秒的查询。它为您提供 SQL 文本以及每个查询运行时间等详细信息。

手动终止长时间运行的查询

当您发现某个查询花费的时间过长并导致系统资源紧张时,您可以选择手动终止它。这是使用 KILL 命令后跟查询的特定进程 ID 来完成的。

您可以通过运行SHOW PROCESSLIST命令找到进程ID,该命令显示所有当前正在运行的进程及其各自的ID。查看列表中是否有任何显示高“时间”值的查询,该值表示它们已经运行了多长时间。

一旦您确定了有问题的查询并记下其进程 ID,您就可以使用 KILL 命令终止它:

KILL [进程 ID];

将 [进程 ID] 替换为 SHOW PROCESSLIST 输出中的实际编号。

这种方法要小心。突然停止查询有时会导致问题,例如,如果查询正在写入或更新信息,则数据会处于不一致的状态。

如何自动终止长时间运行的查询

设置自动化来处理长时间运行的查询可以成为真正的救星,防止那些缓慢或未优化的查询占用数据库资源并减慢甚至锁定整个系统。但请谨慎行事 - 在没有进行正确检查的情况下使用此工具实际上可能会隐藏需要您注意的更深层次的性能问题。

始终确保您有全面的日志记录和监控,以分析被终止的查询对应用程序的影响,并考虑改进这些查询,而不是仅仅自动终止它们。将自动终止视为优化性能的更大策略的一部分,而不是作为解决所有问题的解决方案。

1. 启用事件调度程序

首先,您需要启用MySQL事件调度程序,默认情况下该功能是禁用的。事件计划程序允许您创建和计划您希望服务器在预定义时间自动执行的任务。运行以下命令:

设置全局 event_scheduler = ON;

2. 创建一个事件来终止长时间运行的查询

启用调度程序后,下一步是定义将监视和终止长时间运行的查询的实际事件。该事件将每分钟运行一次,以检查运行时间超过指定阈值(例如 60 秒)的查询。一旦识别,它将自动终止这些查询。以下是设置此事件的 SQL 代码的细分:

`创建事件kill_long_running_queries
ON SCHEDULE EVERY 1 MINUTE -- 指定事件运行的频率

开始
声明完成 INT DEFAULT FALSE;
声明 proc_id INT; -- 存储每个查询的进程 ID 的变量
声明 cur1 游标用于从 information_schema.processlist
中选择 ID WHERE 命令 = '查询' AND 时间 > 60; -- 将“60”更改为以秒为单位的阈值
声明未找到集的继续处理程序完成 = TRUE;

打开 cur1;

read_loop:循环
FETCH cur1 INTO proc_id;
如果完成则
离开read_loop;
结束如果;
杀死 proc_id; -- 杀死由 proc_id
标识的进程 结束循环;

关闭 cur1;
结束;`

3. 在 MySQL 中设置最大查询执行时间

控制查询的最大执行时间有助于防止数据库被运行时间过长的查询占用。这是使用 MySQL 5.7.8 及更高版本中的 max_execution_time 系统变量通过为所有只读 SELECT 查询设置系统范围的执行时间限制来完成的:

设置全局 max_execution_time = 2000;

这将限制设置为 2000 毫秒(2 秒)

请记住,此设置不适用于存储过程、函数或触发器,并且会在服务器重新启动时重置为默认值,除非添加到您的 MySQL 配置文件中:

[mysqld]
最大执行时间 = 2000

4. 在 MariaDB 中设置最大语句时间

MariaDB 虽然是从 MySQL 派生出来的,但它提供了一种类似但不同的方法来管理查询执行时间。从 MariaDB 10.1.1 开始,您可以使用 max_statement_time 系统变量来实现此目的:

设置全局 max_statement_time = 2;

这将所有查询的执行时间限制为 2 秒。

要通过服务器重新启动进行持久配置,请将此行添加到您的 MariaDB 配置文件中:

[mysqld]
最大语句时间 = 2

使用 Releem 的查询分析来识别和修复长时间运行的查询

Managing Long-Running Queries in MySQL

Releem 的查询分析工具彻底改变了您监控和优化数据库性能的方式。它会自动收集前 100 个查询的详细信息,提供关键指标,例如平均执行时间以及每个查询对数据库运行效率的总体影响。

使用 Releem,无需手动挖掘 PROCESSLIST 输出或查看慢速查询日志来识别性能不佳的查询。该工具具有直观的仪表板,可让您轻松排序和发现滞后或消耗过多时间的查询。这种即时洞察力可以帮助您立即识别并解决瓶颈。

版本聲明 本文轉載於:https://dev.to/drupaladmin/managing-long-running-queries-in-mysql-4m6m?1如有侵犯,請聯絡[email protected]刪除
最新教學 更多>
  • Bootstrap 4 Beta 中的列偏移發生了什麼事?
    Bootstrap 4 Beta 中的列偏移發生了什麼事?
    Bootstrap 4 Beta:列偏移的刪除和恢復Bootstrap 4 在其Beta 1 版本中引入了重大更改柱子偏移了。然而,隨著 Beta 2 的後續發布,這些變化已經逆轉。 從 offset-md-* 到 ml-auto在 Bootstrap 4 Beta 1 中, offset-md-*...
    程式設計 發佈於2024-12-29
  • 插入資料時如何修復「常規錯誤:2006 MySQL 伺服器已消失」?
    插入資料時如何修復「常規錯誤:2006 MySQL 伺服器已消失」?
    插入記錄時如何解決「一般錯誤:2006 MySQL 伺服器已消失」介紹:將資料插入MySQL 資料庫有時會導致錯誤「一般錯誤:2006 MySQL 伺服器已消失」。當與伺服器的連線遺失時會出現此錯誤,通常是由於 MySQL 配置中的兩個變數之一所致。 解決方案:解決此錯誤的關鍵是調整wait_tim...
    程式設計 發佈於2024-12-29
  • 儘管程式碼有效,為什麼 POST 請求無法擷取 PHP 中的輸入?
    儘管程式碼有效,為什麼 POST 請求無法擷取 PHP 中的輸入?
    解決PHP 中的POST 請求故障在提供的程式碼片段:action=''而非:action="<?php echo $_SERVER['PHP_SELF'];?>";?>"檢查$_POST陣列:表單提交後使用 var_dump 檢查 $_POST 陣列的內容...
    程式設計 發佈於2024-12-29
  • 在 Go 中使用 WebSocket 進行即時通信
    在 Go 中使用 WebSocket 進行即時通信
    构建需要实时更新的应用程序(例如聊天应用程序、实时通知或协作工具)需要一种比传统 HTTP 更快、更具交互性的通信方法。这就是 WebSockets 发挥作用的地方!今天,我们将探讨如何在 Go 中使用 WebSocket,以便您可以向应用程序添加实时功能。 在这篇文章中,我们将介绍: WebSoc...
    程式設計 發佈於2024-12-29
  • 如何在 PHP 中組合兩個關聯數組,同時保留唯一 ID 並處理重複名稱?
    如何在 PHP 中組合兩個關聯數組,同時保留唯一 ID 並處理重複名稱?
    在 PHP 中組合關聯數組在 PHP 中,將兩個關聯數組組合成一個數組是常見任務。考慮以下請求:問題描述:提供的代碼定義了兩個關聯數組,$array1 和 $array2。目標是建立一個新陣列 $array3,它合併兩個陣列中的所有鍵值對。 此外,提供的陣列具有唯一的 ID,而名稱可能重疊。要求是建...
    程式設計 發佈於2024-12-29
  • 大批
    大批
    方法是可以在物件上呼叫的 fns 數組是對象,因此它們在 JS 中也有方法。 slice(begin):將陣列的一部分提取到新數組中,而不改變原始數組。 let arr = ['a','b','c','d','e']; // Usecase: Extract till index ...
    程式設計 發佈於2024-12-29
  • HTML 格式標籤
    HTML 格式標籤
    HTML 格式化元素 **HTML Formatting is a process of formatting text for better look and feel. HTML provides us ability to format text without us...
    程式設計 發佈於2024-12-29
  • 如何在 React 中有條件地應用類別屬性?
    如何在 React 中有條件地應用類別屬性?
    在React 中有條件地應用類別屬性在React 中,根據從父組件傳遞的props 來顯示或隱藏元素是很常見的。為此,您可以有條件地應用 CSS 類別。然而,當使用語法 {this.props.condition ? 'show' : 'hidden'} 直接在字串中...
    程式設計 發佈於2024-12-28
  • 如何在Java中執行系統命令並與其他應用程式互動?
    如何在Java中執行系統命令並與其他應用程式互動?
    Java 中運行進程在 Java 中,啟動進程的能力是執行系統命令和與其他應用程式互動的關鍵功能。為了啟動一個流程,Java提供了一個相當於.Net System.Diagnostics.Process.Start方法。 解決方案:取得本地路徑對於執行至關重要Java 中的程序。幸運的是,Java ...
    程式設計 發佈於2024-12-28
  • 如何在 C++ 中建立多行字串文字?
    如何在 C++ 中建立多行字串文字?
    C 中的多行字串文字 在 C 中,定義多行字串文字並不像 Perl 等其他語言那麼簡單。但是,您可以使用一些技術來實現此目的:連接字串文字一種方法是利用 C 中相鄰字串文字由編譯器連接的事實。將字串分成多行,您可以建立單一多行字串:const char *text = "This te...
    程式設計 發佈於2024-12-28
  • 如何準確地透視具有不同記錄的資料以避免遺失資訊?
    如何準確地透視具有不同記錄的資料以避免遺失資訊?
    有效地透視不同記錄透視查詢在將資料轉換為表格格式、實現輕鬆資料分析方面發揮著至關重要的作用。但是,在處理不同記錄時,資料透視查詢的預設行為可能會出現問題。 問題:忽略不同值考慮下表:------------------------------------------------------ | Id...
    程式設計 發佈於2024-12-27
  • 為什麼 C 和 C++ 忽略函式簽章中的陣列長度?
    為什麼 C 和 C++ 忽略函式簽章中的陣列長度?
    將陣列傳遞給C 和C 中的函數問題:為什麼C和C 編譯器允許在函數簽章中宣告數組長度,例如int dis(char a[1])(當它們不允許時)強制執行? 答案:C 和C 中用於將數組傳遞給函數的語法是歷史上的奇怪現象,它允許將指針傳遞給第一個元素詳細說明:在C 和C 中,數組不是透過函數的引用傳遞...
    程式設計 發佈於2024-12-26
  • 如何刪除 MySQL 中的重音符號以改進自動完成搜尋?
    如何刪除 MySQL 中的重音符號以改進自動完成搜尋?
    在MySQL 中刪除重音符號以實現高效的自動完成搜尋管理大型地名資料庫時,確保準確和高效至關重要資料檢索。使用自動完成功能時,地名中的重音可能會帶來挑戰。為了解決這個問題,一個自然的問題出現了:如何在 MySQL 中刪除重音符號以改善自動完成功能? 解決方案在於為資料庫列使用適當的排序規則設定。透過...
    程式設計 發佈於2024-12-26
  • 如何在MySQL中實作複合外鍵?
    如何在MySQL中實作複合外鍵?
    在 SQL 中實作複合外鍵一個常見的資料庫設計涉及使用複合鍵在表之間建立關係。複合鍵是多個列的組合,唯一標識表中的記錄。在這個場景中,你有兩個表,tutorial和group,你需要將tutorial中的複合唯一鍵連結到group中的欄位。 根據MySQL文檔,MySQL支援外鍵對應到複合鍵。但是,...
    程式設計 發佈於2024-12-26
  • 為什麼我的 JComponent 隱藏在 Java 的背景圖片後面?
    為什麼我的 JComponent 隱藏在 Java 的背景圖片後面?
    調試背景圖像隱藏的JComponent在Java 應用程式中使用JComponent(例如JLabels)時,必須確保正確的行為和可見度。如果遇到組件隱藏在背景圖像後面的問題,請考慮以下方法:1。正確設定組件透明度:確保背景面板是透明的,以允許底層組件透過。使用setOpaque(false)方法來...
    程式設計 發佈於2024-12-26

免責聲明: 提供的所有資源部分來自互聯網,如果有侵犯您的版權或其他權益,請說明詳細緣由並提供版權或權益證明然後發到郵箱:[email protected] 我們會在第一時間內為您處理。

Copyright© 2022 湘ICP备2022001581号-3