跳至內容

如何對 Amazon RDS for MySQL 資料庫中的可釋放記憶體不足進行疑難排解?

3 分的閱讀內容
0

我想在執行 Amazon Relational Database Service (Amazon RDS) for MySQL 執行個體時,對記憶體不足問題進行疑難排解。我的可用記憶體不足、資料庫發生記憶體耗盡,或者應用程式出現延遲問題。

解決方法

重要:Performance Insights 將於 2026 年 6 月 30 日終止服務。您可以在 2026 年 6 月 30 日之前升級至 Database Insights 的進階模式。如果您未升級,則使用 Performance Insights 的資料庫叢集將預設為 Database Insights 的標準模式。只有 Database Insights 的進階模式才支援執行計畫和隨需分析。如果您的叢集預設為標準模式,那麼您可能無法在主控台上使用這些功能。若要啟用進階模式,請參閱啟用 Amazon RDS 的 Database Insights 進階模式與啟用 Amazon Aurora 的 Database Insights 進階模式。

改善資料庫效能

若要改善資料庫效能,請最佳化並調整您的查詢。使用 Amazon RDS Performance Insights 監控資料庫執行個體,並找出有問題的查詢。然後,在 FreeableMemory 指標上設定 Amazon CloudWatch 警示,以便在可用記憶體達到 95% 時接收通知。最佳實務是至少保留 5% 的執行個體記憶體可用。

檢查 Amazon RDS for MySQL 中的記憶體配置

計算您的記憶體配置

若要計算資料庫執行個體的大約記憶體使用量,請使用以下公式:

總記憶體使用量 = (innodb_additional_mem_pool_size + innodb_buffer_pool_size + innodb_log_buffer_size + key_buffer_size + query_cache_size + tmp_table_size) + max_connections (binlog_cache_size + join_buffer_size + read_buffer_size + read_rnd_buffer_size + sort_buffer_size + thread_stack ) + (performance_schema max_connections * 429498)`

請確定您已為資料庫分配足夠的資源來執行查詢。某些查詢 (例如預存程序) 在執行時可能會佔用無限量的記憶體。若要避免執行時間過長的交易,請將大型查詢拆分成較小的查詢。如需 Amazon RDS for MySQL 如何使用記憶體的詳細資訊,請參閱 MySQL 網站上的 MySQL 如何使用記憶體。

最佳實務是定期升級執行個體的 MySQL 次要版本。較早的次要版本可能包含與記憶體洩漏相關的錯誤。如需有關 MySQL 版本的詳細資訊,請參閱 MySQL 網站上的 MySQL 8.0 版本說明。

檢查您的緩衝集區大小

若要檢視長時間執行的交易、記憶體使用率統計資料或鎖定,請使用 SHOW ENGINE INNODB STATUS 命令。如需有關 SHOW ENGINE 查詢的詳細資訊,請參閱 MySQL 網站上的 SHOW ENGINE 查詢。檢閱輸出內容,然後檢查 BUFFER POOL AND MEMORY 項目,以取得有關 InnoDB 記憶體分配的資訊,例如已分配的總記憶體、內部雜湊表和緩衝集區大小。如果您的工作負載經常遇到鎖死,請在您的自訂參數群組中修改 innodb_lock_wait_timeout 參數。當發生鎖死時,InnoDB 依賴 innodb_lock_wait_timeout 設定來回復交易。

較大的緩衝集區可減少重新導向回磁碟的 I/O 操作。根據預設,innodb_buffer_pool_size 最多使用分配給 Amazon RDS 資料庫執行個體之可用記憶體的 75%:innodb_buffer_pool_size = DBInstanceClassMemory*3/4。如需有關緩衝集區的詳細資訊,請參閱 MySQL 網站上的緩衝集區。

若要找出記憶體使用量的來源,請先檢查 innodb_buffer_pool_size。然後,如有需要,請在您的自訂參數群組中修改參數值,以減少 innodb_buffer_pool_size。

如需詳細資訊,請參閱 Amazon RDS for MySQL 參數設定最佳實務,第 1 部分: 與效能相關的參數。

檢查您的 MySQL 執行緒

還會為連接至 MySQL 資料庫執行個體的每個 MySQL 執行緒分配記憶體。如需有關需要分配記憶體之 MySQL 執行緒的詳細資訊,請參閱 MySQL 與 MariaDB 問題頁面上的「診斷並解決記憶體限制的不相容參數狀態」。

MySQL 會建立暫時內部資料表來執行某些操作。如果資料表達到 tmp_table_size 或 max_heap_table_size 的較低值,則 MySQL 會將資料表從記憶體型資料表轉換為磁碟型資料表。如果多個工作階段建立暫時內部資料表,您可能會看到記憶體使用量增加。若要降低記憶體使用量,請只在查詢中使用最大資料表。如需詳細資訊,請參閱 MySQL 網站上的伺服器系統變數和 MySQL 網站上的 MySQL 如何使用記憶體。

如果您增加 tmp_table_size 和 max_heap_table_size 值,則較大的暫時資料表會保留在記憶體中。若要驗證 MySQL 是否已建立隱含暫時資料表,請使用 created_tmp_tables 變數。如需有關此變數的詳細資訊,請參閱 MySQL 網站上的 Created_tmp_tables。

檢視作用中的 JOIN 和 SORT 操作

如果您找出需要暫時資料表的查詢,則必須有額外的記憶體分配給該資料表。若要檢視資料庫中作用中的連線與查詢,請使用 SHOW FULL PROCESSLIST 命令。如需有關 SHOW FULL PROCESSLIST 和範例查詢的詳細資訊,請參閱 MySQL 網站上的 SHOW PROCESSLIST 查詢。

如果在 JOIN 或 SORT 操作期間,您的 MySQL 分配了多個相同類型的緩衝區 (例如 join_buffer_size 或 sort_buffer_size),則您的記憶體使用量會增加。例如,MySQL 會分配一個 JOIN 緩衝區,以在兩個資料表之間執行 JOIN。對於使用多個 JOIN 資料表且所有查詢都需要 JOIN 緩衝區的查詢,MySQL 會分配比資料表總數少一個的 JOIN 緩衝區。

如果您將工作階段變數設定為過高的值,則可能會發生錯誤。若要解決此錯誤,請將工作階段層級變數 (例如 join_buffer_size 和 sort_buffer_size) 分配為所需的最小記憶體。

**注意:**如果您對 MYISAM 資料表執行大量插入,則 MySQL 會使用 bulk_insert_buffer_size 位元組的記憶體。如需詳細資訊,請參閱使用 MySQL 的最佳實務。

啟用 Performance Schema

如果您開啟 Performance Insights,則 MySQL 會在您啟動執行個體時以及在伺服器操作期間,為 Performance Schema 分配內部緩衝區。如需有關 Performance Schema 如何使用記憶體的詳細資訊,請參閱 MySQL 網站上的 Performance Schema 記憶體配置模型。

監控執行個體上的記憶體使用量

檢查您的 CloudWatch 指標

若要檢查記憶體不足狀況,請使用 Amazon RDS 主控台上的 Monitoring (監控) 索引標籤來監控 DatabaseConnections、CPUUtilization、ReadIOPS 和 WriteIOPS CloudWatch metrics。

對於 DatabaseConnections,每個連線到資料庫的連線都需要分配記憶體,這可能會減少可釋放記憶體。請使用以下公式計算預估的最大 max_connections 配額:DBInstanceClassMemory/12582880

若要檢查您是否超過 max_connections 配額,請檢查 DatabaseConnections CloudWatch 指標。

若要檢查記憶體壓力,請監控 SwapUsage 和 FreeableMemory CloudWatch 指標。最佳實務是將記憶體壓力層級維持在 95% 以下,以改善資料庫效能。如需詳細資訊,請參閱當我有足夠的記憶體時,為什麼我的 Amazon RDS 資料庫執行個體仍使用交換記憶體?

使用 MySQL 系統結構描述追蹤記憶體使用量

使用 MySQL 系統結構描述來追蹤記憶體的連線、元件和查詢。如需更多資訊,請參閱 MySQL 網站上的第 30 章 MySQL 系統結構描述。使用 MySQL 系統結構描述和 Performance Schema 資料表來識別並追蹤目前的記憶體使用量。

**注意:**您必須啟用 Performance Schema,才能使用系統結構描述。

若要在系統結構描述中追蹤記憶體使用量,請登入資料庫並採取以下動作:

  • 使用 memory_by_host_by_current_bytes 來判斷哪個主機使用的記憶體最多。
  • 使用 memory_by_thread_by_current_bytes 來判斷哪個執行緒 ID 使用的記憶體最多。
    **注意:**MySQL 中的執行緒 ID 可以是用戶端連線或背景執行緒。您可以使用 sys.processlist 檢視或 performance_schema.threads 資料表,並將執行緒 ID 對應至 MySQL 連線 ID。
  • 使用 memory_by_user_by_current_bytes 來判斷哪個使用者使用的記憶體最多。
  • 使用 memory_global_by_current_bytes 來判斷哪個引擎元件使用的記憶體最多。
  • 使用 memory_global_total 來檢視資料庫引擎中已追蹤的記憶體使用總量。
  • 使用 sys.memory_global_by_current_bytes 來判斷哪個元件使用的記憶體最多。
    **注意:**對於與 Performance Schema 相關的記憶體事件,請使用 memory/performance_schema/%。對於 InnoDB,請使用 memory/innodb/%。

若要找出哪些功能元件在全域層級耗用最多記憶體,請執行以下查詢:

SELECT  SUBSTRING_INDEX(SUBSTRING_INDEX(event_name, '/', 2),    '/',    -1    )  AS event_type,    ROUND(SUM(CURRENT_NUMBER_OF_BYTES_USED)/1024/1024, 2) AS MB_CURRENTLY_USED    FROM performance_schema.memory_summary_global_by_event_name    GROUP BY event_type    HAVING MB_CURRENTLY_USED>0;

如果 performance_schema 使用的記憶體最多,則執行以下查詢來判斷使用記憶體的 event_name。

select * from sys.memory_global_by_current_bytes where event_name like '%performance_schema%' and current_count > 0;
select * from performance_schema.memory_summary_global_by_event_name WHERE EVENT_NAME LIKE 'memory/performance_schema/%'order by CURRENT_NUMBER_OF_BYTES_USED desc;

然後,執行以下查詢:

select * from sys.memory_global_by_current_bytes where event_name like 'memory/sql%' and current_count > 0;
select p.id,p.user,p.host,p.db,p.command,p.state,p.info,t.thread_id,t.type from information_schema.processlist p, performance_schema.threads t where p.id=t.processlist_id and t.thread_id=thread_id;

**注意:**將 memory/sql% 替換為您的事件類型。

若要檢視特定執行緒中每個事件的記憶體配置詳細資料,請執行以下查詢:

select * from performance_schema.memory_summary_by_thread_by_event_name where thread_id=thread_id and CURRENT_COUNT_USED >0 order by CURRENT_NUMBER_OF_BYTES_USED desc;

您也可以使用 performance_schema 事件來顯示 MySQL 為 Performance Schema 使用的內部緩衝區分配了多少記憶體。若要查看分配了多少記憶體,請執行以下查詢:

select * from performance_schema.memory_summary_global_by_event_name WHERE EVENT_NAME LIKE 'memory/performance_schema/%';

您可以在 setup_instruments 資料表中,以 memory/code_area/instrument_name 格式找到記憶體檢測項目。

若要在 Performance Schema 中啟用記憶體檢測,請在 performance_schema.setup_instruments 資料表中,將檢測項目的 ENABLED (啟用) 欄設定為 YES (是)。

**注意:**在 MySQL 8.x 中,當 Performance Schema 啟用時,記憶體檢測預設為啟用。

監控資源使用量

若要監控資料庫執行個體上的資源使用量,請啟用增強型監控。然後,將精度設為 1 到 5 秒之間。預設精度為 60 秒。您可以使用增強型監控即時查看可釋放記憶體和作用中記憶體。

若要監控耗用最多 CPU 和記憶體的執行緒,請執行以下命令來列出資料庫執行個體的執行緒:

select THREAD_ID, PROCESSLIST_ID, THREAD_OS_ID from performance_schema.threads;

然後,執行以下命令將 thread_OS_ID 對應至 thread_ID:

select p.* from information_schema.processlist p, performance_schema.threads t where p.id=t.processlist_id and t.thread_os_id=thread-ID;

**注意:**將 thread-ID 替換為執行緒 ID。

相關資訊

Amazon RDS 的監控工具

對 Aurora MySQL 資料庫的記憶體使用量問題進行疑難排解