一、查詢任務內存限制調整

1. ?默認內存限制與問題定位

Apache Doris默認限制單個BE節點上的查詢任務內存使用不超過2GB（即exec_mem_limit=2147483648字節）。當復雜查詢或大規模數據操作超過此限制時，會觸發Memory limit exceeded錯誤。通過以下命令可查看當前配置：

SHOW VARIABLES LIKE "%mem_limit%";

輸出示例：

+----------------+------------+
| Variable_name  | Value      |
+----------------+------------+
| exec_mem_limit | 2147483648 |  -- 默認2GB
| load_mem_limit | 0          |  -- 導入任務內存限制（0表示無限制）
+----------------+------------+

2. ?調整內存限制的方法

• ?臨時調整（當前會話生效）??
  通過SET命令修改會話級參數，適用于單次查詢優化：sqlSET exec_mem_limit = 8589934592;?-- 設置為8GB
• ?永久生效（全局配置）??
  添加GLOBAL參數以全局生效，需在FE節點配置中持久化：sqlSET GLOBAL exec_mem_limit = 8589934592;?
• 注意事項：
  • 若集群資源有限，需結合BE節點的總內存（通過mem_limit參數控制）合理分配，避免單任務占用過高導致節點OOM6。
  • 高并發場景建議通過資源標簽（Resource Label）隔離關鍵任務，防止資源爭用6。

二、查詢超時時間優化

1. ?默認超時機制與配置查詢

Doris默認查詢超時時間為300秒（5分鐘），可通過以下命令查看：

SHOW VARIABLES LIKE "%query_timeout%";

輸出示例：

+---------------+-------+
| Variable_name | Value |
+---------------+-------+
| query_timeout | 300   |
+---------------+-------+

2. ?延長超時時間的操作

• ?臨時調整（當前會話生效）??sqlSET query_timeout = 600;?-- 設置為600秒（10分鐘）
• ?永久生效（全局配置）??sqlSET GLOBAL query_timeout = 600;?動態生效特性：與內存參數不同，超時參數修改后通常無需重啟集群即可生效。

三、關聯參數與調優實踐

1. ?內存管理聯動配置

• ?BE節點總內存限制（mem_limit）??
  控制單個BE進程的最大內存使用，默認根據物理內存自動計算（如物理內存的90%或物理內存-6.4GB）。建議在be.conf中顯式設置，避免資源競爭。bashmem_limit = 80%?# 或具體值如32G
• ?Compaction內存限制（compaction_memory_bytes_limit）??
  控制數據合并任務的內存使用上限，默認值根據系統配置動態調整。若頻繁因Compaction導致查詢內存不足，可適當調低此參數。

2. ?高并發場景優化策略

• ?并行度與資源分配?
  提升查詢并行度（parallel_degree）可加速處理，但需平衡CPU和內存消耗。例如：sqlSET GLOBAL parallel_degree = 16;?-- 根據CPU核心數調整
• ?物化視圖與分區優化?
  對高頻查詢創建物化視圖或合理分區，減少單次查詢的數據掃描量，間接降低內存需求。

四、操作驗證與監控

1. ?驗證參數生效?
   修改后通過SHOW VARIABLES確認新值是否生效，并執行測試查詢觀察內存使用情況。
2. ?日志與監控工具?
   • ?FE日志：檢查fe.log中內存超限或超時任務記錄。
   • ?BE監控：通過curl http://BE_IP:8040/api/compaction/show?tablet_id=XXX查看Tablet狀態。
   • ?系統視圖：使用SHOW PROC '/admin/stats'實時監控資源使用