MogDBopenGauss查詢重寫規則lazyagg

在MogDB&openGauss中，參數rewrite_rule用于控制查詢重寫，本文介紹查詢重寫規則lazyagg
在未設置rewrite_rule=lazyagg的情況下，子查詢中有GROUP BY會先進行GROUP BY
lazyagg表示延遲聚合運算，目的是消除子查詢中的聚合運算，先關聯再GROUP BY
當子查詢中有GROUP BY，子查詢中的表很大，子查詢與外面的表(比較小/過濾完之后數據量少)進行關聯之后還有GROUP BY，這個時候就可以開啟lazyagg特性，加快SQL性能
現在有如下例子：

orcl=> explain analyze select /*+ set(rewrite_rule none) */ t1.object_id, sum(total)
orcl->   from test02 t1,
orcl->        (select object_id, sum(data_object_id) as total from test01 group by object_id) t2
orcl->  where t1.object_id = t2.object_id and t1.owner='SCOTT'
orcl->  group by t1.object_id;QUERY PLAN                                                                    
--------------------------------------------------------------------------------------------------------------------------------------------------HashAggregate  (cost=1452817.48..1452817.80 rows=32 width=70) (actual time=19813.801..19813.804 rows=36 loops=1)Group By Key: t1.object_id->  Hash Join  (cost=1450644.14..1452748.21 rows=13854 width=38) (actual time=19786.470..19813.740 rows=36 loops=1)Hash Cond: (test01.object_id = t1.object_id)->  HashAggregate  (cost=1450525.16..1451391.03 rows=86587 width=44) (actual time=19785.539..19802.382 rows=86987 loops=1)Group By Key: test01.object_id->  Seq Scan on test01  (cost=0.00..1227838.44 rows=44537344 width=12) (actual time=0.006..5913.694 rows=44537344 loops=1)->  Hash  (cost=118.58..118.58 rows=32 width=6) (actual time=0.140..0.140 rows=36 loops=1)Buckets: 32768  Batches: 1  Memory Usage: 258kB->  Index Scan using idx_test02_owner on test02 t1  (cost=0.00..118.58 rows=32 width=6) (actual time=0.036..0.128 rows=36 loops=1)Index Cond: ((owner)::text = 'SCOTT'::text)Total runtime: 19814.139 ms
(12 rows)

/*+ set(rewrite_rule none) */表示禁止所有查詢重寫規則。從執行計劃中看到，子查詢先進行了GROUP BY，再與test02進行關聯，整個SQL GROUP BY了2次。
現在設置rewrite_rule=lazyagg，我們再來看一下執行計劃：

orcl=> explain analyze select /*+ set(rewrite_rule lazyagg) */ t1.object_id, sum(total)
orcl->   from test02 t1,
orcl->        (select object_id, sum(data_object_id) as total from test01 group by object_id) t2
orcl->  where t1.object_id = t2.object_id and t1.owner='SCOTT'
orcl->  group by t1.object_id;QUERY PLAN                                                                   
------------------------------------------------------------------------------------------------------------------------------------------------HashAggregate  (cost=64868.16..64868.48 rows=32 width=44) (actual time=45.018..45.023 rows=36 loops=1)Group By Key: t1.object_id->  Nested Loop  (cost=12.23..64785.86 rows=16460 width=12) (actual time=0.150..38.695 rows=18432 loops=1)->  Index Scan using idx_test02_owner on test02 t1  (cost=0.00..118.58 rows=32 width=6) (actual time=0.017..0.060 rows=36 loops=1)Index Cond: ((owner)::text = 'SCOTT'::text)->  Bitmap Heap Scan on test01  (cost=12.23..2015.71 rows=514 width=12) (actual time=3.912..36.585 rows=18432 loops=36)Recheck Cond: (object_id = t1.object_id)Heap Blocks: exact=18432->  Bitmap Index Scan on idx_test01_objectid  (cost=0.00..12.11 rows=514 width=0) (actual time=2.304..2.304 rows=18432 loops=36)Index Cond: (object_id = t1.object_id)Total runtime: 45.229 ms
(11 rows)

從執行計劃中看到，子查詢中的聚合運算被消除了，子查詢中的表test01與test02先做了關聯，關聯之后再進行GROUP BY，整個SQL只做了1次GROUP BY。


想要lazyagg查詢改寫規則生效，必須滿足兩個條件

1.子查詢中有GROUP BY
2.子查詢與外面的表關聯之后還有GROUP BY

如果子查詢與外面的表關聯之后沒有GROUP BY，lazyagg查詢改寫規則不會生效，這個時候請使用謂詞推入
比如下面SQL lazyagg就不會生效，因為子查詢與外面的表關聯之后沒有GROUP BY

orcl=> explain analyze select /*+ set(rewrite_rule lazyagg) */ t1.object_id, totalfrom test02 t1,(select object_id, sum(data_object_id) as total from test01 group by object_id) t2where t1.object_id = t2.object_id and t1.owner='SCOTT';QUERY PLAN                                                                 
--------------------------------------------------------------------------------------------------------------------------------------------Hash Join  (cost=1450642.43..1452765.96 rows=13982 width=38) (actual time=19008.136..19038.606 rows=36 loops=1)Hash Cond: (test01.object_id = t1.object_id)->  HashAggregate  (cost=1450523.45..1451397.33 rows=87388 width=44) (actual time=19007.086..19026.905 rows=86987 loops=1)Group By Key: test01.object_id->  Seq Scan on test01  (cost=0.00..1227837.30 rows=44537230 width=12) (actual time=0.004..5699.204 rows=44537344 loops=1)->  Hash  (cost=118.58..118.58 rows=32 width=6) (actual time=0.123..0.123 rows=36 loops=1)Buckets: 32768  Batches: 1  Memory Usage: 258kB->  Index Scan using idx_test02_owner on test02 t1  (cost=0.00..118.58 rows=32 width=6) (actual time=0.048..0.110 rows=36 loops=1)Index Cond: ((owner)::text = 'SCOTT'::text)Total runtime: 19038.900 ms
(10 rows)

設置rewrite_rule=predpushnormal

orcl=> explain analyze select /*+ set(rewrite_rule predpushnormal) */ t1.object_id, totalfrom test02 t1,(select object_id, sum(data_object_id) as total from test01 group by object_id) t2where t1.object_id = t2.object_id and t1.owner='SCOTT';QUERY PLAN                                                                   
------------------------------------------------------------------------------------------------------------------------------------------------Nested Loop  (cost=12.20..64826.62 rows=2 width=38) (actual time=1.542..36.819 rows=36 loops=1)->  Index Scan using idx_test02_owner on test02 t1  (cost=0.00..118.58 rows=32 width=6) (actual time=0.028..0.094 rows=36 loops=1)Index Cond: ((owner)::text = 'SCOTT'::text)->  GroupAggregate  (cost=12.20..2022.09 rows=2 width=44) (actual time=36.683..36.683 rows=36 loops=36)Group By Key: test01.object_id->  Bitmap Heap Scan on test01  (cost=12.20..2019.52 rows=510 width=12) (actual time=4.016..31.464 rows=18432 loops=36)Recheck Cond: (t1.object_id = object_id)Heap Blocks: exact=18432->  Bitmap Index Scan on idx_test01_objectid  (cost=0.00..12.07 rows=510 width=0) (actual time=2.369..2.369 rows=18432 loops=36)Index Cond: (t1.object_id = object_id)Total runtime: 37.015 ms
(11 rows)

子查詢中有union all可以生效

orcl=> explain analyze select /*+ set(rewrite_rule lazyagg) */ t1.owner, sum(total)
orcl->  from test02 t1,
orcl->       (select object_id, sum(data_object_id) as total from test01 group by object_id
orcl(>        union all
orcl(>        select object_id, sum(data_object_id) as total from test03 group by object_id
orcl(>       ) t2
orcl-> where t1.object_id = t2.object_id and t1.owner='SCOTT'
orcl-> group by t1.owner; QUERY PLAN                                                                      
------------------------------------------------------------------------------------------------------------------------------------------------------GroupAggregate  (cost=12.20..100248.99 rows=1 width=43) (actual time=41.682..41.682 rows=1 loops=1)Group By Key: t1.owner->  Nested Loop  (cost=12.20..64549.61 rows=7139875 width=11) (actual time=0.156..37.395 rows=18468 loops=1)->  Index Scan using idx_test02_owner on test02 t1  (cost=0.00..118.58 rows=32 width=11) (actual time=0.019..0.062 rows=36 loops=1)Index Cond: ((owner)::text = 'SCOTT'::text)->  Append  (cost=12.20..2008.36 rows=511 width=12) (actual time=4.092..35.783 rows=18468 loops=36)->  Bitmap Heap Scan on test01  (cost=12.20..2000.09 rows=510 width=12) (actual time=4.022..34.234 rows=18432 loops=36)Recheck Cond: (object_id = t1.object_id)Heap Blocks: exact=18432->  Bitmap Index Scan on idx_test01_objectid  (cost=0.00..12.07 rows=510 width=0) (actual time=2.411..2.411 rows=18432 loops=36)Index Cond: (object_id = t1.object_id)->  Index Scan using idx_test03_objectid on test03  (cost=0.00..8.27 rows=1 width=12) (actual time=0.162..0.169 rows=36 loops=36)Index Cond: (object_id = t1.object_id)Total runtime: 41.905 ms
(14 rows)

子查詢中有union無法生效

orcl=> explain analyze select /*+ set(rewrite_rule lazyagg) */ t1.owner, sum(total)
orcl->  from test02 t1,
orcl->       (select object_id, sum(data_object_id) as total from test01 group by object_id
orcl(>        union 
orcl(>        select object_id, sum(data_object_id) as total from test03 group by object_id
orcl(>       ) t2
orcl-> where t1.object_id = t2.object_id and t1.owner='SCOTT'
orcl-> group by t1.owner; QUERY PLAN                                                                      
------------------------------------------------------------------------------------------------------------------------------------------------------GroupAggregate  (cost=1457835.61..1462212.44 rows=1 width=69) (actual time=19242.592..19242.592 rows=1 loops=1)Group By Key: t1.owner->  Hash Join  (cost=1457835.61..1462072.93 rows=27900 width=37) (actual time=19219.921..19242.559 rows=67 loops=1)Hash Cond: (test01.object_id = t1.object_id)->  HashAggregate  (cost=1457716.63..1459460.38 rows=174375 width=44) (actual time=19218.659..19231.297 rows=96155 loops=1)Group By Key: test01.object_id, (sum(test01.data_object_id))->  Append  (cost=1450523.45..1456844.75 rows=174375 width=44) (actual time=19077.681..19160.701 rows=173974 loops=1)->  HashAggregate  (cost=1450523.45..1451397.33 rows=87388 width=44) (actual time=19077.681..19095.367 rows=86987 loops=1)Group By Key: test01.object_id->  Seq Scan on test01  (cost=0.00..1227837.30 rows=44537230 width=12) (actual time=0.006..5869.211 rows=44537344 loops=1)->  HashAggregate  (cost=2833.81..3703.68 rows=86987 width=44) (actual time=35.819..52.104 rows=86987 loops=1)Group By Key: test03.object_id->  Seq Scan on test03  (cost=0.00..2398.87 rows=86987 width=12) (actual time=0.011..11.127 rows=86987 loops=1)->  Hash  (cost=118.58..118.58 rows=32 width=11) (actual time=0.075..0.075 rows=36 loops=1)Buckets: 32768  Batches: 1  Memory Usage: 258kB->  Index Scan using idx_test02_owner on test02 t1  (cost=0.00..118.58 rows=32 width=11) (actual time=0.019..0.066 rows=36 loops=1)Index Cond: ((owner)::text = 'SCOTT'::text)Total runtime: 19242.893 ms
(18 rows)

這個時候還是用謂詞推入

orcl=> explain analyze select /*+ set(rewrite_rule predpushnormal) */ t1.owner, sum(total)
orcl->  from test02 t1,
orcl->       (select object_id, sum(data_object_id) as total from test01 group by object_id
orcl(>        union 
orcl(>        select object_id, sum(data_object_id) as total from test03 group by object_id
orcl(>       ) t2
orcl-> where t1.object_id = t2.object_id and t1.owner='SCOTT'
orcl-> group by t1.owner; QUERY PLAN                                                                            
------------------------------------------------------------------------------------------------------------------------------------------------------------------GroupAggregate  (cost=2030.41..65094.73 rows=1 width=69) (actual time=38.381..38.381 rows=1 loops=1)Group By Key: t1.owner->  Nested Loop  (cost=2030.41..65094.71 rows=3 width=37) (actual time=1.710..38.356 rows=67 loops=1)->  Index Scan using idx_test02_owner on test02 t1  (cost=0.00..118.58 rows=32 width=11) (actual time=0.021..0.065 rows=36 loops=1)Index Cond: ((owner)::text = 'SCOTT'::text)->  HashAggregate  (cost=2030.41..2030.44 rows=3 width=44) (actual time=38.200..38.205 rows=67 loops=36)Group By Key: test01.object_id, (sum(test01.data_object_id))->  Append  (cost=12.20..2030.40 rows=3 width=44) (actual time=37.877..38.108 rows=72 loops=36)->  GroupAggregate  (cost=12.20..2022.09 rows=2 width=44) (actual time=37.856..37.857 rows=36 loops=36)Group By Key: test01.object_id->  Bitmap Heap Scan on test01  (cost=12.20..2019.52 rows=510 width=12) (actual time=3.786..32.509 rows=18432 loops=36)Recheck Cond: (t1.object_id = object_id)Heap Blocks: exact=18432->  Bitmap Index Scan on idx_test01_objectid  (cost=0.00..12.07 rows=510 width=0) (actual time=2.208..2.208 rows=18432 loops=36)Index Cond: (t1.object_id = object_id)->  GroupAggregate  (cost=0.00..8.28 rows=1 width=44) (actual time=0.203..0.203 rows=36 loops=36)Group By Key: test03.object_id->  Index Scan using idx_test03_objectid on test03  (cost=0.00..8.27 rows=1 width=12) (actual time=0.159..0.166 rows=36 loops=36)Index Cond: (t1.object_id = object_id)Total runtime: 38.676 ms
(20 rows)

本文來自互聯網用戶投稿，該文觀點僅代表作者本人，不代表本站立場。本站僅提供信息存儲空間服務，不擁有所有權，不承擔相關法律責任。
如若轉載，請注明出處：http://www.pswp.cn/web/10881.shtml
繁體地址，請注明出處：http://hk.pswp.cn/web/10881.shtml
英文地址，請注明出處：http://en.pswp.cn/web/10881.shtml

如若內容造成侵權/違法違規/事實不符，請聯系多彩編程網進行投訴反饋email:809451989@qq.com，一經查實，立即刪除！

相關文章

寶塔面板怎么解決nginx跨域問題

寶塔面板怎么解決nginx跨域問題

1.找到寶塔的nginx配置文件 寶塔有一點不同，nginx配置文件不在nginx的安裝目錄中，應當去/www/server/panel/vhost/nginx找到 2.添加你要跨域的地址 location /api {proxy_pass http://localhost:8080;proxy_set_header Host $host;proxy_set_header X-…
閱讀更多...
維護祖傳項目Tomcat部署war包

維護祖傳項目Tomcat部署war包

文章目錄 1. 安裝tomcat2. 解決Tomcat啟動日志亂碼3. idea配置啟動war包 1. 安裝tomcat 選擇免安裝版本，只需要在系統變量里面配置一下。 新增系統變量 CATALINA_HOME D:\Users\common\tomcat\apache-tomcat-8.5.97-windows-x64\apache-tomcat-8.5.97 編輯追加Path…
閱讀更多...
FPGA SDRAM讀寫控制器

FPGA SDRAM讀寫控制器

感謝鄧堪文大佬 ！ SDRAM 同步動態隨機存取內存（synchronousdynamic randon-access menory，簡稱SDRAM）是有一個同步接口的動態隨機存取內存（DRAM）。通常DRAM是有一個異步接口的，這樣它可以隨時響…
閱讀更多...
Node.js基礎：從入門到實戰

Node.js基礎：從入門到實戰

初識 Node.js 與內置模塊 （初識） 1、知道什么是node.js 2、知道node.js可以做什么 3、node.js 中js的組成部分 （內置模塊） 4、用 fs 模塊讀寫操作文件 5、使用 path 模塊處理路徑 6、使用http 模塊寫一個基本的web服務器 初識 N…
閱讀更多...
第1章 信息系統綜合知識 1.4 IT戰略

第1章 信息系統綜合知識 1.4 IT戰略

第1章 信息系統綜合知識 1.4 IT戰略 1.4.1 IT戰略的內涵 IT戰略，是在診斷和評估企業信息化現狀的基礎上，制定和調整企業信息化的指導綱領，爭取企業以最合適的成本，去做最合適的信息化工作。 IT戰略制定步驟: 定方向:明確遠景…
閱讀更多...
設計模式——模板設計模式（Template Method）

設計模式——模板設計模式（Template Method）

模板設計-base 什么是模板？ 舉個簡單的例子，以AABB的格式，寫出一個詞語，你可能會想到，明明白白，干干凈凈等， 這個AABB就是一個模板，對模板心中有了一個清晰的概念之后，…
閱讀更多...
docker————docker的安裝

docker————docker的安裝

目錄 docker的安裝 1、安裝yum-utils工具 2、安裝yum倉庫 3、安裝docker引擎 4、設置開機啟動，并立即啟動 5、測試 docker的安裝 docker的官網Docker Docs 我才用的linux版本是rocky，使用的是最小安裝 1、安裝yum-utils工具 [rootbogon yum.rep…
閱讀更多...
環境變量（全）

環境變量（全）

概念 環境變量(environment variables)一般是指在操作系統中用來指定操作系統運行環境的一些參數 如：我們在編寫C/C代碼的時候，在鏈接的時候，從來不知道我們的所鏈接的動態靜態庫在哪里，但是照樣可以鏈接成功，生成可執…
閱讀更多...
今日arXiv最熱NLP大模型論文：揭露大語言模型短板，北京大學提出事件推理測試基準

今日arXiv最熱NLP大模型論文：揭露大語言模型短板，北京大學提出事件推理測試基準

人工智能領域又一里程碑時刻！北京大學、北京智源人工智能研究院等機構聯合推出大型事件推理評測基準 。這是首個同時在知識和推理層面全面評估大模型事件推理能力的數據集。 總所周知，事件推理需要豐富的事件知識和強大的推理能力，涉及多種推…
閱讀更多...
consul啟動Error_server_rejoin_age_max (168h0m0s) - consider wiping your data dir

consul啟動Error_server_rejoin_age_max (168h0m0s) - consider wiping your data dir

consul 啟動報錯： consul[11880]: 2024-05-12T08:37:51.095-0400 [ERROR] agent: startup error: error"refusing to rejoin cluster because server has been offline for more than the configured server_rejoin_age_max (168h0m0s) - consider wiping you…
閱讀更多...
【GD32】02-ADC模擬數字轉換器

【GD32】02-ADC模擬數字轉換器

ADC 在電子和通信技術中，ADC（模擬數字轉換器）是一種將模擬信號轉換為數字信號的電子設備。這種轉換是電子系統中非常關鍵的一個環節，因為數字信號更易于處理、存儲和傳輸。ADC的工作原理通常包括采樣、保持、量化和編碼等步驟。采…
閱讀更多...
http協議 tomcat如何訪問資源 servlet理論介紹

http協議 tomcat如何訪問資源 servlet理論介紹

tomcat介紹 bin是啟動命令； conf是配置，可以修改端口號； lib是依賴的jar包； logs是日志 webapps是重點，在這里新建我們自己的javaWeb項目 tomcat如何訪問資源 tomcat通過統一資源定位符（URL）來…
閱讀更多...
鄉村振興與農村基礎設施建設：加大農村基礎設施建設投入，提升農村公共服務水平，改善農民生產生活條件，構建宜居宜業的美麗鄉村

鄉村振興與農村基礎設施建設：加大農村基礎設施建設投入，提升農村公共服務水平，改善農民生產生活條件，構建宜居宜業的美麗鄉村

一、引言 鄉村振興是我國現代化進程中的重要戰略，而農村基礎設施建設則是鄉村振興的基石。隨著城市化進程的加快，農村基礎設施建設滯后的問題日益凸顯，成為制約鄉村發展的瓶頸。因此，加大農村基礎設施建設投入，提升農…
閱讀更多...
打造一套在線教育系統,如何在教育這個慢行業打造品牌?

打造一套在線教育系統,如何在教育這個慢行業打造品牌?

品牌對于教育行業非常重要，很多從事教育行業的朋友一直想塑造屬于自己的品牌形象，但做起來卻沒那么容易。因為教育行業相對來說是一個慢行業，用戶必須看到效果才會認可，而教育的效果往往需要經過長期的學習才能看到。 我覺得&…
閱讀更多...
AI大模型探索之路-訓練篇21：Llama2微調實戰-LoRA技術微調步驟詳解

AI大模型探索之路-訓練篇21：Llama2微調實戰-LoRA技術微調步驟詳解

系列篇章💥 AI大模型探索之路-訓練篇1：大語言模型微調基礎認知 AI大模型探索之路-訓練篇2：大語言模型預訓練基礎認知 AI大模型探索之路-訓練篇3：大語言模型全景解讀 AI大模型探索之路-訓練篇4：大語言模型訓練數據集概…
閱讀更多...
華為OD機試 - 執行任務賺積分 - 動態規劃（Java 2024 C卷 100分）

華為OD機試 - 執行任務賺積分 - 動態規劃（Java 2024 C卷 100分）

華為OD機試 2024C卷題庫瘋狂收錄中，刷題點這里 專欄導讀 本專欄收錄于《華為OD機試（JAVA）真題（A卷+B卷+C卷）》。 刷的越多，抽中的概率越大，每一題都有詳細的答題思路、詳細的代碼注釋、樣例測試，發現新題目，隨時更新，全天CSDN在線答疑。 一、題目描述 現有 N 個任…
閱讀更多...
Gradle基礎學習（六） 認識任務Task

Gradle基礎學習（六） 認識任務Task

理解Gradle中的任務 Gradle的構建過程基于任務（Task）的概念，而每個任務都可以包含一個或多個動作（Action）。 任務是構建中執行的一些獨立的工作單元，例如編譯類、創建JAR、生成Javadoc或將存檔發布到倉庫…
閱讀更多...
4.5網安學習第四階段第五周回顧(個人學習記錄使用)

4.5網安學習第四階段第五周回顧(個人學習記錄使用)

本周重點 ①部署域環境（Win2008） ②域組策略 ③域內信息收集 ④(重點)哈希傳遞攻擊PTH ⑤MS14-068 提權漏洞 ⑥黃金票據偽造 ⑦白銀票據偽造 ⑧ZeroLogon (CVE-2020-1472) 漏洞復現 本周主要內容 ①部署域環境（Win2008）…
閱讀更多...
【算法】滑動窗口——串聯所有單詞的子串

【算法】滑動窗口——串聯所有單詞的子串

今天來以“滑動窗口”的思想來詳解一道比較困難的題目——串聯所有單詞的子串，有需要借鑒即可。 目錄 1.題目2.下面是示例代碼3.總結 1.題目 題目鏈接：LINK 這道題如果把每個字符串看成一個字母，就是另外一道中等難度的題目，即&…
閱讀更多...
對象，字符串的解構賦值

對象，字符串的解構賦值

大家想了解更多，可以去看阮一峰的ECMAScript6(ES6)標準入門課程 對象 簡介 解構不僅可以用于數組，還可以用于對象。 let { foo, bar } { foo: aaa, bar: bbb }; foo // "aaa" bar // "bbb" 對象的解構與數組有一個重要的不同。…
閱讀更多...
最新文章

Copyright @ 2022~2023