OLTP,OLAP,HTAP是什么,數據庫該怎么選

目錄

OLTP(Online Transaction Processing)聯機事務處理

OLAP(Online Analytical Processing)聯機分析處理

非實時OLAP

實時OLAP

HTAP(Hybrid Transactional/Analytical Processing)

OLAP 和 OLTP 數據庫該怎么選

緊貼核心業務需求

場景舉例


在互聯網高速發展的今天,大量數據的復雜分析和高并發事務處理不可兼得,不同場景對各自需求的性能要求使得數據庫的處理模式被分為兩類,OLTP和OLAP,后來還衍生了兩者兼顧的HTAP。

OLTP(Online Transaction Processing)聯機事務處理

這指的是我們最熟悉的處理模式,也就是絕大多數的實時CRUD的數據庫應用場景。

特點:高并發短事務、快速響應、強一致性
典型場景:訂單創建、支付交易、賬戶余額變更
代表數據庫:MySQL、Oracle、PostgreSQL

在OLTP方面,除了大家熟知的關系型數據庫意外,云原生的發展也出現一些性能更強大的數據庫產品,例如阿里云的?PolarDB,華為云的?GaussDB,這些產品相比MySQL具體更高的TPS和QPS性能,又能很好的兼容MySQL協議。

OLAP(Online Analytical Processing)聯機分析處理

與OLTP不同,OLAP模式主要注重數據查詢分析,可以說是專門為分析而生的架構。?

特點:低并發(幾百或幾十QPS)批量處理、復雜查詢、列式存儲
典型場景:銷售報表、用戶行為分析、BI看板
代表數據庫:ClickHouse、Apache Doris,selectDB、Greenplum

OLAP從時效上來講又分為實時OLAP和非實時OLAP(批量OLAP)兩類,兩者的技術實現和適用場景有顯著差異。

  • 非實時OLAP

數據延遲:小時級或天級
代表技術:Hive + Presto,Oracle Exadata
適用場景:財務報表月結,年度銷售趨勢分析等決策分析場景

  • 實時OLAP

數據延遲:秒級或分鐘級,通過CDC(Change Data Capture)數據同步實現
代表技術:Apache Doris,selectDB,ClickHouse
適用場景:運營大屏,物流軌跡實時追蹤等近實時查詢場景

HTAP(Hybrid Transactional/Analytical Processing)

這種架構同時支持在線事務處理與在線分析處理,但俗話說魚與熊掌不可兼得,這種架構雖然兼容兩種場景,但也是兩方面平衡后的選擇。

特點:事務處理+分析查詢一體化,主打一站式服務
典型場景:需要實時分析的交易系統
代表數據庫:TiDB?

OLAP 和 OLTP 數據庫該怎么選

緊貼核心業務需求

如果你的業務需要的是高并發,穩定,延遲小的處理數據的CRUD,例如訂單交易場景,那OLTP系統就是你的首選。? ?如果你的業務場景是從千萬上億的數據中查詢,分析,統計相關的指標,為決策提供參考,那OLAP更適合你的場景。

那即使是在OLTP方面,市面上的數據庫產品多種多樣,具體選哪個也需要根據你業務數據的特點來決定。總之,在系統建設過程中,應該綜合考慮選用當下最合適的方案。

場景舉例

場景1:B端的交易業務庫用的是MySQL,由于數據增速不快累計增量也少,業務庫可以使用定期歸檔的方式來維持。但是兩年后歸檔的數據量也非常大了,在一些歷史數據查詢分析場景MySQL已經不能支撐了,需要考慮新的數據源選型。
基于方案切換成本考慮,最終選用了實時OLAP的數據庫selectDB,通過把業務庫數據通過CDC同步到selectDB,基于selectDB來支持大數據量下的復雜查詢功能。

場景2:營銷活動業務庫用的是MySQL,數據增量少但是查詢更新量較大,對tps要求較高,在做了異步寫入優化和升級MySQL配置等方案后,還是會出現抖動的情況。
針對這個場景,問題點主要在tps上,經過了解后在GaussDB 和 PolarDB兩款云原生數據庫產品中選了一個,同OLTP模式下這兩個相比MySQL在tps和qps性能上都有較大的提升。

本文來自互聯網用戶投稿,該文觀點僅代表作者本人,不代表本站立場。本站僅提供信息存儲空間服務,不擁有所有權,不承擔相關法律責任。
如若轉載,請注明出處:http://www.pswp.cn/web/91647.shtml
繁體地址,請注明出處:http://hk.pswp.cn/web/91647.shtml
英文地址,請注明出處:http://en.pswp.cn/web/91647.shtml

如若內容造成侵權/違法違規/事實不符,請聯系多彩編程網進行投訴反饋email:809451989@qq.com,一經查實,立即刪除!

相關文章

【前端】CSS Flexbox布局示例介紹

CSS Flexbox(彈性盒子)簡介 Flexbox 是一種一維布局模型,用于高效處理元素在容器內的空間分配、對齊和排序。它通過父容器(flex container)和子元素(flex items)的配合實現靈活響應式布局。核心…

Vue3核心語法基礎

一、為什么要學 Composition API?在以前我們寫代碼用Vue2寫:export default {data() {return { count: 0, msg: hello }},methods: {add() { this.count }},computed: {double() { return this.count * 2 }} }很明顯 一個功能被拆成三塊:data…

FSMC的配置和應用

一、FSMC 簡介與工作原理FSMC(Flexible Static Memory Controller)是 STM32 微控制器中用于與外部靜態存儲器(如 SRAM、PSRAM、NOR Flash、LCD 等)進行通信的一個外設模塊。1、支持的設備類型:SRAM / PSRAMNOR FlashNA…

Linux I/O 系統調用完整對比分析

Linux I/O 系統調用完整對比分析 1. 概述 Linux 提供了豐富的 I/O 系統調用&#xff0c;每種都有其特定的用途和優勢。本文將詳細分析這些系統調用的特點、使用場景和性能特征。 2. 系統調用詳細對比 2.1 基本讀寫函數 pread/pwrite #include <unistd.h>// 位置指定…

TiDB集群部署

架構&#xff1a; tidb–3臺&#xff0c;pd–3臺&#xff0c;tikv–3臺 8c16g200g 1x2.2x.2x7.124 1x2.2x.2x7.148 1x2.2x.2x7.87 1x2.2x.2x7.93 1x2.2x.2x7.127 1x2.2x.2x7.104 pd-3臺 4c8g100g 1x2.2x.2x7.143 1x2.2x.2x7.132 1x2.2x.2x7.91 1、下載安裝包 #注&#xff1a;我…

C#中對于List的多種排序方式

在 C# 中給 List<AI> 排序&#xff0c;只要 明確排序規則&#xff08;比如按某個字段、某幾個字段、或外部規則&#xff09;&#xff0c;就能用下面幾種常見寫法。下面全部基于這個示例類&#xff1a;public class AI {public int country; // 國家編號public int pr…

Spring框架中Bean的生命周期:源碼解析與最佳實踐

第1章&#xff1a;Spring Bean生命周期概述1.1 什么是Spring Bean生命周期&#xff1f;定義&#xff1a;Spring Bean生命周期是指從Bean的創建、初始化、使用到銷毀的完整過程&#xff0c;由Spring容器嚴格管理 。核心思想是Spring容器通過IoC&#xff08;控制反轉&#xff09;…

【51單片機6位數碼管密碼鎖】2022-10-15

緣由六位密碼器設計連接LED-嵌入式-CSDN問答 矩陣51單片機密碼鎖,回復:https://bbs.csdn.net/topics/392713242_智者知已應修善業的博客-CSDN博客 #include "REG52.h" unsigned char code smgduan[]{0x3f,0x06,0x5b,0x4f,0x66,0x6d,0x7d,0x07,0x7f,0x6f,0x77,0x7c,0x…

?我的第一個開源項目:躍動的心

還是一個編程初學者時&#xff0c;我懷著激動的心情完成了人生第一個開源項目——一個用HTML5 Canvas制作的動態跳動愛心效果。這個項目雖然簡單&#xff0c;卻讓我深刻體會到了開源分享的快樂和技術創造的魅力。 壹、項目靈感 這個項目的靈感來源于瀏覽網頁時&#xff0c;被各…

技術演進中的開發沉思-53 DELPHI VCL系列:windows的消息(下):TApplication窗體

今天我們梳理下關于TApplication的窗體消息下半部分的內容。前面也說過&#xff0c;在 Delphi 的世界里&#xff0c;TApplication 就像一位經驗豐富的總工程師&#xff0c;而主窗體則是它傾注心血打造的核心建筑。如果你第一次在實驗室里敲出 Delphi 代碼時&#xff0c;屏幕上彈…

cesium FBO(四)自定義相機渲染到Canvas(離屏渲染)

前面幾節的例子是將Cesium默認的相機渲染到紋理&#xff08;RTT&#xff09;或Canvas&#xff0c;這片文章講解如何將自定義的一個camera的畫面渲染到Canvas上&#xff0c;有了前面幾篇的基礎了&#xff0c;也能將自定義的畫面渲染紋理、也可以灰度處理&#xff0c;原理是一樣的…

雙機并聯無功環流抑制虛擬阻抗VSG控制【simulink仿真模型實現】

雙機并聯虛擬同步發電機&#xff08;VSG&#xff09;系統中&#xff0c;因線路阻抗不匹配及參數差異&#xff0c;易引發無功環流。本方案在傳統VSG控制基礎上&#xff0c;引入自適應虛擬阻抗環節。其核心在于&#xff1a;實時檢測兩機間無功環流分量&#xff0c;據此動態調節各…

python測試總結

測試題的基礎知識點總結 1.循環求和 for循環步長&#xff08;range(2,101,2)&#xff09; while循環條件判斷&#xff08;i%20&#xff09; 生成器表達式&#xff08;sum(i for i in range )&#xff09; 所以&#xff1a;sum(range(1,101,2))&#xff08;奇數和&#xff09;和…

識別和分類惡意軟件樣本的工具YARA

YARA 是一個用于識別和分類惡意軟件樣本的工具,廣泛應用于惡意軟件分析、威脅情報、入侵檢測等領域。它通過編寫規則(YARA Rules)來匹配文件中的特定字符串、十六進制模式、正則表達式等特征。 一、YARA 的基本使用方法 1. 安裝 YARA Linux(Ubuntu/Debian) sudo apt-ge…

GaussDB 約束的語法

1 約束的作用約束是作用于數據表中列上的規則&#xff0c;用于限制表中數據的類型。約束的存在保證了數據庫中數據的精確性和可靠性。約束有列級和表級之分&#xff0c;列級約束作用于單一的列&#xff0c;而表級約束作用于整張數據表。下面是 GaussDB SQL 中常用的約束。NOT …

SecurityContextHolder 管理安全上下文的核心組件詳解

SecurityContextHolder 管理安全上下文的核心組件詳解在 Spring Security 中&#xff0c;SecurityContextHolder 是??安全上下文&#xff08;Security Context&#xff09;的核心存儲容器??&#xff0c;其核心作用是??在當前線程中保存當前用戶的認證信息&#xff08;如用…

c++詳解系列(引用指針)

目錄 1.什么是引用 2.引用的定義 3.引用的特性 4.引用的使用 4.1引用傳參 4.2傳引用返回 5.const引用&#xff08;在引用的定義前用const修飾&#xff09; 5.1對于引用 5.2對于指針 6.引用&指針 總結 1.什么是引用 引用就是給變量起別名&#xff0c;一個變量可以…

深度學習loss總結(二)

對于目前深度學習主流任務學習,loss的設置至關重要。下面就不同任務的loss設置進行如下總結: (1)目標檢測 2D/3D目標檢測中的 Loss(損失函數)是訓練模型時優化目標的核心,通常包括位置、類別、尺寸、方向等多個方面。以下是目前 常見的 2D 和 3D 目標檢測 Loss 分類與…

【Linux網絡】netstat 的 -anptu 各個參數各自表示什么意思?

netstat 是一個網絡統計工具&#xff0c;它可以顯示網絡連接、路由表、接口統計、偽裝連接和多播成員資格。在 netstat 命令中&#xff0c;不同的參數可以用來定制輸出的內容。 你提到的 -anptu 參數組合各自的功能如下&#xff1a; -a (all): 顯示所有活動的連接和監聽端口。它…

[硬件電路-115]:模擬電路 - 信號處理電路 - 功能放大器工作分類、工作原理、常見芯片

功能放大器是以特定功能為核心的集成化放大電路&#xff0c;通過將運算放大器與外圍電阻、電容等元件集成在單一芯片中&#xff0c;實現標準化、高性能的信號放大功能。其核心優勢在于簡化設計流程、提升系統穩定性&#xff0c;并針對特定應用場景優化性能參數。以下從定義、分…