StarRocks Community Monthly Newsletter (Apr)

版本動態

3.4.3 版本更新

核心功能升級

  • Routine Load和Stream Load新增Lambda表達式支持,支持復雜的列數據提取

  • 增強JSON數據處理能力,支持將JSON Array/Object轉為ARRAY/MAP類型

  • 優化information_schema.task_runs視圖查詢,新增LIMIT支持

性能與穩定性提升

  • 修復查詢ORC格式Hive表時的讀取錯誤

  • 修復查詢含Equality Delete文件的Iceberg表時RuntimeFilter無法下推的問題

  • 修復查詢隊列功能未啟用時的超時誤觸發問題

🔎Release Note: https://docs.mirrorship.cn/zh/releasenotes/release-3.4/

3.4.2 版本更新

功能優化

  • FE支持優雅退出機制,通過./stop_fe.sh -g命令退出時會:

    • 向Load Balancer返回500狀態碼

    • 繼續執行當前查詢直至完成或超時(默認60秒)

性能與穩定性提升

  • 修復分區列為生成列時分區裁剪可能失效的問題

  • 修復concat函數參數處理導致的BE崩潰問題

  • 修復Broker Load導入時ssl_enable屬性不生效的問題

3.3.13 版本更新

功能優化

  1. 審計日志和QueryDetail接口新增FE內存消耗指標

  2. 優化并發創建表達式分區的策略

  3. 新增存活FE節點數的監控指標

  4. information_schema.task_runs視圖支持LIMIT下推

  5. 修復多個CVE安全問題

  6. 主鍵表PUBLISH階段支持Retry機制

  7. 降低Flat JSON的內存占用

  8. information_schema.routine_load_jobs視圖新增timestamp_progress列

  9. 增強LDAP授權驗證機制

  10. AVRO文件與Hive表Schema不一致時明確報錯

  11. 物化視圖新增excluded_refresh_tables屬性

性能與穩定性提升

  1. 修復Flat JSON不支持get_json_bool函數的問題

  2. 修復SHOW AUTHENTICATION語句返回密碼的安全問題

  3. 修復percentile_count函數返回錯誤

  4. 修復大算子落盤策略導致的問題

  5. 修復BE黑名單后Stream Load仍分發任務的問題

🔎Release Note:https://docs.mirrorship.cn/zh/releasenotes/release-3.3/

3.3.12 版本更新

新增功能

  • 新增percentile_approx_weighted函數支持

  • 支持修改Hive Catalog和Hudi Catalog的Property配置

  • Paimon Catalog新增Manifest Cache功能

  • Paimon Catalog支持SHOW PARTITIONS操作

  • Paimon Catalog支持統計信息收集

功能優化

  • 統計信息收集功能多項優化與問題修復

  • 優化建表失敗的錯誤提示信息

  • 增強Broker Load的重試機制

  • 提升array_generate函數執行效率

性能與穩定性提升

  1. 修復INSERT INTO FILES不支持CSV分隔符轉換的問題

  2. 修復Iceberg REST Catalog的若干問題

  3. 修復基于視圖的物化視圖改寫丟失謂詞的問題

  4. 修復Paimon Catalog讀取變更表失敗的問題

StarRocks 應用

1.StarRocks 集群運維工具

貢獻者:夏天

  • 項目亮點:

    • 全局監控:一鍵查看集群核心指標、運行/排隊任務及資源隔離狀態

    • 深度洞察:細粒度監控節點資源(CPU/內存/存儲)及查詢負載

    • 精準定位:快速追蹤特定SQL或連接,高效排查問題

  • 項目介紹:https://forum.mirrorship.cn/t/topic/18550

  • 項目地址:https://github.com/chengkenli/StarRocksDevops

2.StarRocks 權限可視化工具

貢獻者:夏天

  • 項目亮點:

    • 批量權限管理:支持3000+用戶權限的集中查看與管理,告別繁瑣的逐條SQL查詢

    • 快速權限定位:一鍵檢索特定用戶/角色的權限明細,提升權限稽核效率

    • 多Catalog支持:適配復雜多Catalog環境,實現跨數據源的統一權限視圖

  • 項目介紹:https://forum.mirrorship.cn/t/topic/18299/2

  • 項目地址:https://github.com/chengkenli/getu 11

文檔動態

  • 【文檔體驗】:新增功能成熟度標簽【試驗性】以及 【Beta】。

  • 【數據湖】:新增文檔 為 AWS S3 表創建 Iceberg REST Catalog。

  • 【管理手冊】

    更新文檔 存算分離集群 Compaction。

    新增/優化部分 FE/BE 配置項 描述。

  • 【參考手冊】:優化部分 SQL 及函數參考文檔的示例。

本月精選內容

文章精選

邁向云原生:理想汽車 OLAP 引擎變革之路

StarRocks 查詢優化器深度解析

從被動救火到主動預防,StarRocks 監控與告警全攻略

RAG 實戰|用 StarRocks + DeepSeek 構建智能問答與企業知識庫

千萬級數據秒級響應!碧桂園服務技術引擎重構智慧社區新標桿

StarRocks 助力首汽約車精細化運營

StarRocks Compaction&內存異常問題深度剖析

如何實現 SQL Server 全庫 2000+ 表高效同步至 StarRocks

StarRocks 存算一體集群遷移至存算分離,BE減少25%!

StarRocks問題復盤 Clone RUNTIME_ERROR 及修復

StarRocks Zonemap Index

Flink高性能讀寫StarRocks內表剖析

Apache Paimon數據湖查詢引擎StarRocks

視頻精選

【中字教程】數據入湖到可視化:Hudi+MinIO+StarRocks + HiveMetaStore + Apache SuperSet

本月精選活動

StarRocks 社區 2025 布道師計劃正式開啟

StarRocks 社區 2025 布道師計劃正式開啟!我們誠邀開發者圍繞技術內容創作、演講分享、社區答疑三大方向參與共建:可以分享你在 AI、湖倉一體、性能優化等場景中的實踐,也可以登上 Meetup 或技術峰會的舞臺,更可以在論壇和微信群中積極答疑、助力他人。

每月將評選「社區答疑之星」,優秀作品和積分獎勵將于 6 月底公布,并收錄于社區月報。

參與方式、積分規則及積分商城詳情,敬請查閱正文。來領獎啦!StarRocks 社區 2025 布道師計劃正式開啟

StarRocks 小課堂 | 監控告警全覆蓋,別等服務掛了才處理!

4 月 16 日,StarRocks 小課堂邀請鏡舟科技 DBA 團隊負責人景丹,深入解讀監控告警前的核心要點,涵蓋:

  • 服務監控 & 故障處理:FE/BE 服務掛起、Schema Change 失敗、Compaction 異常等場景的應對方案;

  • 服務可用性監控:Checkpoint 異常、Routine Load 延遲、物化視圖刷新失敗等問題的排查技巧;

  • 資源 & 查詢監控:CPU/內存過載、連接數異常、查詢耗時升高等性能瓶頸的優化建議。

告別被動救火,掌握監控主動權

?演講文檔:從被動救火到主動預防,StarRocks 監控與告警全攻略

📺視頻回放:StarRocks 小課堂| 監控告警全覆蓋,別等服務掛了才處理!

本月新晉 Contributor

感謝新朋友們為 StarRocks 社區注入活力!期待你們繼續閃耀光芒,與社區共同成長,創造更多精彩!?🚀

GitHub:https://github.com/StarRocks/starrocks

中文社區官網:https://www.mirrorship.cn/zh-CN/community

本文來自互聯網用戶投稿,該文觀點僅代表作者本人,不代表本站立場。本站僅提供信息存儲空間服務,不擁有所有權,不承擔相關法律責任。
如若轉載,請注明出處:http://www.pswp.cn/pingmian/81372.shtml
繁體地址,請注明出處:http://hk.pswp.cn/pingmian/81372.shtml
英文地址,請注明出處:http://en.pswp.cn/pingmian/81372.shtml

如若內容造成侵權/違法違規/事實不符,請聯系多彩編程網進行投訴反饋email:809451989@qq.com,一經查實,立即刪除!

相關文章

探索AI新領域:生成式人工智能認證(GAI認證)助力職場發展

在數字化時代的大潮中,人工智能(AI)技術以其強大的影響力和廣泛的應用前景,正逐步重塑我們的生活與工作方式。隨著生成式AI技術的崛起,掌握這一前沿技能已成為職場競爭中的關鍵優勢。那么,如何通過系統的學…

數據庫觸發器Trigger

在數據庫管理系統中,觸發器(Trigger)是一種特殊的存儲過程,它在特定的事件發生時自動執行。觸發器通常用于維護數據的完整性和一致性。通過事件觸發而被執行,不能直接調用。 觸發器的三要素 觸發事件 before/after&a…

如何利用 Java 爬蟲獲得某書筆記詳情:實戰指南

在知識分享和學習的領域,許多平臺提供了豐富的書籍筆記和學習資源。通過 Java 爬蟲技術,我們可以高效地獲取這些筆記的詳細信息,以便進行進一步的分析和整理。本文將詳細介紹如何利用 Java 爬蟲獲取某書筆記詳情,并提供完整的代碼…

主成分分析的應用之sklearn.decomposition模塊的PCA函數

主成分分析的應用之sklearn.decomposition模塊的PCA函數 一、模型建立整體步驟 二、數據 2297.86 589.62 474.74 164.19 290.91 626.21 295.20 199.03 2262.19 571.69 461.25 185.90 337.83 604.78 354.66 198.96 2303.29 589.99 516.21 236.55 403.92 730.05 438.41 225.80 …

【Redis】List 列表

文章目錄 初識列表常用命令lpushlpushxlrangerpushrpushxlpop & rpoplindexlinsertllen阻塞操作 —— blpop & brpop 內部編碼應用場景 初識列表 列表類型,用于存儲多個字符串。在操作和實現上,類似 C 的雙端隊列,支持隨機訪問(O(N)…

Android framework 中間件開發(三)

前兩篇我們講了中間件的開發和打包應用, Android framework 中間件開發(一) Android framework 中間件開發(二) 這邊我們來講一下在中間件中編寫JNI 1.新建C文件 找到frameworks\base\services\core\jni\路徑,新建一個cpp文件,文件名為com_android_server_DarkControlService.c…

深入了解linux系統—— 基礎IO(上)

文件 在之前學習C語言文件操作時,我們了解過什么是文件,這里簡單回顧一下: 文件存在磁盤中,文件有分為程序文件、數據文件;二進制文件和文本文件等。 詳細描述見文章:文件操作——C語言 文件在磁盤里&a…

Flink CDC—實時數據集成框架

Flink CDC 是一個基于流的數據集成工具,旨在為用戶提供一套功能更加全面的編程接口(API),它基于數據庫日志的 CDC(變更數據捕獲)技術實現了統一的增量和全量數據讀取。 該工具使得用戶能夠以 YAML 配置文件…

ES(ES2023/ES14)最新更新內容,及如何減少內耗

截至2023年10月,JavaScript(ECMAScript)的最新版本是 ES2023(ES14)。 ES2023 引入了許多新特性,如findLast、toSorted等,同時優化了性能。通過減少全局變量、避免內存泄漏、優化循環、減少DOM操作、使用Web Workers、懶加載、緩存、高效數據結構和代碼壓縮,可以顯著降低…

常見的 Python 環境配置問題及解決方案

1. Python 環境配置的常見問題 初學者在配置 Python 環境時,可能會遇到以下幾類問題: 1.1 不同版本的兼容性 Python 目前有兩個主要版本系列:Python 2.x 和 Python 3.x。Python 2.x 已于 2020 年 1 月 1 日停止維護,因此強烈建…

day20-線性表(鏈表II)

一、調試器 1.1 gdb(調試器) 在程序指定位置停頓 1.1.1 一般調試 gcc直接編譯生成的是發布版(Release) gcc -g //-g調式版本,(體積大,內部有源碼)(DeBug&#…

基于Spring Boot+Layui構建企業級電子招投標系統實戰指南

一、引言:重塑招投標管理新范式 在數字經濟浪潮下,傳統招投標模式面臨效率低、透明度不足、流程冗長等痛點。本文將以Spring Boot技術生態為核心,融合Mybatis持久層框架、Redis高性能緩存及Layui前端解決方案,構建一個覆蓋招標代理…

uniapp -- uCharts 儀表盤刻度顯示 0.9999999 這樣的值問題處理。

文章目錄 ??問題??解決方案??問題 在儀表盤上,23.8變成了 23.799999999999997 ??解決方案 formatter格式化問題 1:在 config-ucharts.js 或 config-echarts.js 配置對應的 formatter 方法 formatter: {yAxisDemo1: function (

git 對于已經追蹤,但沒有git add 的文件,撤回修改的方法

要撤銷對已追蹤文件的修改&#xff08;但尚未使用git add添加到暫存區&#xff09;&#xff0c;你可以使用以下幾種方法&#xff1a; 1. 使用 git restore (Git 2.23.0及更高版本) 這是較新版本Git中推薦的方式&#xff1a; # 撤銷單個文件的修改git restore <file># …

腳本語言Lua

本文來源 &#xff1a;騰訊元寶 Lua是一種輕量級、可嵌入的腳本語言&#xff0c;由巴西里約熱內盧天主教大學的Roberto Ierusalimschy、Waldemar Celes和Luiz Henrique de Figueiredo于1993年開發。其設計目標是嵌入應用程序中&#xff0c;提供靈活的擴展和定制功能。 主要特性…

ThingsBoard使用Cassandra部署時性能優化

1、概述 當遇到ThingsBoard設備數量特別多的時候,并且傳輸數據遙測點量特別大的時候,我們需要調整一下參數來進行優化,使其性能達到最佳的進行快速寫入。 注意:以下這些參數再系統部署的時候就需要規劃好配置,不能安裝好了再二次來進行配置。 2、Cassandra配置參數優化 …

Git Worktree 使用

新入職了一家公司&#xff0c;發現不同項目用的使用一個 git 倉庫管理。不久之后我看到這篇文章。 Git 的設計部??分是為了支持實驗。一旦你確定你的工作被安全地跟蹤&#xff0c;并且存在安全的狀態&#xff0c;以便在出現嚴重錯誤時可以恢復&#xff0c;你就不會害怕嘗試新…

維智定位 Android 定位 SDK

概述 維智 Android 定位 SDK是為 Android 移動端應用提供的一套簡單易用的定位服務接口&#xff0c;為廣大開發者提供融合定位服務。通過使用維智定位SDK&#xff0c;開發者可以輕松為應用程序實現極速、智能、精準、高效的定位功能。 重要&#xff1a;為了進一步加強對最終用…

【CSS】使用 CSS 繪制三角形

一、Border 邊框法&#xff08;最常用&#xff09; 原理&#xff1a;通過設置元素的寬高為 0&#xff0c;利用透明邊框相交形成三角形。 .triangle {width: 0;height: 0;border-left: 50px solid transparent; /* 左側邊框透明 */border-right: 50px solid transparent; /* …

RabbitMQ 快速上手:安裝配置與 HelloWorld 實踐(一)

一、引言 在當今分布式系統大行其道的技術浪潮下&#xff0c;各個服務之間的通信與協同變得愈發復雜。想象一下&#xff0c;一個電商系統在大促期間&#xff0c;訂單服務、庫存服務、支付服務、物流服務等眾多模塊需要緊密配合。如果沒有一種高效的通信機制&#xff0c;系統很容…