Doris-集群部署(四)

創建目錄并拷貝編譯后的文件

1)創建目錄并拷貝編譯后的文件
mkdir /opt/module/apache-doris-0.15.0
cp -r /opt/software/apache-doris-0.15.0-incubating-src/output /opt/module/apache-doris-0.15.0

2)修改可打開文件數(每個節點)(前面的'*'也需要復制)

sudo vim /etc/security/limits.conf
* soft nofile 65535
* hard nofile 65535
* soft nproc 65535
* hard nproc 65535

重啟永久生效,也可以用 ulimit -n 65535 臨時生效。

部署 FE 節點

1)創建 fe 元數據存儲的目錄
mkdir /opt/module/apache-doris-0.15.0/doris-meta
2)修改 fe 的配置文件
vim /opt/module/apache-doris-0.15.0/fe/conf/fe.conf
#配置文件中指定元數據路徑:
meta_dir = /opt/module/apache-doris-0.15.0/doris-meta
#修改綁定 ip(每臺機器修改成自己的 ip)
priority_networks = 192.168.8.101/24

注意:

生產環境強烈建議單獨指定目錄不要放在 Doris 安裝目錄下,最好是單獨的磁盤(如果有 SSD 最好)。

如果機器有多個 ip, 比如內網外網, 虛擬機 docker 等, 需要進行 ip 綁定,才能正確識別。

JAVA_OPTS 默認 java 最大堆內存為 4GB,建議生產環境調整至 8G 以上。

3)啟動 hadoop1 的 FE

/opt/module/apache-doris-0.15.0/fe/bin/start_fe.sh --daemon

配置 BE 節點

1)分發 BE
scp -r /opt/module/apache-doris-0.15.0/be hadoop2:/opt/module
scp -r /opt/module/apache-doris-0.15.0/be hadoop3:/opt/module
2)創建 BE 數據存放目錄(每個節點)
mkdir /opt/module/apache-doris-0.15.0/doris-storage1
mkdir /opt/module/apache-doris-0.15.0/doris-storage2
3)修改 BE 的配置文件(每個節點)
vim /opt/module/apache-doris-0.15.0/be/conf/be.conf
#配置文件中指定數據存放路徑:
storage_root_path = /opt/module/apache-doris-0.15.0/doris-storage1;/opt/module/apache-doris-0.15.0/doris-storage2
#修改綁定 ip(每臺機器修改成自己的 ip)
priority_networks = 192.168.8.101/24

注意:

storage_root_path 默認在 be/storage 下,需要手動創建該目錄。多個路徑之間使用英文狀態的分號;分隔(最后一個目錄后不要加)。

可以通過路徑區別存儲目錄的介質,HDD 或 SSD。可以添加容量限制在每個路徑的末尾,通過英文狀態逗號,隔開,如:

storage_root_path=/home/disk1/doris.HDD,50;/home/disk2/doris.SSD,10;/home/disk2/doris

說明:

/home/disk1/doris.HDD,50,表示存儲限制為 50GB,HDD;
/home/disk2/doris.SSD,10,存儲限制為 10GB,SSD;
/home/disk2/doris,存儲限制為磁盤最大容量,默認為 HDD

如果機器有多個 IP, 比如內網外網, 虛擬機 docker 等, 需要進行 IP 綁定,才能正確識別。

在 FE 中添加所有 BE 節點

BE 節點需要先在 FE 中添加,才可加入集群。可以使用 mysql-client 連接到 FE。

1)安裝 MySQL Client

(1)創建目錄

mkdir /opt/software/mysql-client/

(2)上傳相關以下三個 rpm 包到/opt/software/mysql-client/

mysql-community-client-5.7.28-1.el7.x86_64.rpm
mysql-community-common-5.7.28-1.el7.x86_64.rpm
mysql-community-libs-5.7.28-1.el7.x86_64.rpm

(3)檢查當前系統是否安裝過 MySQL

sudo rpm -qa|grep mariadb
#如果存在,先卸載
sudo rpm -e --nodeps mariadb mariadb-libs mariadb-server

(4)安裝

rpm -ivh /opt/software/mysql-client/*
2)使用 MySQL Client 連接 FE
mysql -h hadoop1 -P 9030 -uroot
默認 root 無密碼,通過以下命令修改 root 密碼。
SET PASSWORD FOR 'root' = PASSWORD('000000');
3)添加 BE
ALTER SYSTEM ADD BACKEND "hadoop1:9050";
ALTER SYSTEM ADD BACKEND "hadoop2:9050";
ALTER SYSTEM ADD BACKEND "hadoop3:9050";
4)查看 BE 狀態
SHOW PROC '/backends';

啟動 BE

1)啟動 BE(每個節點)

/opt/module/apache-doris-0.15.0/be/bin/start_be.sh --daemon

2)查看 BE 狀態

mysql -h hadoop1 -P 9030 -uroot -p
SHOW PROC '/backends';

Alive 為 true 表示該 BE 節點存活。

END

目錄評論

本文來自互聯網用戶投稿,該文觀點僅代表作者本人,不代表本站立場。本站僅提供信息存儲空間服務,不擁有所有權,不承擔相關法律責任。
如若轉載,請注明出處:http://www.pswp.cn/news/163406.shtml
繁體地址,請注明出處:http://hk.pswp.cn/news/163406.shtml
英文地址,請注明出處:http://en.pswp.cn/news/163406.shtml

如若內容造成侵權/違法違規/事實不符,請聯系多彩編程網進行投訴反饋email:809451989@qq.com,一經查實,立即刪除!

相關文章

oracle數據庫巡檢常見腳本-系列三

簡介 作為數據庫管理員(DBA),定期進行數據庫的日常巡檢是非常重要的。以下是一些原因: 保證系統的穩定性:通過定期巡檢,DBA可以發現并及時解決可能導致系統不穩定的問題,如性能瓶頸、資源利用率…

TIDB基礎

TIDB整個邏輯架構跟MYSQL類似,如下: TIDB集群:相當于MYSQL的數據庫服務器,區別是MYSQL數據庫服務器為單進程的,TIDB集群為分布式多進程的。 數據庫:同MYSQL數據庫,數據庫屬于集群,…

VM CentOS7安裝ffmpeg

項目中涉及給視頻添加水印,使用到了ffmpeg,windows系統可直接使用,Linux需要手動編譯完成ffmpeg后才可正常使用。 配置yum源: 備份原repo文件 cd /etc/yum.repos.d/mv /etc/yum.repos.d/CentOS-Base.repo /etc/yum.repos.d/CentOS-Base.r…

編寫自己的CA和TA與逆向

參考內容《手機安全和可信應用開發》 https://note.youdao.com/s/MTlG4c1w 介紹 TA的全稱是Trust Application, 即可信任應用程序。 CA的全稱是Client Applicant, 即客戶端應用程序。 TA運行在OP-TEE的用戶空間, CA運行在REE側。 CA執行時代…

前端 Ajax 技術有哪些優缺點?

Ajax(Asynchronous JavaScript and XML)是一種基于前端 JavaScript 技術的異步通信技術,可以在不刷新整個頁面的情況下向服務器發送請求和接收響應,以實現動態加載內容和交互效果。下面是 Ajax 技術的優缺點: 優點&am…

css實現三行,溢出顯示省略號(后有js實現邏輯)

css實現代碼: .text-container {display: -webkit-box;-webkit-box-orient: vertical;-webkit-line-clamp: 3;overflow: hidden;text-overflow: ellipsis; }解釋: 1.-webkit-box 和 -webkit-box-orient 屬性將容器元素設置為一個垂直方向的彈性盒子&…

需求調研計劃及用戶需求調研單

1.目的 2.概述 3.需求調研計劃 3.1調研目的 3.2調研范圍 3.2.1.調研的職能范圍 3.2.2.調研的業務范圍 3.2.3.調研的地點范圍 3.3調研方式 3.4調研階段 3.5具體時間安排 軟件開發全文檔獲取:點我獲取 1、需求調研計劃 2、用戶需求調研單 項目名稱 客…

C++ auto的作用

auto的作用 保護變量的值不被修改,防止意外的錯誤操作;聲明函數參數為常量引用,以避免函數修改參數的值;聲明類的成員函數為常量成員函數,以確保函數不修改對象的狀態。 1 const關鍵字用于聲明一個常量,…

【EI會議投稿】第九屆電子技術和信息科學國際學術會議(ICETIS 2024)

第九屆電子技術和信息科學國際學術會議(ICETIS 2024) The 9th International Conference on Electronic Technology andInformation Science(ICETIS 2024) ICETIS會議始于2016年,先后吸引眾多來自國內外高等院校、科…

2023亞太杯數學建模競賽C題新能源電動汽車數據分析與代碼講解

C題論文包括摘要、問題重述、問題分析、模型假設、符號說明、模型的建立和求解(問題1模型的建立和求解、問題2模型的建立和求解、問題3模型的建立和求解、問題4模型的建立和求解、問題5模型的建立和求解)、模型的評價等等, 視頻講解如下&…

組件庫篇 | EUI | 按鈕

組件庫篇 | EUI | 按鈕 前言 從本章開始,我將會一一演示所有組件所有函數的調用代碼,以方便讀者掌握組件的具體用法。但這并不意味著在實際使用中要用到所有的函數,請讀者按需取用。 基本介紹 EUI提供了三種類型的按鈕,如下: 常規按鈕 Button文字按鈕 TextButton圖標按鈕…

《洛谷深入淺出基礎篇》P1113 雜物——DAG

上鏈接:P1113 雜務 - 洛谷 | 計算機科學教育新生態 (luogu.com.cn)https://www.luogu.com.cn/problem/P1113 上題干: 題目描述 John 的農場在給奶牛擠奶前有很多雜務要完成,每一項雜務都需要一定的時間來完成它。比如:他們要將奶牛…

編寫SQL語句,場景:從一張表中查詢某字段是逗號分隔的集合值,需要遍歷集合內每個值,將其作為條件去查詢另一張表,最終返回列表

目錄 場景編寫SQL分頁獲取該開票單號下的所有訂單列表使用子查詢和 in 字句使用 find_in_set 場景 從一張表中查詢某字段是逗號分隔的集合值,需要遍歷集合內每個值,將其作為條件去查詢另一張表,最終返回列表 編寫SQL 分頁獲取該開票單號下…

羊大師詳解羊奶如何幫助控制血壓

羊大師詳解羊奶如何幫助控制血壓 羊奶是一種珍貴的天然飲品,不僅具有豐富的營養成分,還被證實對血壓具有調控作用。很多人在了解到羊奶的功效后,都對其與血壓之間的關系產生了濃厚的興趣。接下來,小編羊大師將為大家詳細介紹羊奶…

Linux基本命令與系統題目

1.linux 2.6.* 內核默認支持的文件系統有哪些?[多選] A.ext3 B.ext2 C.ext4 D.xfs E.ufs 2.linux查看cpu占用的命令是什么? A.top B.netstat C.free D.df 3.在Linux系統中, 為找到文件try_grep含有以a字母為行開頭的內容, 可以使用命令&…

算法復雜度分析

文章目錄 有數據范圍反推算法復雜度以及算法內容一般方法遞歸 有數據范圍反推算法復雜度以及算法內容 c一秒可以算 1 0 7 10^7 107~ 1 0 8 10^8 108次 一般方法 看循環 有幾層循環就可以初步分析O( n i n^i ni) 雙指針算法除外O(n) 遞歸 公式法 根據公式的形式&#xff0…

ARM 匯編基礎

我們在學習 STM32 的時候幾乎沒有用到過匯編,可能在學習 UCOS 、 FreeRTOS 等 RTOS 類操作系統移植的時候可能會接觸到一點匯編。但是我們在進行嵌入式 Linux 開發的時候是絕 對要掌握基本的 ARM 匯編,因為 Cortex-A 芯片一上電 SP 指針還…

關于前端上傳

類似于 上面的傳參form-data形式,第一個參數為上傳的文件,第二個參數為json格式

一篇搞定Java注解

參考:https://blog.csdn.net/yeahPeng11/article/details/120394276 https://blog.csdn.net/yeahPeng11/article/details/120330630 https://www.cnblogs.com/CF1314/p/16580232.html 通過現有注解,明白注解是什么東東。 在 SpringBoot中,我…

G320E是一種低榮聲、固定頻率的電荷泵型DC/DC轉換器

G320E 低噪聲電荷泵DC/DC轉換器 產品概述: G320E是一種低榮聲、固定頻率的電荷泵型DC/DC轉換器,在輸入電壓范圍在2.7V到5.0V的情況下,該器件可以產生5V的輸出電壓,最大輸出電流達到300mA.G320E外部元件少,非常適合于…