DevOps系列文章之 GitlabCICD自動化部署SpringBoot項目

一、概述

本文主要記錄如何通過Gitlab CI/CD自動部署SpringBoot項目jar包。

二、前期準備

準備三臺 CentOS7服務器,分別部署以下服務:

序號系統IP服務
1CentOS7192.168.56.10Gitlab
2CentOS7192.168.56.11Runner (安裝Docker)
3CentOS7192.168.56.12SpringBoot 項目 jar 包(安裝jdk、maven等)

上述服務也可以只用一臺CentOS7,將所有程序都部署在同一機器上,但是更建議分開部署;

三、總體架構圖

?

說明:

  • Gitlab Server 用于部署Gitlab遠程倉庫,對CPU和內存要求比較高,建議4核CPU,4GB以上內存;
  • Runner Server 用于部署執行.gitlab-ci.yml 文件中定義的 stage(階段);需要具有訪問 Gitlab 倉庫的權限,可以下載代碼,通過注冊方式(gitlab-runner register)實現;
  • Your Laptop Server 用戶部署你的應用程序,這里就是SpringBoot的 jar 包,需要提前安裝 JDK 和 Maven 并配置好環境變量;

四、環境搭建

1、環境準備(可選)

三臺服務器執行以下命令:

1

2

3

yum -y upgrade

yum -y install wget

yum -y install vim

2、Gitlab安裝

參考地址:
https://about.gitlab.com/install/#centos-7
CentOS8.1搭建Gitlab服務器詳細教程_Linux_腳本之家

(1)安裝并配置必要的依賴

1

2

3

4

5

6

7

sudo yum install -y curl policycoreutils-python openssh-server

sudo systemctl enable sshd

sudo systemctl start sshd

sudo firewall-cmd --permanent --add-service=http

sudo firewall-cmd --permanent --add-service=https

sudo systemctl reload firewalld

(2)安裝郵件服務

1

2

3

sudo yum install postfix

sudo systemctl enable postfix

sudo systemctl start postfix

(3)添加 gitlab 鏡像

參考地址:Index of /gitlab-ce/yum/el7/ | 清華大學開源軟件鏡像站 | Tsinghua Open Source Mirror

1

wget https://mirrors.tuna.tsinghua.edu.cn/gitlab-ce/yum/el7/gitlab-ce-13.4.0-ce.0.el7.x86_64.rpm

(4)安裝 gitlab 安裝命令

1

rpm -i gitlab-ce-13.4.0-ce.0.el7.x86_64.rpm --nodeps --force

安裝成功后圖片:

?

(5)修改gitlab配置文件指定服務器ip和自定義端口

1

vim? /etc/gitlab/gitlab.rb

(6)重置并啟動GitLab

1

2

gitlab-ctl reconfigure

gitlab-ctl restart

提示 "ok: run:"表示啟動成功

(7)訪問 GitLab頁面

如果報502,等待一段時間后再刷新試試,一般1-2分鐘左右。

GitLab登錄頁面

本文設置的賬號:root ,新密碼:11112222

3、安裝 Runner

參考官方文檔:https://docs.gitlab.com/runner/install/linux-manually.html#install-gitlab-runner-manually-on-gnulinux?中的 Using binary file Install

(1)下載一個二進制文件

1

sudo curl -L --output /usr/local/bin/gitlab-runner https://gitlab-runner-downloads.s3.amazonaws.com/latest/binaries/gitlab-runner-linux-amd64

(2)修改執行權限

1

sudo chmod a+x /usr/local/bin/gitlab-runner

(3)創建 GitLab CI 用戶

1

sudo useradd --comment 'GitLab Runner' --create-home gitlab-runner --shell /bin/bash

(4)安裝并作為服務運行

1

2

sudo gitlab-runner install --user=gitlab-runner --working-directory=/home/gitlab-runner

sudo gitlab-runner start

如果遇到提示 sudo: gitlab-runner: command not found,切換到 root 用戶,可以去掉 sudo 執行上面命令。

(5)注冊 Runner

參考地址:Registering runners | GitLab
執行 gitlab-runner register 命令:

1

2

3

4

5

6

7

8

9

10

11

12

13

14

15

16

17

18

19

20

21

22

23

[root@localhost bin]# gitlab-runner register

Runtime platform??????????????????????????????????? arch=amd64 os=linux pid=21527 revision=4e1f20da version=13.4.0

Running in system-mode.

Please enter the gitlab-ci coordinator URL (e.g. https://gitlab.com/):

http://192.168.56.10/

Please enter the gitlab-ci token for this runner:

PwF1sZPX_zsB-xChSKjH

Please enter the gitlab-ci description for this runner:

[localhost.localdomain]: test ci cd desc

Please enter the gitlab-ci tags for this runner (comma separated):

my-tag,other-tag

Registering runner... succeeded???????????????????? runner=PwF1sZPX

Please enter the executor: ssh, virtualbox, parallels, shell, docker-ssh, docker+machine, docker-ssh+machine, kubernetes, custom, docker:

docker

Please enter the default Docker image (e.g. ruby:2.6):

maven:3.3.9-jdk-8

Runner registered successfully. Feel free to start it, but if it's running already the config should be automatically reloaded!

注:這里選擇的docker方式,所以服務器上還需要額外多安裝docker
參考:史上最全(全平臺)docker安裝方法! - 知乎

1

2

3

4

5

6

7

8

9

10

11

12

13

14

15

16

17

18

19

20

21

22

23

24

25

26

27

28

29

30

31

32

33

34

35

36

37

38

39

40

41

42

43

44

45

46

47

48

#!/bin/bash

# 移除掉舊的版本

sudo yum remove docker \

??????????????????docker-client \

??????????????????docker-client-latest \

??????????????????docker-common \

??????????????????docker-latest \

??????????????????docker-latest-logrotate \

??????????????????docker-logrotate \

??????????????????docker-selinux \

??????????????????docker-engine-selinux \

??????????????????docker-engine

# 刪除所有舊的數據

sudo rm -rf /var/lib/docker

#? 安裝依賴包

sudo yum install -y yum-utils \

??device-mapper-persistent-data \

??lvm2

# 添加源,使用了阿里云鏡像

sudo yum-config-manager \

????--add-repo \

????http://mirrors.aliyun.com/docker-ce/linux/centos/docker-ce.repo

# 配置緩存

sudo yum makecache fast

# 安裝最新穩定版本的docker

sudo yum install -y docker-ce

# 配置鏡像加速器

sudo mkdir -p /etc/docker

sudo tee /etc/docker/daemon.json <<-'EOF'

{

??"registry-mirrors": ["http://hub-mirror.c.163.com"]

}

EOF

# 啟動docker引擎并設置開機啟動

sudo systemctl start docker

sudo systemctl enable docker

# 配置當前用戶對docker的執行權限

sudo groupadd docker

sudo gpasswd -a ${USER} docker

sudo systemctl restart docker

這里注冊一個全局共享的 Runner(管理員權限,復制服務器地址和 Token),所有項目都可以使用,或者也可以注冊項目級別單獨的 Runner (進入項目 Runner 設置頁面,復制地址和 Token)。

添加GitLab-Runner

注冊成功后,Runner 列表可以查看到注冊的 Runner

GitLab-Runner添加成功

勾選:Run untagged jobs Indicates whether this runner can pick jobs without tags

GitLab-Runner配置

4、安裝應用服務器環境

(1)允許用戶遠程登錄(可選)

1

2

3

4

5

6

7

vi /etc/ssh/sshd_config

修改:

PasswordAuthentication yes?????????????????????

PermitRootLogin yes

重啟服務:

service sshd restart

(2)安裝JDK1.8

(1)下載地址:http://www.oracle.com/technetwork/java/javase/downloads/jdk8-downloads-2133151.html
(2)解壓

1

2

3

tar -zxvf jdk-8u161-linux-x64.tar.gz

重命名:

mv jdk1.8.0_161 java1.8

(3)配置環境變量

1

2

3

4

5

6

7

8

9

10

vi /etc/profile

添加以下內容:

export JAVA_HOME=/usr/local/java1.8

export PATH=$JAVA_HOME/bin:$PATH

export CLASSPATH=.:$JAVA_HOME/lib/dt.jar:$JAVA_HOME/lib/tools.jar

保存退出

source /etc/profile

java -version

(3) 安裝 Maven3.3.9

(1)下載地址:http://maven.apache.org/download.cgi
(2)解壓

1

2

3

4

tar -zxvf apache-maven-3.3.9-bin.tar.gz

重命名:

mv apache-maven-3.3.9 maven-3.3.9

(3)配置環境變量

1

2

3

4

5

6

7

8

9

vi /etc/profile

添加以下內容:

export MAVEN_HOME=/usr/local/maven-3.3.9

export PATH=$MAVEN_HOME/bin:$PATH

保存退出

source /etc/profile

mvn -v

五、創建 SpringBoot 項目

1、使用Gitlab Spring 模板快速創建一個 SpringBoot 項目;

GitLab創建SpringBoot項目

SpringBoot項目配置gitlab-ci.yml.jpg

如果報錯,刪除pom.xml中的這行

報這個錯的話:
[FATAL] Non-resolvable parent POM for com.example:demo:0.0.1-SNAPSHOT: Could not transfer artifact org.springframework.boot:spring-boot-starter-parent:pom:2.0.1.RELEASE from/to central (https://repo.maven.apache.org/maven2): Connect to repo.maven.apache.org:443 [repo.maven.apache.org/151.101.40.215] failed: Connection timed out (Connection timed out) and ‘parent.relativePath' points at wrong local POM @ line 14, column 10

修改版本
1.5.9.RELEASE

2、添加環境變量(登錄應用服務器密碼)

注: 其中 ssh_password 這個添加到環境變量中,取消勾選 Protect Branch (僅保護分支);修改和添加都是默認勾選,需要取消,否則,其他分支不能讀取到該變量;

?

先在應用服務器上創建一個目錄,用于上傳存放項目 jar 包:

1

mkdir gitlab-project

添加 .gitlab-ci.yml 文件時,可以先再 CI/CD Pipeline 中 的 CI Lint 中檢驗 .gitlab-ci.yml 文件格式

1

2

3

4

5

6

7

8

9

10

11

12

13

14

15

16

17

18

19

20

21

22

23

24

25

26

27

28

29

30

31

32

33

34

35

36

37

38

39

40

41

# 定義一些變量, 下面各階段會使用

variables:

??server_ip: 192.168.56.12

??jar_name: demo-0.0.1-SNAPSHOT.jar

??java_path: /usr/local/java1.8/bin

??upload_path: /usr/local/gitlab-project

# 定義執行的各個階段及順序

stages:

??- build

??- upload

??- deploy

# 使用 maven 鏡像打包項目

maven-build:

??stage: build

??image: maven:3.5.0-jdk-8

??script:

????- mvn package -B -Dmaven.test.skip=true

??cache:

????key: m2-repo

????paths:

??????- .m2/repository

??artifacts:

????paths:

??????- target/$jar_name

# 上傳生成的 jar 包到你的應用服務器,這里使用 ictu/sshpass 這個鏡像,是為了使用 sshpass 命令

upload-jar:

??stage: upload

??image: ictu/sshpass

??script:

????- ls -l target/

????- sshpass -p $ssh_password scp -o UserKnownHostsFile=/dev/null -o StrictHostKeyChecking=no target/$jar_name root@$server_ip:$upload_path/$jar_name

# 啟動 SpringBoot jar包

deploy-test:

??stage: deploy

??image: ictu/sshpass

??script:

????- sshpass -p $ssh_password ssh -o UserKnownHostsFile=/dev/null -o StrictHostKeyChecking=no root@$server_ip "nohup $java_path/java -jar $upload_path/$jar_name >/dev/null 2>&1 &"

這里使用了DockerHub上面的一個公共鏡像(ictu/sshpass),主要是想使用啟動自帶的sshpass命令執行scp和ssh命令。
如果一切順利的話,就會自動觸發 CI/CD ;失敗的話查看報錯信息,可使用 Debug 模式執行調試命令 。

1

2

3

4

5

[root@localhost gitlab-project]# jps

22119 Jps

22073 demo-0.0.1-SNAPSHOT.jar

[root@localhost gitlab-project]# curl localhost:8080

Spring is here!

?

可能遇到的問題總結:

  1. 權限問題:可以先使用 root 用戶看看是不是權限問題導致,如果是的話,提升執行用戶的權限;并發問題:這里沒有修改 Runner 的并發數,可以修改同時可以進行的任務并發數;其他問題:讀取不到配置的環境變量,取消勾選僅保護分支的選項;
  2. 未執行job:沒有勾選未配置 tags 也執行選項;

六、總結

使用GitLab自帶的CICD功能部署SpringBoot項目非常方便,前期環境搭建可能需要花一點時間學習,但是后期部署項目可以省去很多人為操作失誤,對于小型團隊來說,Gitlab自帶的CICD功能比Jenkins更加簡單,總體思想步驟是:

搭建GitLab服務;搭建GitLab Runner服務;搭建應用服務;編寫gitlab-ci.yml;
對于SpringBoot項目來說,一般分為:
(1)maven 打包;
(2)上傳jar包;
(3)啟動jar包;

本文來自互聯網用戶投稿,該文觀點僅代表作者本人,不代表本站立場。本站僅提供信息存儲空間服務,不擁有所有權,不承擔相關法律責任。
如若轉載,請注明出處:http://www.pswp.cn/news/41807.shtml
繁體地址,請注明出處:http://hk.pswp.cn/news/41807.shtml
英文地址,請注明出處:http://en.pswp.cn/news/41807.shtml

如若內容造成侵權/違法違規/事實不符,請聯系多彩編程網進行投訴反饋email:809451989@qq.com,一經查實,立即刪除!

相關文章

Spring boot中的線程池-ThreadPoolTaskExecutor

一、jdk的阻塞隊列&#xff1a; 二、Spring boot工程的有哪些阻塞隊列呢&#xff1f; 1、默認注入的ThreadPoolTaskExecutor 視頻解說&#xff1a; 線程池篇-springboot項目中的service層里簡單注入ThreadPoolTaskExecutor并且使用_嗶哩嗶哩_bilibili 程序代碼&#xff1a;…

預測算法|改進粒子群算法優化極限學習機IDM-PSO-ELM

回歸擬合&#xff1a; 分類 本文是作者的預測算法系列的第四篇&#xff0c;前面的文章中介紹了BP、SVM、RF及其優化&#xff0c;感興趣的讀者可以在作者往期文章中了解&#xff0c;這一篇將介紹——極限學習機 過去的幾十年里基于梯度的學習方法被廣泛用于訓練神經網絡&am…

分布式 - 消息隊列Kafka:Kafka 消費者消息消費與參數配置

文章目錄 1. Kafka 消費者消費消息01. 創建消費者02. 訂閱主題03. 輪詢拉取數據 2. Kafka 消費者參數配置01. fetch.min.bytes02. fetch.max.wait.ms03. fetch.max.bytes04. max.poll.records05. max.partition.fetch.bytes06. session.timeout.ms 和 heartbeat.interval.ms07.…

使用 pyodbc 解析chrome瀏覽器導出的書簽并保存到 Microsoft Access 數據庫

使用 wxPython 和 pyodbc 解析書簽并保存到 Microsoft Access 數據庫的示例博客&#xff1a; 本篇博客介紹了如何使用 wxPython 和 pyodbc 庫創建一個簡單的應用程序&#xff0c;用于解析 HTML 文件中的書簽并將其保存到 Microsoft Access 數據庫中。通過這個示例&#xff0c;您…

【Sklearn】基于梯度提升樹算法的數據分類預測(Excel可直接替換數據)

【Sklearn】基于梯度提升樹算法的數據分類預測(Excel可直接替換數據) 1.模型原理2.模型參數3.文件結構4.Excel數據5.下載地址6.完整代碼7.運行結果1.模型原理 梯度提升樹(Gradient Boosting Trees)是一種集成學習方法,用于解決分類和回歸問題。它通過將多個弱學習器(通常…

ONNX版本YOLOV5-DeepSort (rknn版本已經Ready)

目錄 1. 前言 2. 儲備知識 3. 準備工作 4. 代碼修改的地方 5.結果展示 1. 前言 之前一直在忙著寫文檔&#xff0c;之前一直做分類&#xff0c;檢測和分割&#xff0c;現在看到跟蹤算法&#xff0c;花了幾天時間找代碼調試&#xff0c;看了看&#xff0c;展示效果比單純的檢…

手寫代碼-前端面試

GitHub&#xff1a;手寫代碼集合

HTTP響應狀態碼大全:從100到511,全面解析HTTP請求的各種情況

文章目錄 前言一、認識響應狀態碼1. 什么是HTTP響應狀態碼2. Http響應狀態碼的作用3. 優化和調試HTTP請求的建議 二、1xx 信息響應1. 認識http信息響應2. 常見的信息響應狀態碼 三、2xx 成功響應1. 認識HTTP成功響應2. 常見的成功響應狀態碼 四、3xx 重定向1. 認識http重定向2.…

【javascript】isNaN(‘2-1‘)結果為什么是true

在JavaScript中&#xff0c;isNaN函數用于檢查一個值是否為NaN&#xff08;非數字&#xff09;。當給定的值無法被解析為數字時&#xff0c;isNaN函數會返回true。 因此&#xff0c;使用isNaN(‘2-1’)進行判斷時&#xff0c;2-1’是一個字符串&#xff0c;它包含一個減號&…

github ssh配置

1、生成公鑰 用下面的命令生成公鑰 ssh-keygen -t rsa -b 4096 -C 郵箱 生成的公鑰默認在文件夾 ~/.ssh/ 下的 id_rsa.pub 2、在github配置本地的公鑰 先復制本地公鑰文件中的內容 cat ~/.ssh/id_rsa.pub 打開github的settings > SSH and GPG keys > new SSH key …

QT如何打包

目錄 1.windeployqt工具 2.工具位置 3.使用方法 4.注意事項 Qt Creator 默認以動態鏈接的方式生成可執行文件&#xff0c;該文件無法獨立運行&#xff0c;必須為其提供所需的動態鏈接庫。也就是說&#xff0c;只分享 Qt Creator 生成的可執行文件是不行的&#xff0c;必須將…

nginx部署時http接口正常,ws接口404

可以這么配置 map $http_upgrade $connection_upgrade {default upgrade; close; }upstream wsbackend{server ip1:port1;server ip2:port2;keepalive 1000; }server {listen 20038;location /{ proxy_http_version 1.1;proxy_pass http://wsbackend;proxy_redirect off;proxy…

C語言,malloc使用規范

malloc 是 C 語言中用于分配內存的函數。它的名稱是“memory allocation”的縮寫。malloc 是在 <stdlib.h> 頭文件中定義的。 malloc 的基本語法是&#xff1a; void* malloc(size_t size); 其中 size_t是要分配的字節數。如果分配成功&#xff0c;malloc返回一個指向分配…

什么是字體堆棧(font stack)?如何設置字體堆棧?

聚沙成塔每天進步一點點 ? 專欄簡介? 什么是字體堆棧&#xff08;Font Stack&#xff09;&#xff1f;? 如何設置字體堆棧&#xff1f;? 寫在最后 ? 專欄簡介 前端入門之旅&#xff1a;探索Web開發的奇妙世界 記得點擊上方或者右側鏈接訂閱本專欄哦 幾何帶你啟航前端之旅 …

【卷積神經網絡】卷積,池化,全連接

隨著計算機硬件的升級與性能的提高&#xff0c;運算量已不再是阻礙深度學習發展的難題。卷積神經網絡&#xff08;Convolution Neural Network&#xff0c;CNN&#xff09;是深度學習中一項代表性的工作&#xff0c;CNN 是受人腦對圖像的理解過程啟發而提出的模型&#xff0c;其…

【分類討論】CF1674 E

Problem - E - Codeforces 題意&#xff1a; 思路&#xff1a; 樣例&#xff1a; 這種分類討論的題&#xff0c;主要是去看答案的最終來源是哪幾種情況&#xff0c;這幾種情況得不重不漏 Code&#xff1a; #include <bits/stdc.h>#define int long longusing i64 lon…

淺談5G技術會給視頻監控行業帶來的一些變革情況

5G是第五代移動通信技術&#xff0c;能夠提供更高的帶寬和更快的傳輸速度&#xff0c;這將為視頻技術的發展帶來大量機會。隨著5G技術的逐步普及與商用&#xff0c;人們將能夠享受到更加流暢的高清視頻體驗&#xff0c;并且5G技術還擁有更低的延遲和更高的網絡容量。這些優勢不…

2023牛客暑期多校訓練營9-B Semi-Puzzle: Brain Storm

2023牛客暑期多校訓練營9-B Semi-Puzzle: Brain Storm https://ac.nowcoder.com/acm/contest/57363/B 文章目錄 2023牛客暑期多校訓練營9-B Semi-Puzzle: Brain Storm題意解題思路代碼 題意 解題思路 歐拉定理 a b ≡ { a b % φ ( p ) g c d ( a , p ) 1 a b g c d ( a ,…

GBU812-ASEMI新能源專用整流橋GBU812

編輯&#xff1a;ll GBU812-ASEMI新能源專用整流橋GBU812 型號&#xff1a;GBU812 品牌&#xff1a;ASEMI 封裝&#xff1a;GBU-4 恢復時間&#xff1a;&#xff1e;50ns 正向電流&#xff1a;80A 反向耐壓&#xff1a;1200V 芯片個數&#xff1a;4 引腳數量&#xff…

Linux系統調試——valgrind內存泄露檢測

代碼可能存在內存泄露怎么辦&#xff1f; 使用valgrind可以對代碼進行內存泄露檢測。 valgrind下載安裝 下載&#xff1a;https://www.valgrind.org/downloads/ 安裝&#xff1a; 1、tar –jxvf valgrind-3.21.0.tar.bz2 2、cd valgrind-3.21.0 3、./configure --prefix/ho…