devops[单节点版本]

代码语言：javascript复制

资料下载地址
链接：https://pan.baidu.com/s/12dQ-B82t5mVBwklKYI9ByA?pwd=ue0u 
提取码：ue0u 

第一章 DevOps

第1集 环境了解

• 基本要求 熟练使⽤CentOS 7 / 8 或者其他Linux发现版 了解Docker是什么，不要求会⽤，但要知道容器化是怎么回事 最佳效果 掌握Docker的各种命令，在学习、⼯作中使⽤过Docker，理解什么是容器
• 涉及组件 CentOS 7、Docker、Gitlab、Jenkins、IDEA、Kubeode、Kubernetes、Helm、 Harbor
• 环境准备 4台2核8G物理机、虚拟机、云主机

第2集 什么是devops

DevOps 是 Development（开发）和 Operations（运维）的组合，是 ⼀种⽅法论，是⼀组过程、⽅法与系统的统称，⽤于促进应⽤开发、应2 ⽤运维和质量保障（QA）部⻔之间的沟通、协作与整合，以期打破传 统开发和运营之间的壁垒和鸿沟 CI/CD 的主要概念是持续集成、持续交付和持续部署。 CI/CD 是解决集成新代码可能给开发和运营团队带来的问题（⼜名“集 成地狱”）的解决⽅案。

• CI/CD 中的“CD”指的是持续交付(Continuous Delivery)/持续部署 持续交付通常意味着开发⼈员对应⽤程序的更改会⾃动进⾏错误测试并 上传到存储库（如 GitHub 或容器注册表），然后运维团队可以将它们 部署到实时⽣产环境中。这是对开发团队和业务团队之间可⻅性和沟通 不佳问题的解决⽅案。为此，持续交付的⽬的是确保以最少的努⼒部署 新代码
• CI/CD 中的“CI” 在现代应⽤程序开发中，⽬标是让多个开发⼈员同时开发同⼀个应⽤程 序的不同功能。但是，如果⼀个组织被设置为在某⼀天（称为“合并 ⽇”）将所有分⽀源代码合并在⼀起，那么最终的⼯作可能是乏味的、 ⼿动的和耗时的。这是因为当⼀个单独⼯作的开发⼈员对应⽤程序进⾏ 更改时，它可能会与其他开发⼈员同时进⾏的不同更改发⽣冲突。如果 每个开发⼈员都定制了他们⾃⼰的本地集成开发环境 (IDE)，⽽不是团 队就⼀个基于云的 IDE 达成⼀致，这个问题可能会更加复杂。 5 持续集成 (CI) 帮助开发⼈员更频繁地将他们的代码更改合并回共享分⽀ 或“主⼲”——有时甚⾄每天。合并开发⼈员对应⽤程序的更改后，将通 过⾃动构建应⽤程序并运⾏不同级别的⾃动化测试（通常是单元测试和 集成测试）来验证这些更改，以确保更改不会破坏应⽤程序。这意味着 测试从类和函数到构成整个应⽤程序的不同模块的所有内容。如果⾃动 化测试发现新代码和现有代码之间存在冲突，CI 可以更轻松地快速、频 繁地修复这些错误。

第3集 docker安装

开发机-》gitlab->jenkins->生产服务器 80 8080

• 准备两台服务器安装docker(jenkins-gitlab)

27.129 130

代码语言：javascript复制

systemctl stop firewalld

systemctl stop firewalld.service

systemctl disable firewalld.service

firewall-cmd --zone=public --remove-port=80/tcp --permanent
# 修改时区
ln -sf /usr/share/zoneinfo/Asia/Shanghai /etc/localtime
# 
hwclock -w

• 安装docker

1. 安装底层⼯具

代码语言：javascript复制

sudo yum install -y yum-utils device-mapper-persistent-data lvm2

1. 更新⼀下仓库的源信息

代码语言：javascript复制

sudo yum makecache fast

1. ⾃动安装下载Docker

代码语言：javascript复制

sudo yum -y install docker-ce

1. 启动Docker服务

代码语言：javascript复制

sudo service docker start

1. 验证docker是否启动成功

代码语言：javascript复制

docker version

代码语言：javascript复制

sudo mkdir -p /etc/docker
sudo tee /etc/docker/daemon.json <<-'EOF'
{
 "registry-mirrors": ["https://fskvstob.mirror.aliyuncs.com"]
}
EOF
sudo systemctl daemon-reload
sudo systemctl restart docker

生产 安装jdk

• 安装OpenJDK8

代码语言：javascript复制

yum -y install java-1.8.0-openjdk-devel.x86_64
sudo cat >> /etc/profile <<-'EOF'
export JAVA_HOME=/usr/lib/jvm/java-1.8.0-openjdk
export JRE_HOME=$JAVA_HOME/jre
export CLASSPATH=$JAVA_HOME/lib:$JRE_HOME/lib:$CLASSPATH
export PATH=$JAVA_HOME/bin:$JRE_HOME/bin:$PATH
EOF
source /etc/profile
echo $JAVA_HOME

第4集 gitlab安装

docker服务器操作

• 下载部署Gitlab容器（27.129）

代码语言：javascript复制

    rm -rf /etc/gitlab
    rm -rf /var/log/gitlab
    rm -rf /var/opt/gitlab
docker rm -f gitlab
mkdir -p /etc/gitlab
mkdir -p /var/log/gitlab
mkdir -p /var/opt/gitlab
chmod -R 755 /etc/gitlab
chmod -R 755 /var/log/gitlab
chmod -R 755 /var/opt/gitlab
docker run --name gitlab 
--hostname gitlab.example.com 
--restart=always 
-v /etc/gitlab:/etc/gitlab 
-v /var/log/gitlab:/var/log/gitlab 
-v /var/opt/gitlab:/var/opt/gitlab 
-p 80:80 
-d gitlab/gitlab-ce

查看gitlab 初始化账号密码

代码语言：javascript复制

docker logs -f gitlab 

但是你会发现gitlab日志一直在持续输出，不方便查看。

代码语言：javascript复制

sudo docker exec -it gitlab grep 'Password:' /etc/gitlab/initial_root_password

http://192.168.27.129

⽤户头像->Preferences->Password修改初始密码

第4集 Jenkins安装

https://www.jenkins.io/

• 配置JDK&Maven

代码语言：javascript复制

cd /usr/local
wget --no-check-certificate https://manongbiji.oss-cn-beijing.aliyuncs.com/ittailkshow/devops/download/jdk-8u341-linux-x64.tar.gz
wget --no-check-certificate https://manongbiji.oss-cn-beijing.aliyuncs.com/ittailkshow/devops/download/apache-maven-3.8.6-bin.tar.gz
tar zxvf jdk-8u341-linux-x64.tar.gz
tar zxvf apache-maven-3.8.6-bin.tar.gz
mv jdk1.8.0_341 jdk
mv apache-maven-3.8.6 maven
rm -f jdk-8u341-linux-x64.tar.gz
rm -f apache-maven-3.8.6-bin.tar.gz
cd /usr/local/maven/conf
# 使用别人配置好的maven
rm -f settings.xml
wget --no-check-certificate https://manongbiji.oss-cn-beijing.aliyuncs.com/ittailkshow/devops/download/settings.xml

• 部署Jenkins容器（27.131）

代码语言：javascript复制

rm -rf /var/jenkins/
docker rm -f jenkins
mkdir -p /var/jenkins/
chmod -R 777 /var/jenkins/
docker run --name jenkins 
--restart=always 
-v /var/jenkins/:/var/jenkins_home/ 
-v /usr/local/jdk:/usr/local/jdk 
-v /usr/local/maven:/usr/local/maven 
-p 8080:8080 
-e JENKINS_UC=https://mirrors.cloud.tencent.com/jenkins/ 
-e JENKINS_UC_DOWNLOAD=https://mirrors.cloud.tencent.com/jenkins/ 
-d jenkins/jenkins:2.395
docker logs -f jenkins
docker exec -it jenkins bash

• 国内常⽤的Jenkins插件安装源
  • tencent https://mirrors.cloud.tencent.com/jenkins/
  • tsinghua
  • https://mirrors.tuna.tsinghua.edu.cn/jenkins/
  • ustc https://mirrors.ustc.edu.cn/jenkins/
  • bit http://mirror.bit.edu.cn/jenkins/
• http://192.168.27.131:8080/

⾸⻚点击Manage Jenkins _>管理插件

添加Git Parameter与Publish Over SSH 两款插件即可

第5集 Jenkins⾃动拉取构建代码

首先将代码提交到gitlab(此步骤忽略)

1. Jenkins新建任务myproject-ci，选择⾃由⻛格 -》源码管理-》git
2. 构建：拉取完毕构建代码，选择执⾏Shell

代码语言：javascript复制

sh /usr/local/maven/bin/mvn package

1. 选择构建后操作：“Send build artifacts over SSH”向231服务器发布jar包并运⾏

之前并没有配置⽬标服务器，点击主界⾯“系统配置”找到Public Over SSH，新增⼀个SSH Server

Name：Target-130

Hostname：192.168.27.130

Username：root

Remote Directory：/usr/local

Password: 123456

1. 回到myproject-ci的配置⾯板，找到构建后操作

SSH Server：

name：Target-130

Source files：target/*.jar

Exec command

代码语言：javascript复制

pkill java
nohup java -jar /usr/local/target/myproject.jar & sleep 1 （一秒钟推出）

一定记得点击高级，exec in pty

第5集 ⾃动构建Docker镜像

• 修改原有配置

Dockerfile⽂件

代码语言：javascript复制

FROM openjdk:8-slim
WORKDIR /usr/local
COPY myproject.jar .
CMD java -jar myproject.jar

回到Jenkins，找到构建后操作，删除Exec command所有内容

add transfer set：增加一个传输项

Source files：docker/*

Exec command

代码语言：javascript复制

echo 0

点击运行发现生产服务器多了两个文件夹docker 和 target，现在将两个目录合并在一起

Remove prefix：target

Remove prefix：docker

• 构建镜像(docker)
  • Exec command

代码语言：javascript复制

docker build -t it/myproject:1.0 /usr/local/
docker rm -f myproject
docker run -d -p 80:80--name=myproject it/myproject:1.0

需要pkill 掉之前的java进程

第6集 Harbor安装

开发机-》gitlab->jenkins->Harbor->生产服务器

代码语言：javascript复制

cat > /etc/sysctl.conf <<-'EOF'
net.ipv4.ip_forward=1
vm.max_map_count=655360
EOF
sysctl -p
systemctl stop firewalld

⾃动部署安装Docker-Compose

代码语言：javascript复制

不好下本地安装吧 sudo curl -L https://github.com/docker/compose/releases/download/1.18.0/docker-compose-`uname -s`-`uname -m` -o /usr/local/bin/docker-compose

sudo chmod  x /usr/local/bin/docker-compose
sudo ln -s /usr/local/bin/docker-compose /usr/bin/docker-compose
docker-compose --version
service docker restart

下载离线harbor安装包

下载链接：https://github.com/goharbor/harbor/releases

代码语言：javascript复制

cd /usr/local
太大了，离线装吧 wget --no-check-certificate https://github.com/goharbor/harbor/releases/download/v1.10.14/harbor-offline-installer-v1.10.14.tgz
wget https://ghproxy.com/https://github.com/goharbor/harbor/releases/download/v2.5.3/harbor-offline-installer-v2.5.3.tgz

tar xzvf harbor-offline-installer-v2.5.3.tgz 

修改Habor核⼼配置⽂件harbor.yml

hostname：192.168.27.132

注释掉https.*

默认密码：Harbor12345

安装Harbor

代码语言：javascript复制

./install

Harbor由⼗多个容器组合构成，必须使⽤docker-compose才可以款速安装

卸载Harbor

代码语言：javascript复制

docker-compose down

http://192.168.27.132/

⽤户名：admin

密码：Harbor12345

第7集 Harbor新建镜像仓库并推送

Harbor新建镜像仓库

项⽬名称：public

访问级别：公开

在132Harbor服务器，修改daemon.json，增加harbor私有仓库地址，insecure-registries

代码语言：javascript复制

cat > /etc/docker/daemon.json <<-'EOF'
{
 "registry-mirrors": ["https://fskvstob.mirror.aliyuncs.com"],
 "insecure-registries": ["192.168.27.132:80"]
}
EOF
systemctl daemon-reload
systemctl restart docker

生产服务器也同时添加上面的，进行测试

代码语言：javascript复制

docker images
docker tag b7909ddfe5d1 192.168.27.132:80/public/myproject:1.0 必须包含版本号（public仓库名称 myproject:1.0自定义）
docker login -u admin -p Harbor12345 192.168.27.132:80
docker push 192.168.27.132:80/public/myproject:1.0

第8集 Jenkins自动实现CI持续集成

开发机-》gitlab->jenkins->Harbor->生产服务器

确保Harbor节点上登记了insecure-registries

代码语言：javascript复制

cat > /etc/docker/daemon.json <<-'EOF'
{
 "registry-mirrors": ["https://fskvstob.mirror.aliyuncs.com"],
 "insecure-registries": ["192.168.27.132:80"]
}
EOF
systemctl daemon-reload
systemctl restart docker

代码语言：javascript复制

在系统设置中新增SSH Server： 

name：Harbor-132

hostname：192.168.27.132

username：root 

password：123456

remote directory：/usr/local 

• 在原有构建后操作生产服务器之前，新增Harbor节点操作

向Harbor传输Jar⽂件 向Harbor节点传输Dockerfile，并构建、推送容器

代码语言：javascript复制

docker build -t 192.168.27.132:80/public/myproject:1.0 /usr/local/
docker login -u admin -p Harbor12345 192.168.27.132:80
docker push 192.168.27.132:80/public/myproject:1.0

• 立即构建测试
• 对原有的生产节点进⾏调整，只负责容器创建⼯作

代码语言：javascript复制

docker rm -f myproject
docker run -d -p 80:80 --name=myproject 192.168.27.132:80/public/myproject:1.0

• 再次重新构建，容器已经可以⾃动发布

此处注意，生产节点也必须添加

代码语言：javascript复制

cat > /etc/docker/daemon.json <<-'EOF'
{
 "registry-mirrors": ["https://fskvstob.mirror.aliyuncs.com"],
 "insecure-registries": ["192.168.27.132:80"]
}
EOF
systemctl daemon-reload
systemctl restart docker

第9集 Jenkins参数化构建多版本发布

解决固定版本号问题

• 添加git参数化设置

名称：tag

描述：发布的版本号

默认值：orgin/main

• 在构建部分(Build Steps)：增加构建步骤

原本的package前新增Shell，现⾏checkout指定的版本，$tag引⽤选择的版本号

代码语言：javascript复制

git checkout $tag

Harbor仓库Exec command，将所有1.0改为$tag进⾏引⽤

• 在gitlab中

点击repository->tag,进行打标签

开始构建

第10集 Jenkins Pipeline流水线作业

Pipeline流⽔线提供了脚本化，按阶段步骤处理

配置过程

参照之前选择参数化构建

• 先配置git参数化构建以及代码拉取

代码语言：javascript复制

pipeline {
    agent any

    stages {
        stage('Pull SourceCode'){
            steps{
                这里取流水线代码生成checkout
            }
        }
        
    }
}

• maven构建

代码语言：javascript复制

        stage('Maven Build') {
             steps {
               这里取流水线代码生成 shell
            }
        }

• 将镜像推送到harbor

代码语言：javascript复制

        stage('Publish Harbor Image') {
             steps {
               这里取流水线代码生成 sendbuild ssh
            }
        }

• 拉取镜像启动

代码语言：javascript复制

     stage('Run Container') {
             steps {
               这里取流水线代码生成 sendbuild ssh
            }
        }

完整脚本

代码语言：javascript复制

pipeline {
    agent any

    stages {
        stage('Pull SourceCode'){
            steps{
                checkout scmGit(branches: [[name: '$tag']], extensions: [], userRemoteConfigs: [[credentialsId: '5431ccf7-c145-454a-902a-86c9f0a31b22', url: 'http://192.168.27.129/root/cicd.git']])
            }
        }
        stage('Maven Build') {
             steps {
               sh '/usr/local/maven/bin/mvn package'
            }
        }
        stage('Publish Harbor Image') {
             steps {
    sshPublisher(publishers: [sshPublisherDesc(configName: 'Target-132', transfers: [sshTransfer(cleanRemote: false, excludes: '', execCommand: '', execTimeout: 120000, flatten: false, makeEmptyDirs: false, noDefaultExcludes: false, patternSeparator: '[, ] ', remoteDirectory: '', remoteDirectorySDF: false, removePrefix: 'target', sourceFiles: 'target/*.jar'), sshTransfer(cleanRemote: false, excludes: '', execCommand: '''docker build -t 192.168.27.132:80/public/myproject:$tag /usr/local/
docker login -u admin -p Harbor12345 192.168.27.132:80
docker push 192.168.27.132:80/public/myproject:$tag''', execTimeout: 120000, flatten: false, makeEmptyDirs: false, noDefaultExcludes: false, patternSeparator: '[, ] ', remoteDirectory: '', remoteDirectorySDF: false, removePrefix: 'docker', sourceFiles: 'docker/*')], usePromotionTimestamp: false, useWorkspaceInPromotion: false, verbose: false)])
            }
        }
        stage('Run Container') {
             steps {
               sshPublisher(publishers: [sshPublisherDesc(configName: 'Target-130', transfers: [sshTransfer(cleanRemote: false, excludes: '', execCommand: '''docker rm -f myproject
docker run -d -p 80:80 --name=myproject 192.168.27.132:80/public/myproject:$tag''', execTimeout: 120000, flatten: false, makeEmptyDirs: false, noDefaultExcludes: false, patternSeparator: '[, ] ', remoteDirectory: '', remoteDirectorySDF: false, removePrefix: '', sourceFiles: '')], usePromotionTimestamp: false, useWorkspaceInPromotion: false, verbose: false)])
            }
        }
        
    }
}

第11集 Gitlab托管Jenkinsfile

Repository URL: http://192.168.27.129/root/cicd.git

在源码根路径下新增Jenkinsfile，内容与直接使⽤Script完全相同，然

后上传⾄master分⽀即可。

Jenkins Pipeline会先从Gitlab下载Jekinsfile，在读取脚本执⾏

第二章 引入Kubernetes

第1集 引⼊Kubernetes

开发机-》gitlab->jenkins->Harbor->k9s->生产服务器

随着系统可部署组件的数量增⻓，把它们都管理起来会变得越来越困难。需要⼀个更好的⽅式来部署和

管理这些组件，并⽀持基础设施的全球性伸缩，⾕歌可能是第⼀个意识到这⼀点的公司。⾕歌等全球少

数⼏个公司运⾏着成千上万的服务器，⽽且在如此海量规模下，不得不处理部署管理的问题。这推动着

他们找出解决⽅案使成千上万组件的管理变得有效且成本低廉。

Kubernetes是⼀个软件系统，它允许你在其上很容易地部署和管理容器化的应⽤。它依赖于Linux容器的

特性来运⾏异构应⽤，⽽⽆须知道这些应⽤的内部详情，也不需要⼿动将这些应⽤部署到每台机器。因

为这些应⽤运⾏在容器⾥，它们不会影响运⾏在同⼀台服务器上的其他应⽤，当你是为完全不同的组织

机构运⾏应⽤时，这就很关键了。这对于云供应商来说是⾄关重要的，因为它们在追求⾼硬件可⽤率的

同时也必须保障所承载应⽤的完全隔离。

第2集 快速安装Kubernetes

• 利⽤Kubeode快速部署单节点K8S
• 下载2022-04-24版本
• 将压缩包上传⾄/usr/local⽬录
• 解压缩，并执⾏安装

代码语言：javascript复制

tar xf k8s-2022-04-24.tar
cd k8s-2022-04-24
bash install.sh

• 单机部署

选择第一个

安装成功，⽣成各种⽤户名密码

• http://192.168.31.233:30080 ⽤户名：admin 密码：Kuboard123

容器镜像服务 devops jenkins command gitlab

0 人点赞