前置说明: k8s_host=192.168.214.50 //定义k8s_host变量,此ip为k8s管理机 yaml_host=192.168.214.100:9999 //相关服务的配置存放机 step1.登录100 jenkins 的机器 【有初始化的相关脚本的机器,且与k8s机器互相免密访问】 step2.初始化项目的信息 进入到/opt/scripts -->#sh init-yaml.sh test backends [root@localhost scripts]# more init-yaml.sh #!/bin/bash ns=$1 //命名空间 app=$2 //对应的服务名称 yaml=/opt/scripts/yaml //定义一个目录变更 mkdir -p $yaml/$ns/$app/properties //创建目录 touch $yaml/$ns/$app/deploy.yaml //创建文件 cat $yaml/_/deploy_template.yaml | sed "s/_NAMESPACE_/$ns/g" | sed "s/_APPNAME_/$app/g" > $yaml/$ns/$app/deploy_template.yaml //先替换再生成一个新的deployment 的yaml文件 cat $yaml/_/svc.yaml | sed "s/_NAMESPACE_/$ns/g" | sed "s/_APPNAME_/$app/g" > $yaml/$ns/$app/svc.yaml //先替换再生成一个新的service 的yaml 文件 tree $yaml/$ns/$app //以树结构输出出来 step3.初始化service 信息 进入到/opt/scripts -->#sh init-service.sh test backends [root@localhost scripts]# more init-service.sh #!/bin/bash ns=$1 //命名空间 app=$2 //对应的服务名称 kubectl='kubectl --kubeconfig=/etc/kubernetes/kubelet.kubeconfig' //定义了一个kubectl命令变更 ssh root@192.168.214.50 "$kubectl apply -f http://192.168.214.100:9999/$ns/$app/svc.yaml" //跳转到50这台k8s的管理机上,为服务生成service服务代理 ''' k8s分配给Service一个固定IP,这是一个虚拟IP(也称为ClusterIP),并不是一个真实存在的IP,而是由k8s虚拟出来的。虚拟IP的范围通过k8s API Server的启动参数 --service-cluster-ip-range=19.254.0.0/16配置; 虚拟IP属于k8s内部的虚拟网络,外部是寻址不到的。在k8s系统中,实际上是由k8s Proxy组件负责实现虚拟IP路由和转发的,所以k8s Node中都必须运行了k8s Proxy,从而在容器覆盖网络之上又实现了k8s层级的虚拟转发网络。 ''' step4.调整配置信息: [root@localhost backend]# pwd /opt/scripts/yaml/test/backends [root@localhost backends]# tree . ├── deploy_template.yaml ├── deploy.yaml ├── properties │ ├── logback.xml │ └── sysconfigs │ └── zk.properties └── svc.yaml 2 directories, 5 files #cd /opt/script/yaml/test/backends 配置文件pro and svc.yaml→ 从原机器/opt/data/msgback-release/ROOT/WEB-INF/classes 拷贝此目录下的内容到/opt/scripts/yaml/test/backends 此目录下来,修改zk 配置地址信息 修改在svc.yaml 此文件中修改配置的端口信息 step5.Jenkins调用k8s做服务部署到K8s集群中去 jenkins_job: 编译代码并生成镜像,且上传到镜像仓库
namespace='test' //定义一个变量 mvn clean install -DskipTests -U //进行代码的编译,跳过测试,-U强制更新 cd ./test-deployer-cluster/target //编译完成后,此目录下会生成一个test【项目】的目录 rm -rf ./test/conf/sysconfigs //将生成项目目录的配置信息全部清除掉,因为我们需要替换 cp -af /opt/scripts/yaml/test/test-model/properties/sysconfigs/* ./test/conf/sysconfigs //此处就是拿我们自己的配置放入到sysconfigs【项目配置文件存放处】目录下 echo ' cd /opt/test/bin/ dos2unix -k startup.sh //转换文件的格式为unix,避免启动时报文件错误 sh startup.sh& //启动服务 tail -f /var/log/yum.log //打印日志,表明服务是存活的 '> ./start.sh //生成一个启动脚本,存放的目录是为 --> cd ./test-deployer-cluster/target echo ' FROM ult.harbor.com/base/java:v4-skyagent ENV TZ=Asia/Shanghai //定义时区 ENV LANG en_US.UTF-8 //定义字符集 ENV LANGUAGE en_US:en //定义语言 ADD ./test /opt/test //追加test目录到镜像中 ADD ./start.sh /opt/test/ //追加启动脚本到镜像中 CMD ["sh","/opt/test/start.sh"] //镜像启动时执行的命令 ' > Dockerfile //生成一个Dockerfile文件 ,下面脚本会使用这个文件生成镜像 docker build -t ult.harbor.com/$namespace/test-model:${branch}-${BUILD_NUMBER} . //${branch}-${BUILD_NUMBER}为jenkins自动生成的一个变量 docker push ult.harbor.com/$namespace/test-model:${branch}-${BUILD_NUMBER} //将上面命令生成的镜像上传到镜像仓库中,供部署时使用
jenkins_job:调用k8s 将镜像运行进来,生成容器
/opt/scripts/install-app.sh test test-model ${version} //${version} 为jenkins 部署时传入的一个变量
#more /opt/scripts/install-app.sh 如下所示: 【 [root@localhost ~]# more /opt/scripts/install-app.sh ns=$1 //脚本接收的第一个参数 app=$2 //脚本接收的第二个参数 version=$3 //脚本接收的第三个参数 k8s_host=192.168.214.50 //定义k8s_host变量,此ip为k8s管理机 yaml_host=192.168.214.100:9999 //配置存放处 yaml_path=/opt/scripts/yaml/$ns/$app //定义一个路径变量 echo install : ns=$ns , app=$app , version=$version //输出信息 cat $yaml_path/deploy_template.yaml | sed "s/VERSION/$version/g" > $yaml_path/deploy.yaml //替换部署脚本里面的版本号【k8s里面的deploy】 echo -------------replace deploy-------------//输出信息 cat $yaml_path/deploy.yaml //查看信息 echo -------------svc info-------------//输出信息 cat $yaml_path/svc.yaml //查看信息 echo -------------call k8s-------------//输出信息 kubectl='kubectl --kubeconfig=/etc/kubernetes/kubelet.kubeconfig' //定义kubectl命令变量 ssh root@$k8s_host "$kubectl delete -f http://$yaml_host/$ns/$app/deploy.yaml" //删除已存在的容器 ssh root@$k8s_host "$kubectl create -f http://$yaml_host/$ns/$app/deploy.yaml" //创建一个新的容器 】