本文分享自华为云社区《Jenkins对接CCE autopilot集群实战》,作者: 可以交个朋友。

一 背景

鉴于日趋流行的serverless技术架构、以及用户经常谈及的降本的需求。考虑Jenkins主从架构的特性,slave节点可以在工作的时候部署在任意平台上执行master节点下发的任务,因此可以基于CCE Autopilot集群为Jenkins的agent节点设置运行平台。


二 简介

  • 以java项目为例,完成java 业务从代码拉取、maven编译、构建镜像、推送镜像、修改yaml文件推送到代码仓库等一系列CI流程。
  • jenkins agent容器使用谷歌提供的Kaniko镜像

三 操作实践

提前安装好jenkis,并配置kubernetes插件。


3.1 配置jenkins连接autopilot集群

  1. 创建autopilot集群的连接凭据
    类型: 选择secret file
    file: 上传autopilot集群的kubeconfig配置文件
  2. 以Java项目为例,实现Jenkins对接CCE Autopilot集群_docker

  3. Clouds中配置连接autopilot集群
    在系统管理中选择clouds,点击新增
  4. 以Java项目为例,实现Jenkins对接CCE Autopilot集群_Jenkins_02

  5. Cloud name: 自定义即可
    Type: 选择Kubernetes
  6. 以Java项目为例,实现Jenkins对接CCE Autopilot集群_Serverless_03

  7. Kubernetes地址: 填写autopilot集群的apiserver连接地址
    Kubernetes命名空间: 动态agent运行的命名空间,可自定义
  8. 以Java项目为例,实现Jenkins对接CCE Autopilot集群_Jenkins_04

  9. 凭据: 选择步骤1创建的凭据,选择完凭据之后点击测试连接,连接正常就能查看集群版本
    jenkins地址: jenkins的访问地址
    jenkins通道: jenkins访问的50000端口,需要创建svc开发该端口
  10. 以Java项目为例,实现Jenkins对接CCE Autopilot集群_CI/CD_05

  11. 配置完成,最后保存即可。

3.2 配置pod模板

  1. 在Clouds中选择Pod Templates然后点击创建

    以Java项目为例,实现Jenkins对接CCE Autopilot集群_Serverless_06

  2. 名称: 可自定义
    命名空间: 选择和Clouds配置一样即可,如:default
    用法: 默认即可。例如: 只允许运行绑定到这台机器的job
  3. 以Java项目为例,实现Jenkins对接CCE Autopilot集群_Serverless_07

  4. 配置基础镜像模版
    名称: 填写jnlp,固定写法
    Docker镜像: inbound镜像,执行 docker pull jenkins/inbound-agent,然后上传到swr
    工作目录: 自定义

    以Java项目为例,实现Jenkins对接CCE Autopilot集群_Serverless_08

  5. 配置Maven打包镜像
    名称: 填写maven,可自定义,写pipeline时会用到
    Docker镜像: maven镜像,docker pull maven:3.8.1-jdk-8,然后又推送到swr镜像仓库
    工作目录: 自定义
    运行命令: sleep
    运行参数: 9999999

    以Java项目为例,实现Jenkins对接CCE Autopilot集群_CCE_09

  6. 配置build镜像任务
    名称: 填写build,可自定义,写pipeline会用到
    Docker镜像: kaniko镜像,docker pull aiotceo/kaniko-executor,提前推送到SWR
    工作目录: 可以自定义
    运行命令: /busybox/cat
  7. 以Java项目为例,实现Jenkins对接CCE Autopilot集群_docker_10


3.3 其他配置

  1. 对Maven的打包目录进行缓存
    前提:需要前提创建一个PVC存储
    申明值:填写创建的PVC存储名称
    挂载路径:固定填写/root/.m2

    以Java项目为例,实现Jenkins对接CCE Autopilot集群_Jenkins_11

  2. 配置拉取镜像的secret
    名称:固定填写default-secret

    以Java项目为例,实现Jenkins对接CCE Autopilot集群_CI/CD_12

  3. 配置连接swr的secret
    登录ECS服务器,配置连接autopilot集群,执行如下代码:
yum install git -y 
kubectl create secret docker-registry swr-secret  \
--docker-server=https://swr.cn-******.com \
--docker-username=***** --docker-password=****** \
--dry-run=client -o json |jq -r  \
'.data.".dockerconfigjson"' |base64 -d > /tmp/config.json
kubectl create secret generic swr-secret --from-file=config.json

docker-server:填写swr的接口地址
docker-username:填写 region@ak,通过AK,SK获取长期登录指令。 例如: cn-north-7@HL9SLYV9UDY428M6TAJ5
docker-password:填写SK,通过AK,SK获取长期登录指令。

4、配置Secret Volume
Secret名称: 填写上面生成的secret名字
挂载路径: kaniko/.docker,固定写法


3.4 编写pipeline

def repository_url = "swr.******.com"
def git_repo = "https://******.git"
def app_git_branch = "master"

podTemplate(
inheritFrom: 'agent',
cloud: 'test'
) {
  node(POD_LABEL) {
  	stage('拉取代码'){‘
    	echo "pull clone"'
        git branch: "${app_git_branch}", url: "${git_repo}"
    }
  container('maven'){
  	stage('编译打包'){
    	echo "build package"
        sh "mvn clean package -DskipTests"
    }
  }
  
  container('build'){
  	stage('镜像构建'){
    	echo "build images and push images"
        sh "/kaniko/executor -f Dockerfile -c . -d  ${repository_url}/tomcat:${BUILD_ID} --force"
    }
  }
  }
 }

四 结果展示

  1. jenkins agent 运行在autopilot 集群中

    以Java项目为例,实现Jenkins对接CCE Autopilot集群_Jenkins_13

  2. 推送镜像到SWR镜像仓库中

    以Java项目为例,实现Jenkins对接CCE Autopilot集群_CI/CD_14

  3. jenkins CI阶段视图如下

    以Java项目为例,实现Jenkins对接CCE Autopilot集群_CCE_15

点击关注,第一时间了解华为云新鲜技术~