gitlab 加一个runner gitlab 多个runner

转载

字节小舞神 2024-04-19 07:21:28

文章标签 gitlab 加一个runner git ci java 文章分类 运维

最近在自搭的gitlab服务器上加上了ci，大部份操作都比较顺利，但是也碰到一些问题抓狂，记录如下。

1、关于一个project配多个runner：在gitlab-ci里是支持的，但是含义确有点反常，

我之前认为是每个runner都会独立运行所有job，这样一来可以在不同的os上添加runner，以达到多平台测试的目的。

然而gitlab-ci实则对多runner的处理是当成一个资源池，由空闲runner来挑选job，那么build和test两个job可能会在不同的runner上运行，导致依赖错误。

如果只是为了多平台测试目的，可以把每个job复制多份，每份给一个不同的tag（os名），然后各os上的runner也有相应的tag，那么在分配时就会各取所需。

但是这样仍然有问题：

一是复制出来的那么多job已经在那里了，每轮pipeline必须都执行完，但一旦有一个runner不在线（比如说临时挂了或取消了），对应os的job就没人执行，整个pipeline就无法完成。

二是没有办法手动挑选部份os测试，可能某次提交只改了linux平台上相关代码，但是也要把所有平台测试runner跑一遍，非常费事，现在在cm msg里可以用[ci skip]来跳过整轮pipeline，但却没有其它指令来选择（或只跳过）部份jobs。

这一系列问题在gitlab官网上已经很多人提了issue及相关建议，希望在之后版本能改进吧。

https://gitlab.com/gitlab-org/gitlab-ce/issues/18041

https://gitlab.com/gitlab-org/gitlab-ce/issues/24610

2、如何让runner在本机启动一个长进程（不关闭的），比如说deploy job，就在本机部署运行？

问题在于，runner每收到一个job，运行相应的命令，必须要等到该命令完成，以向上汇报运行结果，如果命令里启动了其它进程，也就必须等那些进程结束，一个长运行进程，自然就会卡住整个pipeline了。对于一些常用分离子进程的招数，如前面加nohup，后面加&，都不管用，其原因在于，runner监视自己启动的进程是用进程组的方式，即使脱离父子关系，组仍然存在：

gitlab 加一个runner gitlab 多个runner_git

图中java进程是在运行的测试程序，它和上面启动它的各级bash的pgid是一样的。(https://gitlab.com/gitlab-org/gitlab-ci-multi-runner/issues/2231)

解决这个问题的简单办法，就是让目标进程以service方式启动，这样就彻底脱离了runner的进程组。（当然还有其它方案，最后再说，先把最难的一路回顾完）

然而跟着这一思路走下去，继续遇到各种问题：

a、首先做一个service用来启动目标进程，这是最基本的一步了。在ubuntu上，把控制脚本放到/etc/init.d里，用update-rc.d来注册服务。

b、要启停service，必须有sudo权限，然而runner在后台运行并没有终端用来输密码，怎么办？原来/etc/sudoers里面还可以配置NOPASSWD选项，可以让sudo不输密码，长姿势了。

c、用service来运行进程，用户是root，实际上又以-u方式切换成gitlab-runner这个专用账号，然而它是没有桌面的，因为登录桌面用的是自己的开发人员账号，要运行的是一个java awt程序，没有桌面的话会报错运行不起来，怎么办？原来可以通过共享.Xauthority文件的方式，让其它账号连接自己的桌面，具体则是要在运行java awt之前先导出DISPLAY和XAUTHORITY两个环境变量：

gitlab 加一个runner gitlab 多个runner_git_02