qiaomiao209的博客_Android,C/C++,Linux认证,Linux,思科认证,Hadoop,软考,备份,LINUX运维,windows管理,虚拟化

基于jenkins+gitlab+harbor自动化构建k8s发布实现原理和操作方案

piepline基本实现功能： 1、可以发布任何分支，或标签、或每次提交id 。 2、 pipeline通过调用webhook接口，再通过飞书机器人发送jenkins的构建信息到相应的飞书群（如正在构建的前后端代码名，第一几次构建，构建成功或失败等）。 3、 Jenkins每次发布的日志高亮显示，便于排查问题。 4、回滚发布支持docker镜像回滚k8s方式。 5、回滚发布支持传统基于git tag回滚、分支回滚、和 git每次提交id回滚。

自动部署

harbor

jenkins

Pipeline

kubernetes

置顶原创精选 2022-09-09 16:04:45 2766 阅读 1点赞

实用svn主干trunk自动merge各个分支branch脚本

大多数使用svn的公司，当发现bug时或新功能时，会从主干trunk直接产生一个分支branch,如叫bug01。接着同事A修改里面的bug,如果测试通过，就提交分支，将分支bug01合并到主干，并解决冲突和主干保持一致。同事B也拉了个分支bug02，他也修改了，也测试通过，就提交分支，将分支bug02合并到主干，并解决冲突和主干保持一致。理论上没有任何问题。　　但是有这样一个情况，同事A修改n次,每次修改完就提交到分支,合并到主干解决冲突。而同事B是修改完就提交到分支，不合并到主干。也修改了n次。突然有一天，同事Ｂ想合并到主干时发现n多冲突，bug02和主干越走越远，不知道从哪下手解决。今天(20170301)看自己博客时发现，其实大家只要稍改下我脚本，就可以变成　“svn各个branch里分支自动merge到主干trunk脚本”　脚本人一直在用效果杠杠的，

svn

巧妙绝情

主干自动合并分支

svn自动脚本

置顶原创精选 2016-09-08 18:01:52 10000+阅读 4点赞 5收藏 1评论

nginx网站被持续***1个月后最终防攻策略

上上个月架构全部迁移上云以后，总的来说比较稳定，业务量也上来，可爱的坏人也来了，7X24小时不停恶意***我的网站，第一次收到报警是网站流入流量1分钟以内连续3次超过1000000bps,换算下1M/s秒,平时没那么大流量的啊，当时刚好在朋友家玩，于赶紧开本本连***检查，发现全是访问同一个页面的请求，而且是正常访问http 200,应该是被恶意***了。

巧妙绝情

nginx网站

防攻策略

持续***

置顶原创推荐 2016-08-16 19:09:21 10000+阅读 46点赞 60收藏 50评论

项目架构优化后迁移阿里云实录

公司一网站项目由于历史遗留原因已经不能支持先有业务（保密不能告诉你们公司具体项目），决定规划出新的方案，最后上阿里云。这里总结记录下。希望能给准备迁移上云的小伙伴们一个参考。 l 现有网站架构 l 计划架构 l 最终网站架构 l 参考资料到此架构迁移完毕，后续博客会整理具体迁移步骤，并贴出具体文档配置。

nginx

架构优化

巧妙绝情

迁移阿里云

置顶原创 2016-08-12 17:07:54 4418 阅读 6点赞 5收藏 10评论

Lvs别样的自动部署监控shell脚本

先申明，本文现在已经在我公司的测试环境和生产测试环境使用。正式环境请用keepalived+lvs. 安装ipvsadm不多说了，先说说脚本的功能，脚本分为redirect server 端和realserver 端，脚本分别为 lvs_redirector.sh 和realserver.sh脚本。另外加一个监控脚本lvs_monitor.sh(此脚本来源网友，做了一点修改，算是取之于网络，共享给网络吧)。脚本功能：执行 lvs_redirector.sh nat|dr|tun|stop,中的一个选项可以启动相应的lvs模式，并调用lvs_monitor.sh 监控realserver。当realserver故障，或者重新启动时，自动删除，添加相应的realserver.当realserver 全故障时，自动添加redirector server 本地127.0.0.1的web页面的故障提示。当realserver只要有一台恢复时，自动添加相应的realserver,并删除127.0.0.1。

自动化

lvs监控

巧妙绝情

lvs部署脚本

置顶原创推荐 2016-01-20 12:08:21 3844 阅读 9点赞 3收藏 1评论

Lvs通俗易懂的总结

lvs负载调度（schedulers）：　　负载调度器上的负载调度策略和算法,如何将请求流调度到各台服务器,使得各台服务器尽可能地保持负载均衡。主要由两个部分组成: 　　第一部分描述 IP 负载均衡软件 IPVS 在内核中所实现的各种连接调度算法; 　　第二部分给出一个动态反馈负载均衡算法(Dynamic-feedback load balancing),它结合内核中的加权连接调度算法,根据动态反馈回来的负载信息来调整服务器的权值,来进一步避免服务器间的负载不平衡。

lvs/tun

巧妙绝情

置顶原创精选 2015-12-29 16:26:30 3196 阅读 9点赞 2收藏 3评论

LNMP最新源码包一般安装过程及常见问题

安装前，参考官网说明：有两个方法将 PHP 连接到服务器上。对于很多服务器，PHP 均有一个直接的模块接口（也叫做 SAPI）。这些服务器包括 Apache、Microsoft Internet Information Server、Netscape 和 iPlanet 等服务器。其它很多服务器支持 ISAPI，即微软的模块接口（OmniHTTPd 就是个例子）。如果 PHP 不能作为模块支持 web 服务器，总是可以将其作为 CGI 或 FastCGI 处理器来使用。这意味着可以使用 PHP 的 CGI 可执行程序来处理所有服务器上的 PHP 文件请求。 php就是通过php-fpm (FastCGI Process Manager)　与　nginx　相连接的。

lnmp

lnmp源码安装

巧妙绝情

LNMP错误

LNMP最新包

置顶原创精选 2015-11-03 12:24:14 1493 阅读 1点赞

Lamp最新源码包一般安装过程及常见问题

Lamp是Linux+Apache+Mysql/MariaDB+Perl/PHP/Python一组常用来搭建动态网站或者服务器的开源软件。比较流行的是Linux+Apache+Mysql+PHP架构。 php功能很强大，安装包install文件中是这样说的： Before starting the installation, first you need to know what do you want to use PHP for. There are three main fields you can use PHP, as described in the What can PHP do? section: * Websites and web applications (server-side scripting) * Command line scripting * Desktop (GUI) applications 翻译过可以理解为：php一般用作以下3个场景：第

巧妙绝情

lamp参考资料

lamp开源软件

lamp源码包

置顶原创精选 2015-10-10 15:35:40 2500 阅读 2点赞

nagios监控报警一般搭建过程及常见问题

官网是这样定义的： Nagios is a host/service/network monitoring program written in C and released under the GNU General Public License, version 2. CGI programs are included to allow you to view the current status, history, etc via a web interface if you so desire. 翻译过来是这样： Nagios是一个C编写的程序，用来监控主机/服务/网络，并且是GNU 2.0通用公共许可证下发布, CGI程序包括允许您查看当前的状态，历史记录等通过一个Web界面，如果你愿意的话。

nagios配置

nagios错误

巧妙绝情

nagios源码http

置顶原创精选 2015-09-29 15:49:57 2258 阅读 4点赞

可不可以不隐藏nginx版本号

一般我们在使用nginx时，为了减少漏洞，减少黑客针对有版本进行攻击，我们会去隐藏nginx版本号，将http请求响应头里的nginx版本号信息隐藏掉。从安全的角度来说，隐藏版本号会相对安全些！可是换个位思考，一定安全吗？我们可不可以不隐藏啊，我将它显示为其它的，显示为Apache/2.2.15,或者Lighttpd 1.4.36呢？　当然可以啊。

巧妙绝情

nginx版本号

显示nginx版本号

隐藏nginx版本号

置顶原创精选 2015-08-12 18:06:54 1938 阅读 5点赞 8评论

moosefs+keepalived双机高可用热备解决方案-03　by李靖

1 master的故障恢复,在1.6.5版本后可以由metalogger server 产生的日志文件 changelog_ml.*.mfs和metadata.mfs.back由命令mfsmetarestore恢复,在1.7版本后命令mfsmetarestore不可用，改为mfsmaster -a 2 10.0.8.1 keepalived master 定时运行检测 mfsmaster 进程的脚本check_master_bylijing.sh,故障的时停止 keepalived . 3 10.0.8.5 keepalived 状态从backup转到 master 并触发 notify_master事件执行恢复并启动switch_to_mfsmaster_bylijing.sh脚本。此时元数据日志服务器变为管理服务器。 5 整个切换在2~10秒内完成根据检测时间间隔。 6 当原管理服务器mfsmaster恢复时，10.0.8.5 keepalived 状态从master转到backup　并触发 notify_backup事件执行恢复并启动switch_to_mfsmetalog

解决方案

moosefs

巧妙绝情

置顶原创 2015-05-20 15:37:36 3207 阅读 4点赞 2收藏 3评论

moosefs+keepalived双机高可用热备解决方案-02 by李靖

1 master的故障恢复,在1.6.5版本后可以由metalogger server 产生的日志文件 changelog_ml.*.mfs和metadata.mfs.back由命令mfsmetarestore恢复,在1.7版本后命令mfsmetarestore不可用，改为mfsmaster -a 2 10.0.8.1 keepalived master 定时运行检测 mfsmaster 进程的脚本check_master_bylijing.sh,故障的时停止 keepalived . 3 10.0.8.5 keepalived 状态从backup转到 master 并触发 notify_master事件执行恢复并启动switch_to_mfsmaster_bylijing.sh脚本。此时元数据日志服务器变为管理服务器。 5 整个切换在2~10秒内完成根据检测时间间隔。 6 当原管理服务器mfsmaster恢复时，10.0.8.5 keepalived 状态从master转到backup　并触发 notify_backup事件执行恢复并启动switch_to_mfsmetalog

mfs

巧妙绝情

moosefs解决方案

置顶原创 2015-05-20 15:33:52 4399 阅读 4点赞 1收藏 3评论

moosefs+keepalived双机高可用热备解决方案-01 by李靖

公司数据迁移后期会使用到MFS,看过很多有关的文章，但大部分都是moosefs安装配置和单点手动备份。经过很长一段时间思考，想将其与keepalived相结合以提高可用性，也就有了我这篇文章。

mfs

巧妙绝情

moosefs安装

moosefs高可用解决方案

moosefs+keepalived

置顶原创精选 2015-05-20 15:24:13 3473 阅读 5点赞 1收藏

一次基于ssh的sftp服务器被攻击实记

前段时间12月分左右，公司需要搭建了台sftp服务器，当时想只是传下文件，何况我这还是基于SSH的SSL加密的sftp,也没有太再次安全问题，结果这个月每天晚上有人在暴力攻击，安装设置我以前的博文中有写到，这里记录下被攻击，以及防攻击的实录。（centos6.X）用了攻击自动防攻击脚本

巧妙绝情

ssh/sftp安全

sftp脚本

置顶原创推荐 2015-02-11 17:25:33 7236 阅读 10点赞 13评论

Xen在centos5.x和centos6.x下安装方法

主流虚拟化技术，我想可以分为vmware,xen,kvm以及微软hyperv,这其中大多是全虚拟化的。而xen即可以是全虚拟化，也可以工作在半虚拟化，有也些也叫准虚拟化。本文主要以centos5.8和centos6.6来安装xen。全虚拟化和半虚拟化（准虚拟化） Xen在不同内核版本安装常见错误

xen安装

xen半虚拟化

xen在centos6

置顶原创 2015-01-24 15:09:19 1819 阅读 1点赞 1收藏

Linux日志系统小记

rsyslog 是在redhat 6.x以后使用的系统日志系统，其进程名为 rsyslogd.(在redhat 5.x中日志系统为syslog进程名为syslogd,本人当时man syslog 和 man rsyslogd 其实也差不多，没有多在改进)。UNIX和Linux操作系统都是采用rsyslog进行系统日志的管理和配置。Linux系统内核和许多程序会产生各种错误信息、警告信息和其他的提示信息。管理员了解系统的运行状态是很有用的，所以应该根据信息的来源以及信息的重要程度把它们写到不同日志文件中去。而执行这个过程的程序就是rsyslog。默认情况下linux日志都保存在/var/log目录。

日志格式

Linux日志

日志系统

巧妙绝情

消息等级

置顶原创 2015-01-05 17:05:37 3103 阅读 1点赞 1收藏

Sftp服务器搭建和限制用户目录

公司对外客户上传账户清单，以前每个月都是用FTP上传，出于安全考虑改用sftp上传但又要限制用户根目录，为此在网上查了很多资料，在此记录下自己心得。常见错误 Couldn't read packet: Connection reset by peer

ssh

巧妙绝情

sftp服务器

sftp伺服器

sftp用户目录

置顶原创 2014-12-11 14:44:54 10000+阅读 3点赞 1收藏

Rsync+linux客户端+windows客户端配置

Rsync+linux客户端+windows客户端配置源码安装rsync方法：去官网下载http://rsync.samba.org/download.html最新版 [root@Server_rsync ~]#tar -xvzf rsync-3.1.1.tar.gz –C /usr/local [root@Server_rsync ~]#cd /usr/local/rsync-3.1.1/ [root@Server_rsync ~]#configure;make;make install rpm安装方法 [root@ Server_rsync ~]# rpm -qa | grep rsync rsync-3.0.6-4.el5_7.1 RHEL默认有安装rsync, 可以编辑/etc/xinetd.d/rsync 后用service xinetd restart 来启动。

linux运维

巧妙绝情

rsync配置

windows的rsync客户端

置顶原创精选 2014-10-30 12:50:57 9833 阅读 1点赞 1收藏

linux系统几个重要图

linux系统结构图注意OS服务层：在其中有system call相当于windows中API.另外还要注意下shell也是在这层中。 linux系统中链接注意默认是硬链接，在硬链接中如果删除a，b还是可以打开。在符号链接中要是a删除了，b打开时报错误。原因是b的内容是a,而硬链接中b的内容不是a,而是和a 一样指向了具体的一样的内容。

linux

职场

休闲

原创 2011-04-01 10:49:59 1164 阅读 3点赞 4评论

中小企业网络组建方案-域网络

为了更好使公司成员使用共享资源，我们可以利用给OU指派一个组策略，组策略中我可以在用户设置-windows设置-脚本（登錄與關機），在登录中加入脚本（yng she Y pan.bat）。使用户在工作站开机后在桌面上自动生成图标。减少网管负担。

职场

中小企业

域网络

网络组建

原创 2011-03-16 11:00:15 2425 阅读 4点赞 4评论

官方博客	全部文章	热门标签	班级博客
了解我们	网站地图	意见反馈

鸿蒙开发者社区	51CTO学堂
51CTO	软考资讯

51CTO博客

巧妙绝情 - 李靖

基于jenkins+gitlab+harbor自动化构建k8s发布实现原理和操作方案

最新的稳定版kubernetes1.24.4安装部署

实用svn主干trunk自动merge各个分支branch脚本

nginx网站被持续***1个月后最终防攻策略

项目架构优化后迁移阿里云实录

Lvs别样的自动部署监控shell脚本

Lvs通俗易懂的总结

LNMP最新源码包一般安装过程及常见问题

Lamp最新源码包一般安装过程及常见问题

nagios监控报警一般搭建过程及常见问题

可不可以不隐藏nginx版本号

moosefs+keepalived双机高可用热备解决方案-03　by李靖

moosefs+keepalived双机高可用热备解决方案-02 by李靖

moosefs+keepalived双机高可用热备解决方案-01 by李靖

一次基于ssh的sftp服务器被攻击实记

Xen在centos5.x和centos6.x下安装方法

Linux日志系统小记

Sftp服务器搭建和限制用户目录

Rsync+linux客户端+windows客户端配置

linux系统几个重要图

中小企业网络组建方案-域网络