抚琴煮酒的博客_Linux,集群,其他云技术,服务器,负载均衡,Linux开源系统,SHELL脚本,自动化运维相关篇

Linux集群技术在云原生下的演进

Linux集群技术在云原生下的演进直播地址： https://edu.51cto.com/broadcast/93 有兴趣的朋友可以进来听听！

直播

置顶原创 2021-07-08 19:08:13 1001 阅读

总结下三年在云原生方向下的工作

总结下近两年在云原生方向下的工作

云原生

工作收获

原创 2021-05-27 11:57:34 915 阅读 1点赞 3评论

Kubernetes Operator SDK开发工具 -- KUDO介绍

在Kubernetes中管理有状态的服务并不容易。Operator模式就是为了处理这个问题而创建的，但是现有的框架要求用户熟练掌握Go和Kubernetes控制器模式

Kubernetes开发工具

原创 2021-05-23 17:26:32 2032 阅读

Summit 预告| 开源GitSecOps社区峰会暨联盟启动仪式

武汉活动云原生 DevOps

原创 2021-05-11 10:43:39 769 阅读

新书《Linux集群之美》上市了

云原生

Linux集群之美新书

原创 2021-02-07 22:54:07 2728 阅读

新书又开始打折了〜

看了下京东，又发现开始打折了。链接地址

DevOps

作品自动化运维

原创 2020-07-29 00:05:31 3851 阅读 1点赞

【转载】使用Golang工作400天后的感受

我在2011年就听说了Go并学习了一段时间，坦白的说，那时候对Go是比较无感的，因为并没有看到Go特别亮眼的地方，可能和我使用C、Erlang、Java有关，这三种语言可以写高性能、高并发、高可用的服务；包含了面向过程、面向并发、面向对象的思想，我觉得我并不需要再学习Go，何况那个时候好像也没宣传的那么优秀。

golang

总结 GC

转载 2019-12-22 22:33:37 4093 阅读 1点赞 1收藏 21评论

为什么使用Go语言做后端开发[转

简单高效：几乎所有主流的编程语言如Java、C++、PHP、Python、JavaScript等等都是可以用于服务端开发的，Go语言作为后起之秀，在语言层面具有语法简洁、执行效率高（底层语言）的特点；相比之下，Java和Python、PHP都显得低效，C++则太过麻烦，而Go则可以做到简单与高效兼顾；

后端开发

golang

转载 2019-10-27 23:31:50 4978 阅读 1点赞

《基于Python的DevOps实战》专栏目录明细

《基于Python的DevOps实战》专栏目录明细如下所示：一、效率神器之Python隔离工具VirtulEnv在项目中的应用二、用Gunicorn部署高性能PythonWSGI服务器三、利用DjangoRESTframework编写RESTfulAPI四、Flask之RESTfulAPI介绍与实战五、Python在Docker-Compose上的应用六、Web全双工通信——WebSocket协议

系统运维

专栏介绍

原创 2019-04-21 21:32:30 7555 阅读 5评论

Goroutine（协程）为何能处理大并发？

简单来说：协程十分轻量，可以在一个进程中执行有数以十万计的协程，依旧保持高性能。

Golang

Coroutine

高并发

性能优异

转载 2018-01-10 20:14:12 9160 阅读 1点赞 1收藏

《构建高可用Linux服务器（第4版）》已面市

首先感谢读者朋友们一路支持和捧场，《构建高可用Linux服务器（第4版）》已面市，在当当、京东、天猫华章及亚马逊上面都售，本书较前三版改动幅度较大，具体内容可以参见下面的链接分享。

构建

高可用

Linux

第四版

原创 2017-12-18 14:58:49 10000+阅读 2点赞 1收藏 4评论

用Flask封装下Ansible提供后端API

Ansible是作为自动化运维的底层实现，功能很强大，但需要通过命令或playbook的yaml文件来实现，相对对运维人员而言，学习成本过大。所以这里要考虑到通过Flask Web框架来实现其二次封装，提供HTTP接口来实现远程调用。但我们在请求Ansbile API的时候，ansible默认本身是阻塞的，用户那边会一直处于等待状态，这样大家的用户体验也不好，所以这里会用rq来实现其非阻塞功能，即实现任务的异步化。

封装

API

flask

原创 2017-06-14 11:08:07 10000+阅读 2点赞 2收藏 4评论

2017年我的阅读书单

2017年我正在看或者已经看完的书单，基本上都是纸质书，主要是长时间阅读也不伤眼。由于现阶段的主要工作是DevOps，所以涉及运维方面的书我没有再细看，主要是工作用到的话会稍为翻阅下。主要还是看开发相关方面的书，每天坚持看1-2小时书，没办法，其它时间要写业务代码或处理线上的问题，列表清如下所示：

devops

2017年

阅读书单

原创 2017-06-04 09:54:52 7043 阅读 1点赞 5收藏

Codis--分布式redis架构设计

Codis是一个分布式Redis解决方案，与官方的纯P2P的模式不同，Codis采用的是Proxy-based的方案。今天我们介绍一下Codis及下一个大版本RebornDB的设计，同时会介绍一些Codis在实际应用场景中的tips。最后抛砖引玉，会介绍一下我对分布式存储的一些观点和看法，望各位首席们雅正(黄旭东)。

codis

分布式redis

黄旭东

转载 2017-02-25 11:42:54 10000+阅读 1点赞 2收藏

为什么Codis比较慢，但我们还要用它呢？

为什么 Codis 比 twemproxy 慢？ Codis 追求简洁的实现，我们没有针对内存进行优化，所以会比 twemproxy 还要多一倍拷贝。 Go 虽然使用 epoll，但是 IO 都不是直接完成的，而是通过 IO thread，所以需要更多的线程间通信和线程切换。

codis

twenproxy

转载 2017-02-24 10:01:36 6188 阅读

RabbitMQ消息中间件在工作中的应用场景

所以在软件的正常功能开发中，并不需要去刻意的寻找消息队列的使用场景，而是当出现性能瓶颈时，去查看业务逻辑是否存在可以异步处理的耗时操作，如果存在的话便可以引入消息队列来解决。否则盲目的使用消息队列可能会增加维护和开发的成本却无法得到可观的性能提升，那就得不偿失了。（转载自知乎）

应用场景

消息中间件

rabbitMQ

转载 2017-01-17 09:39:34 10000+阅读 2点赞 2收藏 1评论

Go语言适用的领域

Go语言适用的领域【转载自知乎】 1、服务器编程，以前你如果使用C或者C++做的那些事情，用Go来做很合适，例如处理日志、数据打包、虚拟机处理、文件系统等。 2、分布式系统，数据库代理器等。

go语言

适用领域

转载 2016-10-31 14:33:37 10000+阅读

2016年我的阅读书单

2016年我正在看或者已经看完的书单，基本上都是纸质书，主要是长时间阅读也不伤眼。每天坚持看1-2小时，没办法，其它时间要写业务代码或处理线上的问题，列表清如下所示。最近也一直在看自己的撄作《构建高可用Linux服务器》第3版，主要是看哪些地方还能改进，有许多热心的读者反映书中的问题，我也基本记录在案，方便第4版的时候进行改进吧。

清单

2016年

阅读书单

原创 2016-10-21 18:05:04 5534 阅读 1点赞 1收藏 1评论

【转载】Go对比Python的优点

并发性好。Goroutine 和 channel 使得编写高并发的服务端软件变得相当容易，很多情况下完全不需要考虑锁机制以及由此带来的各种问题。单个Go 应用也能有效的利用多个CPU 核，并行执行的性能好。这和Python 也是天壤之比。多线程和多进程的服务端程序编写起来并不简单，而且由于全局锁GIL 的原因，多线程的 Python 程序并不能有效利用多核，只能用多进程的方式部署。

go

python

优势对比

转载 2016-10-17 10:08:57 10000+阅读 1评论

AWS云计算平台工作使用中的心得

笔者目前所在公司的海外业务平台由于牵涉到多机房布点和成本的考虑，目前基本上采用的是AWS云计算平台，产品线涉及到了EC2/EBS/S3/Redshift等，目前平台已经稳定运行几年了，在使用过程还是有不少心得和感想的，特地做了些总结跟大家一起分享下，对AWS有兴趣的同学也可以关注下。

云计算平台

aws

原创 2016-10-10 16:23:19 10000+阅读 2点赞 2收藏

新书《Linux集群和自动化运维》目录

为什么要写这本书？笔者从事系统运维和网站架构设计的工作已有10多年，现在在一家外企担任云平台架构师。云计算是现在的主流技术，未来也有很好的发展趋势，云计算的流行对于传统的运维知识体系来说，其实也造成了冲击，有很多读者经常向笔者咨询工作中的困惑，比如从事系统运维工作3～5年后就不知道该如何继续学习和规划自己的职业生涯了。因此笔者想通过此书，跟大家分享一下自己的工作经验和心得（包括传统运维和云平台运维工作的区别与对比），以期解决大家在工作中的困惑。本书提供了大量项目实践和线上案例，希望能让大家迅速了解Linux运维人员的工作职责，快速进入工作状态并找到成长方向。希望大家通过阅读此书，能够掌握Linux系统集群和自动化运维及网站架构设计的精髓，从而能够轻松愉快地工作，并提升自己的职业技能，这就是笔者写作此书的初衷。

新书

Linux集群

自动化运维

AWS

原创 2016-08-17 15:57:53 10000+阅读 13点赞 5收藏 23评论

结合Ansible在AWS云计算平台上实现运维自动化

刚刚看了金山梁晓聪的"在AWS上的运维自动化实践分享"，发现技术都是相通的，大家都是用最好的技术。我们的业务平台主要也是AWS服云计算平台，尝试了许多自动化运维/配置工具，最后还是选终了Ansible。

自动化

aws

ansible

原创 2016-02-22 11:55:50 7689 阅读 6点赞 1收藏 10评论

用Fabric自动推送nagios client脚本

线上的Nagios Client端的监控脚本因为业务需求又发生改动了，某业务集群差不多就有23台（下面的list只列出了8台），而且其中的一个业务需求脚本前前后后改动了4次，如果手动操作的话会累死人，幸亏有Fabric这个轻量级的自动化运维工具，代码如下：

nagios

自动化运维

fabric

原创推荐 2015-08-03 16:12:11 10000+阅读 7点赞 4评论

CPU Utilization Plugin For Nagios v2.0

此脚本参考了Nagios的官方文档https://exchange.nagios.org/并其进行了代码精简和移值，原代码是运行在ksh下面的，定义数组的方式跟bash还是有区别的；另外，为了反映CPU的繁忙程度，特的抓取了vmstart命令中的平均值并将其打印出来。为了方便大家下载，特的将其收录进了我的github中。

cpu

nagios

utili

原创推荐 2015-07-21 10:33:47 10000+阅读 1收藏

Puppet批量管理Nginx服务器

开发环境和测试环境均是CentOS6.4 x86_64，ngxin的模板文件是在puppet模块下面templates目录中以”.erb”结尾的文件，puppet模板主要用于文件，例如各种服务的配置文件，相同的服务，不同的配置就可以考虑使用模板文件，例如Nginx和Apache的虚拟主机配置就可以考虑采用ERB模板，nginx的安装在这里建议用系统内部自带的YUM源来安装或其它第三方YUM源来安装，如果是用Nginx的官方源来安装nginx的话，我们可以查看下/etc/yum.repos.d/nginx.repo文件内容，如下所示：

nginx

puppet

erb

原创推荐 2015-03-26 13:52:48 10000+阅读 11点赞 2收藏 11评论

Ruby和SHELL中如何遍历指定目录的文件

在工作中我们有在Ruby和SHELL中如何遍历指定目录的文件的需求，这个应该如何来实现呢？网上的方法也非常之多，我们可以拿来参考参考，如下边的traverse.rb文件内容所示：

ruby

递归

traverse

遍历文件

原创推荐 2015-01-09 16:39:09 10000+阅读

人性化的Ruby计数取值

Ruby由于吸收了Perl的正则表达式和Python的可读性，所以其中的计数取值方法，是非常人性化和灵活的，这里可以举例来说明下：一、打印7次“hello,world”，如下：

ruby

人性化取值

原创推荐 2014-12-22 14:51:38 8666 阅读 1点赞

Ruby中写一个判断成绩分类的脚本

需求为：从键盘输入分数，以此来判断，0-59为不及格，打印“您没有及格，请下次努力!”，60-79为及格，打印“您的成绩及格，请更加努力！”，80-100为成绩良，打印“您的成绩为优秀，请再接再厉!”，如果输入为0-100以外的分数，请打印“您的成绩为优秀，请再接再厉!”

ruby

脚本

shell

成绩判断

原创推荐 2014-12-09 20:25:05 8304 阅读 2评论

rsync与FTP（vsftpd）在不同工作场景中的应用

rsync与FTP（多为vsftpd）在大家的平时的运维工作中应该都多有接触，这里我就不再一一介绍了。很多朋友都觉得这两者可以跟同步和备份等同起来，其实真正使用的时候这两个是有区别的，我一般将rsync简概之为冗余，而FTP称之为备份，两者在不同的工作场景中的应用也是不同的，如下：

ftp

vsftpd

rsync

不同的应用

原创 2014-12-04 13:49:23 6708 阅读 3点赞 1收藏 3评论

Ruby中求50之内的素数方法

ruby求50之内的素数的方法，感觉对比PHP和SHELL方法是最简单的，但SHELL中可以利用factor命令，而PHP中没有求素数的对应函数的，需要自己设计算法，三种方式大家对比学习下，应该还有更优更简单的方法的。

素数

ruby代码

求1-50之内

原创推荐 2014-11-18 16:44:22 9431 阅读

官方博客	全部文章	热门标签	班级博客
了解我们	在线客服	网站地图	意见反馈

开源基础软件社区	51CTO学堂
51CTO	汽车开发者社区

51CTO博客

抚琴煮酒