mb6066e504cce6f的博客

谷歌SRE与运维工作的思考

运维部门要保障产品业务稳定性，开发部门要想随时随地快速上线新功能，而线上的故障往往是由新的变更导致的——不管是新发布了版本，还是修改配置，或者是改变了用户某些行为导致流量负载产生变化，传统意义上这两个部门在本质目标上是相对的。所以运维部门往往会要求开发部门对变更或发布做控制，并且规定要走一些繁琐的流程；而开发部门会想法设法绕过这些繁琐步骤，以支持新功能更快上线。谷歌的工作方式：面对运维部门与开发部

Linux

转载点赞0 阅读329 收藏0 评论0 2021-04-29

Linux中find命令用法全汇总，看完就没有不会用的！

Linux 查找命令是Linux系统中最重要和最常用的命令之一。查找用于根据与参数匹配的文件指定的条件来搜索和查找文件和目录列表的命令。查找可以在各种条件下使用，您可以通过权限，用户，组，文件类型，日期，大小等可能的条件查找文件。通过这篇文章，我们以实例的形式分享我们的日常Linux查找命令体验及其用法。在本文中，我们将向您展示Linux中最常用的35查找命令示例。我们将该部分分

Linux

转载点赞0 阅读752 收藏1 评论0 2021-04-29

176条DevOps人员常用的linux命令速查表

线上查询及帮助命令文件和目录操作命令查看文件及内容处理命令文件压缩及解压缩命令信息显示命令搜索文件命令用户管理命令基础网络操作命令深入网络操作命令有关磁盘与文件系统的命令系统权限及用户授权相关命令查看系统用户登陆信息的命令内置命令及其它系统管理与性能监视命令关机 / 重启 / 注销和查看系统信息的命令进程管理相关命令

Linux

转载点赞0 阅读286 收藏0 评论0 2021-04-29

Python中的时间处理大总结

python中处理时间的模块有三个，datetime, time,calendar，融汇贯通三个模块，才能随心所欲地用python处理时间。本文就是为此而写，文章着重点在于梳理出三个模块的设计脉络，便于大家记忆里面的api。在需要的时候能够去查找相应的方法。但由于calendar模块使用不多，限于篇幅，本文没有涉及。1.概述datetime模块主要是用来表示日期的，就是我们常说的年月日时分秒，ca

Python

转载点赞0 阅读185 收藏0 评论0 2021-04-29

Linux 系统 CPU 100% 异常排查实践与总结

1、问题背景昨天下午突然收到运维邮件报警，显示数据平台服务器cpu利用率达到了98.94%，而且最近一段时间一直持续在70%以上，看起来像是硬件资源到瓶颈需要扩容了，但仔细思考就会发现咱们的业务系统并不是一个高并发或者CPU密集型的应用，这个利用率有点太夸张，硬件瓶颈应该不会这么快就到了，一定是哪里的业务代码逻辑有问题。2、排查思路2.1 定位高负载进程 pid首先登录到服务器使用top命令确认服

Linux

转载点赞0 阅读209 收藏0 评论0 2021-04-29

误删不跑路，大牛运维神技能分分钟恢复

一、背景突发事件，应用上传的数据被程序自动删掉了，可悲的是还没有数据备份，数据是放在系统的 /data/webapps/xxxx/upload 目录下面，可把我们急坏了，之前又没有做过数据恢复的测试，然后我找到了一款数据恢复的软件，成功把删除的大部分数据找回来了，我的数据恢复过程如下。二、安装恢复软件1、epel 仓库安装如果我们的源里面添加了 epel 仓库的话，我们可以直接使用下面的命令安装。

Linux

转载点赞0 阅读77 收藏0 评论0 2021-04-29

Python with提前退出：坑与解决方案

问题的起源早些时候使用with实现了一版全局进程锁，希望实现以下效果：全局进程锁本身不用多说，大部分都依靠外部的缓存来实现的，redis上用的是setnx，有时候根据需要加上缓存击穿问题、随机延后以防止对缓存本身造成压力。当时同样写了单元测试来测试这段代码的有效性：看起来非常完美地通过了。这样的一个全局进程锁是通过__enter__方法抛出异常, __exit__方法中捕获异常来实现的:看起来还不

Python

转载点赞0 阅读429 收藏0 评论0 2021-04-29

Linux运维跳槽必备的40道面试精华题

过一次年，结婚、存款、父母养老，一系列向钱看的事都在碾压我们本来还挺简单的神经，但难过没有出路，唯有找到好的方法和事业方向，才能实现一步一个脚印的逆袭。下面是一名资深Linux运维求职数十家公司总结的Linux运维面试精华，助力大家年后跳槽找个高薪好工作。1、什么是运维？什么是游戏运维？1）运维是指大型组织已经建立好的网络软硬件的维护，就是要保证业务的上线与运作的正常，在他运转的过程中，对他进行维

Linux

转载点赞0 阅读1172 收藏0 评论0 2021-04-29

用 Python 实现每秒处理 120 万次 HTTP 请求

用 Python 做到每秒处理上百万次 HTTP 请求，可能吗？也许不能，但直到最近，这已成为现实。很多公司都在为了提升程序的执行性能和降低服务器的运营成本，而放弃 Python 去选择其它编程语言，其实这样做并不是必须，因为 Python 完全可以胜任这些任务。 Python 社区最近做了大量关于性能的优化。CPython 3.6 重写了新的字典从而全面提升解析器的执行性能。由于引入更快的调用

Python

转载点赞0 阅读279 收藏0 评论0 2021-04-29

海量的超赞 Linux 软件

Tux这个仓库收集了对任何用户/开发者都超赞的 Linux 应用软件。请随意 contribute / star / fork / pull request。更新：原英文库已经在 Gitbook （https://voluong.gitbooks.io/awesome-linux-software/content/）上发布，中文版阅读地址戳这里（https://alim0x.gitbooks.i

Linux

转载点赞0 阅读214 收藏0 评论0 2021-04-29

一文读懂Python可迭代对象、迭代器和生成器

我们都知道，序列可以迭代。但是，你知道为什么吗？本文来探讨一下迭代背后的原理。序列可以迭代的原因：iter 函数。解释器需要迭代对象 x 时，会自动调用 iter(x)。内置的 iter 函数有以下作用：(1) 检查对象是否实现了 iter 方法，如果实现了就调用它，获取一个迭代器。 (2) 如果没有实现 iter 方法，但是实现了 getitem 方法，而且其参数是从零开始的索引，Python

Python

转载点赞0 阅读101 收藏0 评论0 2021-04-29

头条 Python 工程师面经分享：一年经验也能进大公司！

0.背景博主本人 2015 年毕业于郫县某 985 大学通信工程系，因为大学期间一直自己创业所以错过了大四秋招春招，毕业后又在北京继续创业一年，但在创业公司一直无法沉淀技术累积，于16年年底萌生进大公司学习的想法，于是从16年年底开始通过社招找工作。虽然大学就开始做研发，但无奈简历只看毕业工作经验，所以本人简历只有一年工作经验。在此总结一篇文章给各位参考；1.阿凡题应该算是人生第一场面试，早上 1

Python

转载点赞0 阅读97 收藏0 评论0 2021-04-29

20个堪称神器的命令行软件

1.ag：比grep、ack更快的递归搜索文件内容。2.tig：字符模式下交互查看git项目，可以替代git命令。3.mycli：mysql客户端，支持语法高亮和命令补全，效果类似ipython，可以替代mysql命令。4.jq: json文件处理以及格式化显示，支持高亮，可以替换python -m json.tool。5.shellcheck：shell脚本静态检查工具，能够识别语法错误以及不规

Linux

转载点赞0 阅读91 收藏0 评论0 2021-04-29

教你分分钟学会用python爬虫框架Scrapy爬取心目中的女神

Scrapy，Python开发的一个快速,高层次的屏幕抓取和web抓取框架，用于抓取web站点并从页面中提取结构化的数据。Scrapy用途广泛，可以用于数据挖掘、监测和自动化测试。Scrapy吸引人的地方在于它是一个框架，任何人都可以根据需求方便的修改。它也提供了多种类型爬虫的基类，如BaseSpider、sitemap爬虫等，最新版本又提供了web2.0爬虫的支持。Scratch，是抓取的意

Python

转载点赞0 阅读73 收藏0 评论0 2021-04-29

Linux最全软件包管理！看这个就对了！

软件包命名规则的定义：12345678910name-Version-release.arch.rpm软件包的分类和拆包： Application-Version-Arch.rpm，主包 Application-devel-Version-Arch.rpm，开发包 Application-utils-Version-Arch.rpm Application-libs-Ver

Linux

转载点赞0 阅读174 收藏0 评论0 2021-04-29

大牛带你5分钟创建一个Flask项目！

准备安装：pip install flaskFlask快速入门：http://docs.jinkan.org/docs/flask/quickstart.html#quickstart快速构建在项目根目录下构建：webapp包目录，存放flask代码，包内有__init__.py文件templates目录，存放模板文件static目录，存放js,css等静态文件。其下建立js目录，放入jquery

Linux

转载点赞0 阅读208 收藏0 评论0 2021-04-29

史上最全VIM使用手册

vim是一个向上兼容于vi的文本编辑器，可用于编辑各种纯文本。它对编辑程序特别有用。基本模式：编辑模式：默认编辑文件进入的模式输入模式：末行模式：内置的命令行接口基本使用： # vim [options] [file ..]+#：打开文件后，直接让光标处于第#行的行首；+/PATTERN：打开文件后，直接让光标处于第一个被PATTERN匹配到的行的行；模式转换：编辑模式：默

Linux

转载点赞0 阅读73 收藏0 评论0 2021-04-29

一篇文章搞定 Scrapy 爬虫框架

Scrapy框架Scrapy是用Python实现的一个为了爬取网站数据，提取结构性数据而编写的应用框架。可以应用在包括数据挖掘、信息处理或存储历史数据等一系列的程序中。Scrapy使用Twisted基于事件的高效异步网络框架来处理网络通信，可以加快下载速度，不用自己去实现异步框架，并且包含了各种中间件接口，可以灵活的完成各种需求。Scrapy架构Scrapy Engine引擎，负责控制数据流在系统

Linux

转载点赞0 阅读111 收藏0 评论0 2021-04-29

3W字长文讲透Nginx高阶用法

Nginx 状态页基于nginx模块ngx_http_auth_basic_module实现，在编译安装nginx的时候需要添加编译参数--with-http_stub_status_module，否则配置完成之后监测会是提示语法错误。查看是否加载了ngx_http_auth_basic_module模块[root@CentOS7 ~]#/apps/nginx/sbin/nginx -Vnginx

nginx

转载点赞0 阅读197 收藏0 评论0 2021-04-29

干货 | 这4个Python实战项目，让你瞬间读懂Python！

Python是一种极具可读性和通用性的编程语言。Python这个名字的灵感来自于英国喜剧团体Monty Python，它的开发团队有一个重要的基础目标，就是使语言使用起来很有趣。Python易于设置，并且是用相对直接的风格来编写，对错误会提供即时反馈，对初学者而言是个很好的选择。Python是一种多范式语言，也就是说，它支持多种编程风格，包括脚本和面向对象，这使得它适用于通用目的。随着越来越多地在

Python

转载点赞0 阅读71 收藏0 评论0 2021-04-29

五分钟搞定 Linux 文档全部知识，就看这篇文章

写在前面我们都知道Linux是一个支持多用户、多任务的系统，这也是它最优秀的特性，即可能同时有很多人都在系统上进行工作，所以千万不要强制关机，同时，为了保护每个人的隐私和工作环境，针对某一个文档(文件、目录)，Linux系统定义了三种身份，分别是拥有者(owner)、群组(group)、其他人(others)，每一种身份又对应三种权限，分别是可读(readable)、可写(writable)、可执

Linux

转载点赞0 阅读32 收藏0 评论0 2021-04-29

一万两千字，一眼看穿Python爬虫与网络协议

概述爬虫，应该称为网络爬虫，也叫网页蜘蛛、网络机器人、网络蚂蚁等。搜索引擎，就是网络爬虫的应用者。大数据时代的到来，所有企业都希望通过海量数据发现其中的价值。所以需要爬取对特定网站、特顶类别的数据，而搜索引擎不能提供这样的功能，因此需要自己开发爬虫来解决。爬虫分类1.通用爬虫常见就是搜索引擎，无差别的搜集数据、存储、提取关键字、构建索引库，给用户提供搜索接口。爬取一般流程：初始化一批URL,将这些

Python

转载点赞0 阅读291 收藏0 评论0 2021-04-29

太好玩了，爬虫、部署API、加小程序，一条龙玩转知乎热榜！

一直想做一个从爬虫到数据处理，到API部署，再到小程序展示的一条龙项目，最近抽了些时间，实现了一个关于知乎热榜的，今天就来分享一下！由于代码还没有完全整理好，今天只给出一个大致的思路和部分代码，最终的详细代码可以关注后续的文章！数据爬取首先我们看下需要爬取的知乎热榜https://www.zhihu.com/billboard这个热榜可以返回50条热榜数据，而这些数据都是通过页面的一个 JavaS

Python

转载点赞0 阅读102 收藏0 评论0 2021-04-29

70 道 NumPy 测试题

1. 将 NumPy 导入为 np，并查看版本难度：L1问题：将 NumPy 导入为 np，并输出版本号。2. 如何创建 1 维数组？难度：L1问题：创建数字从 0 到 9 的 1 维数组。期望输出：#> array([0, 1, 2, 3, 4, 5, 6, 7, 8, 9])3. 如何创建 boolean 数组？难度：L1问题：创建所有 True 的 3×3 NumPy 数组。4. 如何

Linux

转载点赞0 阅读376 收藏0 评论0 2021-04-29

车牌检测和识别的Python应用软件实现

1.车牌检测和识别项目介绍车牌的检测和识别的应用非常广泛，比如交通违章车牌追踪，小区或地下车库门禁。在对车牌识别和检测的过程中，因为车牌往往是规整的矩形，长宽比相对固定，色调纹理相对固定，常用的方法有：基于形状、基于色调、基于纹理、基于文字特征等方法，近年来随着深度学习的发展也会使用目标检测的一些深度学习方法。该项目主要的流程如下图所示： 1.输入原始图片，通过二值化，边缘检测，和基于色调的颜色微

Python

转载点赞0 阅读212 收藏0 评论0 2021-04-29

十分钟，用 Python 带你看遍 GDP 变迁

偶然之间，发现了一个网站，title 是世界银行，很高级的样子，可以下载很多有趣的数据，这对于我们练手数据分析及可视化真的是太好的资源了，不多说，戳下面的链接可以火箭直达哦！https://data.worldbank.org/我从该网站上下载了世界各国历年的 GDP 总值和增长率数据，下面就摩拳擦掌，一探 GDP 的世界！数据文件分析先来看下我们拿到的文件，都有什么数据，哪些是我们可以利用起来的

Python

转载点赞0 阅读86 收藏0 评论0 2021-04-29

老司机告诉你：正规的运维工作是什么的?

互联网运维工作，以服务为中心，以稳定、安全、高效为三个基本点，确保公司的互联网业务能够 7×24 小时为用户提供高质量的服务。运维人员对公司互联网业务所依赖的基础设施、基础服务、线上业务进行稳定性加强，进行日常巡检发现服务可能存在的隐患，对整体架构进行优化以屏蔽常见的运行故障，多数据中接入提高业务的容灾能力。通过监控、日志分析等技术手段，及时发现和响应服务故障，减少服务中断的时间，使公司的互联网业

Linux

转载点赞0 阅读114 收藏0 评论0 2021-04-29

Python如何实现微信群万人同步直播？

微信机器人项目我们之前已经写过四篇了：Python创建微信机器人：详细讲解如何使用wxpy库创建微信机器人。如何用机器人监听老板微信：监听群成员聊天信息做转发。python实现微信消息防撤回：讲解微信撤回消息的原理并实现将撤回消息转发。超详细Pycharm部署项目视频教程：详细讲解如何将微信机器人项目部署到Linux服务器上。今天我们来学习微信机器人系列的第五篇：多群转发做同步图文直播！一、背景介

Python

转载点赞0 阅读108 收藏0 评论0 2021-04-29

快收藏！ 30 分钟包你学会 AWK

本文大部分内容翻译自我开始学习AWK时看到的一篇英文文章 AWK Tutorial ，觉得对AWK入门非常有帮助，所以对其进行了粗略的翻译，并对其中部分内容进行了删减或者补充，希望能为对AWK感兴趣的小伙伴提供一份快速入门的教程，帮助小伙伴们快速掌握AWK的基本使用方式，当然，我也是刚开始学习AWK，本文在翻译或者补充的过程中肯定会有很多疏漏或者错误，希望大家能够帮忙指正。本文将会持续修正和更新，

Linux

转载点赞0 阅读65 收藏0 评论0 2021-04-29

Python运维自动化课程学完年薪29W，仅剩3个名额！

运维自动化是什么？运维自动化，还有一个高大上的名字：DevOps，也叫运维开发。传统的Linux运维工作，主要任务是保证公司的互联网业务能够24小时为用户提供稳定、高质、安全的服务，工作内容包括应用系统的发布、部署、变更、监控、事件处理、优化以及系统架构设计调优、提供运维报告等。而自动化运维是在传统运维的基础上产生的。由于服务器的数量一般都很巨大，仅仅通过人工已经无法满足管理上的要求，于是自动化运

Python

转载点赞0 阅读102 收藏0 评论0 2021-04-29

官方博客	意见反馈	了解我们	全部文章
在线客服	网站地图	热门标签

开源基础软件社区	51CTO学堂
51CTO	汽车开发者社区

51CTO博客

mb6066e504cce6f的博客