qw87112的博客_Web服务器,MySQL,高可用集群

正则表达式-零宽断言

[toc]一、零宽断言-介绍零宽断言，它匹配的内容不会提取，其作用是在一个限定位置的字符串向前或向后进行匹配查找。1.1、应用场景排除查找，查找不含有某段字符串的行包含查找，查找含有某段字符串的行二、断言的分类2.1、正先行断言什么是正先行断言，就是在字符串相应位置之前进行查找匹配，使用(?=exp)匹配exp前面的位置。importrestr='abcgwcab'pattern='bc(?=gw

正则表达式

零宽断言

正则排除匹配

原创 2020-04-04 15:09:44 3142 阅读

python fcntl 文件锁

此模块只有在unix系统上才有，windows没有。文档地址：https://docs.python.org/3.7/library/fcntl.htmlhttps://www.docs4dev.com/docs/zh/python/3.7.2rc1/all/library-fcntl.html多进程示例程序importfcntlimportosimporttimefrommultiprocess

fcntl

apscheduler重复执行

原创 2019-09-04 18:06:28 6607 阅读

python3.7 ImportError: No module named _ssl 解决方法

笔者在centos6.5安装python3.7碰到此问题，安装好以后，执行python3.7命令行，importssl出现错误ImportError:Nomodulenamed_ssl。该错误表现在pipinstall时会报pipisconfiguredwithlocationsthatrequireTLS/SSL,howeverthesslmoduleinPythonisnotavailable

python3

原创 2019-09-04 15:06:39 10000+阅读 1收藏

真值表

not真假notFalseTruenotTrueFalseor真假TrueorFalseTrueTrueorTrueTrueFalseorTrueTrueFalseorFalseFalseand真假TrueandFalseFalseTrueandTrueTrueFalseandTrueFalseFalseandFalseFalsenotor真假not(TrueorFalse)Falsenot(Tr

真值表

原创 2019-08-30 16:24:48 2422 阅读

Supervisor Event Listener 任务监控与告警

[toc]EventEvent是在Supervisor3.0引入的一个高级特性，如果只简单使用Supervisor管理进程，则不需要了解Event。但如果希望监控Supervisor管理的进程的各种状态（如:启动、退出、失败、退出状态码...）并支持告警，才需要学习Event。事件监听与事件通知EventListenersandEventNotificationsSupervisor提供了一种基于

Supervisor

进程管理

进程监控

Supervisor告警

Supervisor event

原创精选 2019-08-26 17:09:21 7382 阅读 2点赞 1收藏

npm使用国内镜像源

[toc]一、通过配置npm通过config设置npmconfigsetregistryhttps://registry.npm.taobao.org#验证指令npmconfiggetregistry命令行指定npm--registryhttps://registry.npm.taobao.org编辑配置文件<code>~/.npmrc</code>加入下面内容regist

nodejs

npm

npm国内镜像

cnpm

原创 2019-08-09 10:38:01 9604 阅读 1评论

Git 编译安装，常见问题记录 (Centos6)

Git官方信息Git官方源码安装文档DownloadGitforLinuxandUnixGit源码包下载地址Git编译安装#安装依赖包yuminstalldh-autoreconfcurl-develexpat-develgettext-developenssl-develperl-develzlib-develnss-ytar-zxfgit-2.0.0.tar.gzcdgit-2.0.0make

git

git编译安装

原创 2019-06-11 15:24:33 2854 阅读

Centos7 Systemd 使用详解

[toc]一、Systemd是什么？systemd是一个属于用户空间的系统服务管理程序，在红帽RHEL7上采用，替换了原来RHEL6上的systemVinit。其作用是，在内核启动完成后，初始化用户空间的进程，进程号为1、管理操作系统的运行级别，系统的服务启动和关闭，系统的挂载点。systemd的特性：支持服务并行启动，实现快速开机按需启动守护进程支持快照和系统恢复各服务间依赖关系管理同时采用so

centos7

systemd

原创 2019-02-22 19:19:28 6433 阅读

Nginx 健康检查

Nginx的健康检查这块笔者在网上看了很多文章，基本都是零零散散的，讲各种实现方式，没有一篇能完整的讲当下的Nginx实现健康检查的几种方式，应该选哪一种来使用，于是笔者想总结一篇。一、目前Nginx支持两种主流的健康检查模式主动检查模式Nginx服务端会按照设定的间隔时间主动向后端的upstream_server发出检查请求来验证后端的各个upstream_server的状态。如果得到某个服务器

Nginx

web

服务器

原创精选 2018-09-30 09:45:39 10000+阅读 3点赞 4收藏

安装 Laravel 框架

这篇主要介绍下如何安装Laravel框架，Laravel是当下非常流行的PHP开发框架之一。具体特性这里就不多做介绍了操作系统环境：Centos6.8如果是一个刚安装好的系统，安装Laravel之前需要先安装PHP和Composer一、安装php（这里省略）请参考：http://blog.51cto.com/tchuairen/1771597安装好PHP后进入第二步二、安装ComposerComp

安装Laravel

安装compose

原创 2018-09-16 19:23:52 3002 阅读 1点赞

Nginx map 使用详解

map指令介绍：map指令是由ngx_http_map_module模块提供的，默认情况下安装nginx都会安装该模块。map的主要作用是创建自定义变量，通过使用nginx的内置变量，去匹配某些特定规则，如果匹配成功则设置某个值给自定义变量。而这个自定义变量又可以作于他用。直接看个例子理解起来比较清晰：场景：匹配请求url的参数，如果参数是debug则设置$foo=1，默认设置$foo=0map$

nginx

map

跨域访

原创 2018-09-15 12:33:18 10000+阅读 1点赞 1收藏 3评论

FileBeat6.4 快速上手

简介：Filebeat是一款轻量级的日志传输工具，它有输入和输出两端，通常是从日志文件中读取数据，输出到Logstash或Elasticsearch。其作用是收集业务服务器的日志，输出到一个日志系统便于集中管理。官网：https://www.elastic.co/cn/products/beats/filebeat安装系统环境：Centos6.x软件版本：filebeat-6.4.0-x86_64

filebeat

快速上手

原创 2018-08-30 15:23:03 10000+阅读

如何排查 Inodes 使用太多的问题

当碰到服务器Inodes报警，排查流程如下操作系统环境：Centos6.8一、使用df-i查看那个分区用量最多这样就先定位到了问题分区二、进入该分区，使用文件数量统计脚本#文件数量统计脚本#!/bin/bashforiin`ls`;dofile_num=`find./$i/-typef-print|wc-l`echo"$i,$file_num"done这个脚本会统计出当前目录下的每个目录有多少个文

inode

文件太多

原创 2018-07-11 07:54:36 8474 阅读

以慢为快的学习思想

在当下社会变化的速度越来越快，每个人都会有一定的知识焦虑，在前一段时间各种速学法特别火，速学外语，快速阅读法等等。都是为了提高学习效率而学习快是一个结果，而不是过程。为什么呢？是不是只有等我们掌握了一项能力以后，再以当下的时间点往回推算到底总共花了多少时间，才知道是不是快。所以在学习中并不是每一个过程都要快，而是最后的结果是相对较快。真正的学会其实是知识融会贯通的结果，而不是在脑子里的一个个孤立的

学习方法

个人成长

原创 2018-06-24 00:42:58 1779 阅读

我的友情链接

51CTO博客开发Free Linux, Share Linux百度技术博客滴水穿石孙杰马哥教育Linux运维培训峰云，就她了。fenghao.cn's Softzone!我的soft空间技术成就梦想For The Dream金戈铁马行飞燕Share your knowledge …aha45追马MoglieFS优化抚琴煮酒諸葛草廬mysql“企鹅”那点事儿北城书生李晨光原创技术博客让技术

原创 2017-11-22 23:10:46 979 阅读

Python 多进程实战 & 回调函数理解与实战

这篇博文主要讲下笔者在工作中Python多进程的实战运用和回调函数的理解和运用。多进程实战实战一、批量文件下载从一个文件中按行读取 url ，根据 url 下载文件到指定位置，用多进程实现。#!/usr/local/python27/bin/python2.7 from multiprocessing import Process,Pool import o

python

回调函数

多进程

原创精选 2016-12-29 20:39:02 10000+阅读 2收藏

Logstash 插件安装

官方的安装指令是:bin/plugin install logstash-output-webhdfs但是往往安装不成功，一般就是如下情况，然后卡着不动了:Validating logstash-output-webhdfs 。。。原因是防火墙挡掉了logstash的默认gem sourcecat Gemfile | grep sourc

plugin

logstash

原创 2016-11-10 17:26:20 9345 阅读

Elasticsearch Index API & Aggregations API & Query DSL

这篇小菜给大家演示和讲解一些Elasticsearch的API，如在工作中用到时，方便查阅。一、Index API创建索引库curl -XPUT 'http://127.0.0.1:9200/test_index/' -d '{ "settings" : { &nbs

日志分析

elasticsearch

原创精选 2016-10-14 13:33:54 10000+阅读

Elasticsearch 基础理论 & 配置调优

一、简介ElasticSearch是一个基于Lucene的搜索服务器。它提供了一个分布式多用户能力的全文搜索引擎，基于RESTful web接口。Elasticsearch是用Java开发的，并作为Apache许可条款下的开放源码发布，是当前流行的企业级搜索引擎。它不但包括了全文搜索功能，还可以进行以下工作:分布式实时文件存储，并将每一个字段都编入索引，使其可以被搜索。实时分析的分布式搜索引擎。可

日志分析

es

elasticsearch

原创精选 2016-10-13 17:54:21 10000+阅读 6点赞 5收藏 3评论

ELK+Filebeat+Kafka+ZooKeeper 构建海量日志分析平台

什么要做日志分析平台？随着业务量的增长，每天业务服务器将会产生上亿条的日志，单个日志文件达几个GB，这时我们发现用Linux自带工具，cat grep awk 分析越来越力不从心了，而且除了服务器日志，还有程序报错日志，分布在不同的服务器，查阅繁琐。待解决的痛点:1、大量不同种类的日志成为了运维人员的负担，不方便管理;2、单个日志文件巨大，无法使用常用的文本工具分析，检索困难;3、日志分布在多台不

原创推荐 2016-10-12 16:41:08 10000+阅读 33点赞 61收藏 31评论

ZooKeeper基本讲解 & 集群构建 & 常用操作指令

一、ZooKeeper概述ZooKeeper是一种为分布式应用所设计的高可用、高性能且一致的开源协调服务，是Google的Chubby一个开源实现，是Hadoop和Hbase的重要组件，它提供了一项基本服务：分布式锁服务。由于ZooKeeper的开源特性，后来我们的开发者在分布式锁的基础上，摸索了出了其他的使用方法：配置维护、组服务、分布式消息队列、分布式通知/协调等。zookeeper是基于内存

分布式

zookeeper

原创 2016-10-08 18:26:16 10000+阅读 6点赞 7收藏 3评论

Kafka 入门 and kafka+logstash 实战应用

一、基础理论这块是整个kafka的核心无论你是先操作在来看还是先看在操作都需要多看几遍。首先来了解一下Kafka所使用的基本术语TopicKafka将消息种子(Feed)分门别类每一类的消息称之为话题(Topic).Producer发布消息的对象称之为话题生产者(Kafka topic producer)Consumer订阅消息并处理发布的消息的种子的对象称之为话题消费者(consumers)B

消息

中间件

logstash

原创推荐 2016-09-21 17:16:56 10000+阅读 3点赞 8收藏 6评论

Python 如何理解又晕又好用的装饰器

Python 装饰器这东西对初学者来说是个坑，很容易绕晕，笔者当时初学装饰器时花费了数天时间，看了不同讲师对这块内容的讲解，还是一知半解。不过装饰器在开发中可是很好用的，有必要攻破，希望这篇文章能帮助学习者快速攻破难关。初步理解# 先来看一个简单函数 def show(): print ('M

python

装饰器

原创 2016-08-29 16:08:16 1740 阅读

Logstash 讲解与实战应用

一、Logstash 介绍Logstash 是一款强大的数据处理工具，它可以实现数据传输，格式处理，格式化输出，还有强大的插件功能，常用于日志处理。官网地址:https://www.elastic.co/products/logstash 工作流程Logstash 工作的三个阶段：input 数据输入端，可以接收来自任何地方的源数据。file：从文件中读取syslog：监听在514端口的系统日志信

logstash

elk

filebeat

原创 2016-08-20 16:06:07 10000+阅读 4点赞 6收藏 2评论

nginx + uwsgi + Django 应用部署

今天来看下基于Django开发的应用如何在Centos6环境部署系统环境:Centos6.5 x64软件版本:Django 1.9.5 、uwsgi-2.0.13.1nginx 安装配置（略）请见:http://tchuairen.blog.51cto.com/3848118/1771597一、安装uwsgi# 安装有两种方式 # 1、源码安装 # 从官网下载uw

nginx

Django

uwsgi

原创精选 2016-07-28 16:07:33 5855 阅读 1点赞 4收藏 1评论

Linux mail命令，迷你邮件客户端。

在 Centos6.5 系统默认有一个命令，mail，是一个迷你邮件客户端。用来测试邮件服务器非常好用。下面我们来试试如何通过这个命令连接163的邮箱服务器发送一封邮件。1、先来到163申请一个邮箱账号，并且开通第三方邮件客户端,POP3、SMTP、IMAP.2、配置 mail/etc/mail.rcset from=admindevp@163.com

Linux

邮件

mail

原创 2016-07-26 22:31:15 8967 阅读

Linux 进程管理与监控（supervisor and monit）

一、Supervisor1、安装宿主机环境:( Centos 6.5 )pip2.7 install supervisor2、创建配置文件通过 echo_supervisord_conf 命令来创建配置文件：echo_supervisord_conf >/etc/supervisord.conf3、主配置文件基本参数[unix_http_se

Linux

monit

进程监控

进程管理

supervisor

原创推荐 2016-07-19 13:37:05 9808 阅读 1点赞 3评论

Django基础（三）session会话、认证系统、内容分页、中间件

一、Cookies & SessionCookies:由于http协议是无状态的在一次请求和下一次请求之间没有任何状态保持我们无法根据请求的任何方面来识别来自同一人的连续请求。然而浏览器的开发者在很早的时候就已经意识到 HTTP 的无状态会对Web开发者带来很大的问题于是(cookies)应运而生。 cookies 是浏览器为 Web 服务器存储的一小段信息。每次浏览器从某个服

session

cookies

cookie

Authentication

django

原创精选 2016-06-09 20:43:15 10000+阅读 1点赞 1收藏

安装Centos6 分区时出现缺少/boot/efi 经验分享

前言：某天小菜在安装centos6系统在分区的时候遇到缺少/boot/efi分区，当时非常不解，为了安装可以继续于是创建了该分区，然后又居然提示没有GPT lable，不得不终止了安装进度先排查原因，小菜不解之前安装了不下几百次Linux操作系统从来没碰过这种问题，于是网上搜了一下。发现百度经验里给的回答是将BIOS里的Boot Mode 从自动改为 Legacy我马上查看了自己机器的BIOS B

Linux

系统安装

boot

原创 2016-05-25 13:13:33 10000+阅读 1收藏

带你使用Nginx实现HTTPS双向验证

https单向验证应用广泛想必大家都很熟悉，我已经在一篇博文中分享过，这次来看看Nginx如何实现双向验证。单向验证与双向验证的区别：单向验证：指客户端验证服务器端证书，服务器并不需要验证客户端证书。双向验证：指客户端验证服务器端证书，而服务器也需要通过CA的公钥证书来验证客户端证书。详细的握手过程：单向验证浏览器发送一个连接请求给安全服务器。1、服务器将自己的证书，以及同证书相关的信息发送给客

加密

https

ssl

数字证书

原创推荐 2016-05-25 12:12:11 10000+阅读 3点赞 1收藏 6评论

官方博客	全部文章	热门标签	班级博客
了解我们	在线客服	网站地图	意见反馈

开源基础软件社区	51CTO学堂
51CTO	汽车开发者社区

51CTO博客

突破舒适区