缥缈孤鸿一pmhong的博客_Apache,操作系统,负载均衡,Linux认证,Red Hat,RHCE,kubernetes,golang,troubleshooting

Python 学习笔记（5）—— 正则表达式

元字符. ^ $ * + ? {} [] () \ |python 的正则表达式需要re 模块支持定义一个字符串s，通过"r" 定义一个规则'abc' 通过findall 从提供的字符串中匹配>>> import re

正则表达式

原创 2013-12-26 17:04:22 10000+阅读 1点赞 4评论

Python 写的几个监控脚本（CPU，内存，网卡流量，负载，磁盘空间）

刚刚学python，根据需求自己动手写了几个监控系统性能的脚本，原理比较简单，都是通过SNMP协议获取系统信息，再进行相应的计算和格式化，最后输出结果。以下的脚本都是通过os.popen模块调用snmpwalk 命令获取到的MIB 信息，原本想用py-snmp，不过介于网上资源太少，而且官网的例子看不太懂，只能用这种方法替代。后期再尝试用

python

网卡流量

监控脚本

原创 2013-12-23 10:56:57 10000+阅读 4点赞 2收藏 7评论

Python 学习笔记（4）—— 模块

模块基本上就是一个包含了所有你定义的函数和变量的文件。为了在其他程序中重用模块，模块的文件名必须以.py为扩展名。模块可以从其他程序输入以便利用它的功能。这也是我们使用Python标准库的方法。首先，我们将学习如何使用标准库模块。使用sys模块#!/usr/bin/python #

模块

python

原创 2013-12-19 19:28:08 1662 阅读 2点赞 2评论

Python 学习笔记（3）—— python异常处理

python通过使用try...except来处理异常，而通过raise来引发异常。异常在 Python 中无处不在；实际上在标准 Python 库中的每个模块都使用了它们，并且 Python 自已会在许多不同的情况下引发它们。例如： · 使用不存在的字典关键字将引发 KeyError 异常。· 搜索列表中不存在的值将引发 ValueEr

python

异常处理

原创 2013-12-08 16:30:28 10000+阅读 1点赞

Python 学习笔记（2）—— 流程控制

一、ifTrue : 表示非空的量（比如：string, tuple , list , set , dictonary等），所有非零数False ：表示0 ， None ，空的量等作用：(1)判断一个字符串是否为空(2)判断运算结果是否为0(3)判断一个表达式是否可用例子1：#!/usr/bin/python x = int(raw_input("please input a number:")

python

流程控制

原创 2013-12-03 11:09:47 1480 阅读 1点赞 1评论

Python 学习笔记（1）—— 字符串、元组、列表、字典

一、字符串、元组和列表都是序列序列的两个主要特点是：索引操作符和切片操作符。例子1（切片）：>>> str1='abcde' >>> str1[:] //取整个字符串 'abcde' >>> str1[::2] //取字符串的值，步长=2（即2步取一次值） 'ace' >>&g

列表

字符串

Python

元素

原创 2013-12-02 17:13:10 10000+阅读 5点赞 2收藏 1评论

Python 爬虫小程序（正则表达式的应用）

目标：通过正则表达式写一个爬虫程序，抓下网页的所有图片。思路1. 获取网页源代码2. 获取图片3. 下载图片第一步，打开URL 获取源代码[root@node1 python]# mkdir p_w_picpath [root@node1 python]# cd p_w_picpath [root@nod

python

爬虫小程序

原创 2013-11-30 11:25:56 9975 阅读 7点赞 4评论

Django 学习笔记（三）

在模板文件中，还能嵌套入模板标签，做一些特殊处理，例如流程控制，下面将简单介绍下模板标签，主要介绍if和for 标签。参考官方文档： https://docs.djangoproject.com/en/1.5/ref/templates/builtins/一、for 标签循环遍历数组中的每个元素，例如，展示athletes 列表中的元素：&

web

学习笔记

Django

原创 2013-11-25 21:48:48 1723 阅读

Django 学习笔记（二）

上一次提到通过调用jobs.views中的index 方法，返回了一个页面，相关代码如下：from django.http import HttpResponsedef index(req): return HttpResponse('<h1>Hello world!</h1>

web

学习笔记

Django

原创 2013-11-25 17:36:10 2097 阅读

Django 学习笔记（一）

挺长时间没有写博客了，一直想学Python ，但也一直因为忙着忙那的，总找不到完整的时间来好好学，现在考试都完了，又不用实习，这段时间或许就是大学4年最闲的时候呢。看来学好python的宏伟大业，成败就看这段时间了。现在只接触了python 的一些基础知识，还在看简明教程，感觉一直入不了门，简单的程序看得懂，但

java

学习笔记

Django

原创 2013-11-25 14:20:14 2173 阅读

深入分析LVS （数据报层面）

这段时间随着互联网企业陆续开始招聘，一直都忙着找工作，基本上有运维岗位的我都投了简历，网申了呢，现在有些公司还处于面试或者等待消息的状况。现在就YY 一面中被问到的一个LVS 问题来展开，其他面试笔试经历稍后全部结束了会再总结一下。为什么挑在YY 一面中被问到的问题展开呢？因为那次面试给我的感触很深，YY今年的运维岗位竞争压力很大，全国招10个人，而广州这边我问了下面试官只招4个

分析

lvs

数据报

原创 2013-10-22 16:16:33 2914 阅读 1点赞 1评论

Mysql 参数调优

数据库优化（影响力从上到下减小）(1)SQL语句优化(2)数据库设计优化(3)参数优化(4)硬件资源和文件系统从上面的列表可以看出参数对于mysql 优化来说实际上起到的作用并不是很大，如果想更好的发挥mysql性能，还是从前面2点入手较好，但并不代表对于参数的优化一点作用都没有，不代表参数优化没必要做。要优化数据库，第一步需要优化的就是IO，即尽可能将磁盘IO 转化成内存IO，众所周知，

mysql

原创 2013-10-15 16:18:03 1502 阅读

Mysql 索引

一、索引分单列索引和组合索引单列索引：即一个索引只包含单个列，一个表可以有多个单列索引，但这不是组合索引。组合索引：即一个索包含多个列。二、介绍一下索引的类型　　1、普通索引　　这是最基本的索引，它没有任何限制。它有以下几种创建方式：　　（1）创建索引：CREATE INDEX indexName ON tableName(tableColumns(length));如果是CHAR，VARCHAR

mysql

原创 2013-10-13 10:10:08 1286 阅读

mysql 分区类型详解

RANGE分区基于属于一个给定连续区间的列值，把多行分配给分区。这些区间要连续且不能相互重叠，使用VALUES LESS THAN操作符来进行定义。以下是实例。CREATE TABLE employees ( id INT NOT NULL, fname VARCHAR(30), lname VARCHAR(30), hired DATE NOT NULL DEFAULT '1970-01

mysql

转载精选 2013-09-27 09:23:10 1679 阅读

mysql —— 分表分区（1）

面对当今大数据存储，设想当mysql中一个表的总记录超过1000W，会出现性能的大幅度下降吗？答案是肯定的，一个表的总记录超过1000W，在操作系统层面检索也是效率非常低的解决方案：目前针对海量数据的优化有两种方法：1、大表拆小表的方式（主要有分表和分区两者技术）（1）分表技术垂直分割优势：降低高并发情况下，对于表的锁定。不足：对于单表来说，随着数据库的记录增多，读写压力将进一步增大。水平

mysql

原创推荐 2013-09-26 09:49:15 10000+阅读 2点赞 1收藏

nginx 作为Web缓存服务器

【实验环境】系统：Centos6.4IP: 192.168.56.120设置服务器的文件描述符如果后面配置nginx的时候，需要调大worker_connections 这个参数，则需要对系统的文件描述符进行设置，否则可能会出现下面的报错：worker_connections exceed open file resource limit: 1024(1) 修改/etc/security/lim

nginx

原创 2013-09-25 10:23:22 2966 阅读 2点赞 2评论

mysql 锁机制

一、概述MySQL有三种锁的级别：页级、表级、行级。MyISAM和MEMORY存储引擎采用的是表级锁（table-level locking）；BDB存储引擎采用的是页面锁（page-level locking），但也支持表级锁；InnoDB存储引擎既支持行级锁（row-level locking），也支持表级锁，但默认情况下是采用行级锁。MySQL这3种锁的特性可大致归纳如下：表级锁：开销小，加

mysql

原创 2013-09-18 12:46:46 3319 阅读 1点赞 1评论

mysql-proxy 实现读写分离

【实验环境】平台 centos6.4IP分配192.168.30.101 node1 mysql-proxy192.168.30.102 node2 mysql主节点192.168.30.103 node3 mysql从节点192.168.30.104 node4 client注意：1、所有机器上都已编译安装好mysql5.52、实验的时候需要确保node2和node3的数据一致3、实验的时候需要

mysql

原创 2013-09-16 18:48:26 2324 阅读 1点赞

Mysql 优化

数据库优化：(1)SQL语句优化(2)数据库设计优化(3)参数优化(4)硬件资源和文件系统上面的顺序也表现了这4个工作对性能影响力的大小(1)数据库(表)设计合理符合3范式（有时需要适当的逆范式）第一范式：1NF是对属性的原子性约束，要求属性具有原子性，不可再分解（只要是关系型数据库都满足1NF）第二范式：2NF是对记录的唯一性约束，要求记录有唯一标识，即表中记录不能有完全相同的。（一般通过设置主

mysql

原创 2013-09-11 23:03:12 1545 阅读

mysql 常见的备份架构及技术

在mysql中，备份是相当重要的一步，设想，万一哪天线上服务器出现故障导致数据丢失，而在此之前并未做好相关的备份工作，那么后果将不可设想。接下来将简单介绍下Mysql常见的备份系统架构。(1)一主多从这种架构的特点很明显，架构中有多台mysql服务器，并由其中一台作为主服务器(master)，其他服务器都作为从服务器(slave)。所有slave都连到master上面，并且做主从复制，从m

mysql

原创 2013-09-05 22:17:27 1233 阅读

Mysql 集群

Mysqld分三层，一个MGM用于管理配置，多个mysqld给应用程序提供访问，多个ndbd提供集群存储。 mysqld的作用和一般的mysqld相同，不过加入的对NDB 数据存储的支持。数据是分散存储在每组ndb节点的，每组中ndb

mysql集群

原创 2013-09-03 20:16:17 1072 阅读

Mysql定位问题语句

在实际环境中，可能经常会遇到由于SQL语句不合理导致的SQL执行效率低下的情况，那么这种时候我们应该如何定位问题语句的所在呢？一般有以下方法来定位问题语句(1)慢日志查询慢日志，查找出现问题的语句，分析执行时间，IO，CPU使用情况等(2)desc , explain &n

mysql

原创 2013-08-31 23:07:09 2084 阅读 2点赞 3评论

mysql 慢查询日志

慢查询日志慢查询日志用来记录所有执行时间超过long_query_time的SQL语句的日志文件，获得初始表锁定的时间不算作执行时间。使用选项--slow_query_log[={0|1}]停止或者启动它。如果没有给定file_name的值，默认名是host_name-slow.log。使用选项--slow_query_log_file=file_name指定文件位置

mysql

原创 2013-08-28 12:20:24 3620 阅读

Mysql 安全加固

1、数据目录安全性 show variables like 'datadir'; -------设置相应的权限防止数据被拷贝 -------用专门的安全加固软件防止数据随意被拷贝 2、安装完mysql后需要做的工作运行

mysql

原创 2013-08-27 12:14:38 5223 阅读

Mysql 存储引擎

mysql常用的存储引擎有MyISAM，InnoDB和NDB等，这里主要介绍这3个存储引擎：（1）MyISAM：它主要用于大多数的Web、数据仓库(OLAP)和其它应用中。 MyISAM存储引擎， MyISAM特点是不支持事务，适合olap应用， MyISAM表由MYD和MYI组成。mysql-5.0版本之前， MyISAM默认支持的表大小为4G，从MySQL-5.0以后， MyI

mysql

原创 2013-08-26 13:11:51 1557 阅读

Mysql 工作原理

刚开始接触一个新的事物的时候，我觉得很有必要从其工作原理入手，弄清楚这个东西的来龙去脉，为接下来的继续深入学习做好铺垫，掌握好其原理有助于我们从整体上来把握这个东西，并且帮助我们在排错过程中理清思路。接下来，还是从mysql的工作原理开始入手，下面先来一张经典的图：上面的图就是mysql的内部架构，可以清楚的看到Mysql是由SQL接口，解析

mysql

原创 2013-08-24 09:12:01 5970 阅读 4点赞 1收藏 1评论

Mysql 知识点总结（持续更新）

挺长一段时间没有动手写博客了，接下来的一段时间将对前段时间学的mysql做一次总结，内容比较多，将持续更新上来，贵在坚持啊~ 关于mysql的，这里不多说，看图说话：上面的图是最新的统计情况，mysql仍处于第2，并且仍然处于上升趋势。顺便提供排名统计网址：http://db-engines.com/en/ranking 对于我们运维的来说，实际上mysql也是相当的重要，据我个人所见，中小型公

mysql

原创 2013-08-20 10:08:55 6055 阅读 2点赞 1收藏 2评论

把网站架构层次化

一个较为合理的网站架构，通常会对整个架构进行分层设计。这样的好处是分散服务器的压力，不至于由于单台服务器压力过大宕机而停止提供服务。在架构设计中，我觉得有2个黄金准则。一个是“所有的问题，都往前面推”，另一个是“避免单点故障”。这两点实际上也就保证了系统架构的高可用、可扩展性和可靠性。下面简单的画一个图，来说明一下，就我的理解，一个网站的架构

架构

原创推荐 2013-08-09 19:31:45 2594 阅读 6点赞 3评论

nginx+keepalived 负载均衡架构

上一篇博文通过Haproxy 实现了对后端web服务器的负载均衡，这次用nginx来完成这个任务，原理上大致一样，只是nginx只能对http和mail做负载均衡，这比较有局限性，但是它对正则表达式的支持好！下面直接看实验：【实验环境】nginx keepalived 主：192.168.56.120nginx keepalived 从：192.168.56.121VIP ：192.168

nginx

keepalived

原创 2013-08-06 10:36:44 4833 阅读

Haproxy+keepalived实现高可用负载均衡

作为4层、7层负载均衡，Haproxy也表现得相当出色，这里就不过多的介绍haproxy了，主要还是通过实验说话。过两天再做个nginx+keepalived 的架构，和这个架构做下对比。【实验环境】haproxy keepalived 主：192.168.56.120haproxy keepalived 从：192.168.56.121VIP ：192.168.56.

haproxy;keepalived

原创 2013-08-02 10:44:43 1301 阅读 1点赞 1收藏

官方博客	全部文章	热门标签	班级博客
了解我们	网站地图	意见反馈

鸿蒙开发者社区	51CTO学堂
51CTO	软考资讯

51CTO博客

见自己，见天地，见众生

Python 学习笔记（5）—— 正则表达式

Python 写的几个监控脚本（CPU，内存，网卡流量，负载，磁盘空间）

Python 学习笔记（4）—— 模块

Python 学习笔记（3）—— python异常处理

Python 学习笔记（2）—— 流程控制

Python 学习笔记（1）—— 字符串、元组、列表、字典

Python 爬虫小程序（正则表达式的应用）

Django 学习笔记（三）

Django 学习笔记（二）

Django 学习笔记（一）

深入分析LVS （数据报层面）

Mysql 参数调优

Mysql 索引

mysql 分区类型详解

mysql —— 分表分区（1）

nginx 作为Web缓存服务器

mysql 锁机制

mysql-proxy 实现读写分离

Mysql 优化

mysql 常见的备份架构及技术

Mysql 集群

Mysql定位问题语句

mysql 慢查询日志

Mysql 安全加固

Mysql 存储引擎

Mysql 工作原理

Mysql 知识点总结（持续更新）

把网站架构层次化

nginx+keepalived 负载均衡架构

Haproxy+keepalived实现高可用负载均衡

欢迎