ylw6006的博客_WorkSpace

API网关Kong

网关是什么，为什么我们需要网关?网关好比我们现实生活中的大门，我们要每天出门上班，下班回家都要通过大门进出在网络世界中网关实际上起着控制流量进出的作用我们平常使用电脑访问互联网，路由器承担了出去流量的网关的工作，在流量到达网关后，网关使用NAT技术完成了源地址转换（可以理解为出门前换了一双鞋子）当客户端流量到达服务端之后，也需要进入服务端的网关进行处理，这个网关通常也叫web反向代理，通常为了提高

Kong

nginx

api

原创 2020-11-10 09:12:07 3276 阅读 2评论

GreenPlum数据库故障恢复测试

本文介绍gpdb的master故障及恢复测试以及segment故障恢复测试。环境介绍：Gpdb版本：5.5.0二进制版本操作系统版本：centoslinux7.0Mastersegment:192.168.1.225/24hostname:mfsmasterStadnbysegemnt:192.168.1.227/24hostname:server227Segment节点1：192.168.1.2

gpdb

mirror

segment

原创推荐 2018-03-20 15:38:40 10000+阅读 4点赞

Centos7 系统安全事故处理案例

最近公司申请了华为云的资源做测试。在丢了一个小项目上去测试之后，发现系统CPU异常繁忙，系统重启之后情况依旧，连接服务器异常缓慢。这时也接到华为云的客服电话说测试服务器同黑客服务器之间有通信，让我们确认是不是正常的情况。由于是测试环境，所以没有加入到系统监控中，在问题时刻通过ssh远程操作很卡，估计网络带宽已跑满。通过网页console登陆服务器之后，看到很多奇怪的进程，基本可以判断系统被非法入侵

linux

gcc.sh

原创 2017-10-16 14:46:42 3220 阅读

五年，后知后觉

很久很久没写博文了，虽然感觉自己每天都在忙碌中度过，但一段时间后总结感觉自己还是碌碌无为，在这种碌碌无为的感觉中浑然不觉得就过了5年。 5年，1825天！说长不长，说短也不短。大多数人最黄金的5年是25-30岁，一方面职业发展处在上升期，另一方面也面临着买房、结婚、生子的各种生活压力。在一家公司

IT职场

原创 2017-09-29 22:21:27 1662 阅读 3点赞 2评论

简单使用packetbeat

在前面两篇文章中记录了使用logstash来收集mysql的慢查询日志，然后通过kibana以web的方式展示出来，但在生产环境中，需求会更复杂一些，而且通过logstash写正则，实在是个费时费劲的事。例如在生产环境中会有要求分析某个时间段mysql或者mongodb的慢查询日志情况；还有I/O吞吐量；这个时间段内经常执行的查询语句，http访问情况等信息；然后将分析出来的结果以图表的形式展现出

packetbeat

elasticsearch

原创推荐 2015-12-14 17:15:42 10000+阅读 3点赞 3收藏 4评论

logstash推送mysql慢查询日志

本文将将介绍通过logstash用来收集mysql的慢查询日志，然后推送给elasticsearch，并创建自定义的索引，最终通过kibana进行web展示。环境介绍：操作系统版本：centos6.6 64bitMysql版本： mysql5.6.17与mysql5.1.36Logstash版本: logstash-2.0.0.tar.gzElasticsearch版

mysql

slowlog

logstash

kibana

原创推荐 2015-12-03 14:40:36 10000+阅读 6点赞 2收藏 1评论

logstash日志系统搭建

本文将介绍如果使用logstash，elasticsearch，kibana搭建一个日志分析系统。Logstash支持的日志类型非常的广泛，支持nginx,postfix.windows系统日志，java日志以及mysql慢查询日志，Docker日志等，并带有强大的过滤器功能，还可以输出到elasticsearch，nagios,mail等，功能相当的强大，在我们要部署的日志分析系统中logsta

elasticsearch

logstash

kibana

原创 2015-12-02 18:01:26 6002 阅读 2点赞 1评论

Jira迁移及内存调整

目前公司研发使用jira软件进行项目管理，安装了GreenHopper，JIRA Subversion plugin，Links Hierarchy Reports等插件。jira数据库采用oracle 11g。由于历史原因，采用的操作系统版本为windows server 2008 32位。一：新需求汇总：1: 把jira迁移到windows server 2008 64位的新服务器上2：新安装

jira

内存调整

fisheye

原创推荐 2014-02-21 10:13:39 10000+阅读 1点赞 1收藏

谈谈VIP漂移那点破事

一直以来都是用nginx的upstream模块做网站最前端的负载均衡，为了防止nginx本身宕机导致网站不能访问，通常都会做两套nginx反向代理，然后用keepalive之类的软件提供VIP。常见的环境是nginx主节点和从节点各有一个公网IP，一个私有IP，VIP地址也使用公网IP来提供，正常情况下VIP只会在nginx主节点上工作，只有主节点宕机或者网络不可达等情况下，VIP才会漂移到ngi

nat

vip

keepalive

原创推荐 2013-10-23 16:01:58 10000+阅读 5点赞 1收藏 3评论

当Cacti遭遇大流量

最近在河南项目的几台windows流媒体服务器流量使用很高，需要监控每天的带宽使用情况，并根据具体的情况做相应的调整！前期部署监控的系统的时候网络流量方面采用cacti统一监控，服务方面采用nagios统一监控并报警！实际的使用过程中，流媒体带宽很快就超过了100Mb，cacti出图方面的信息极为不准确，google一番，类似的情况很多，主要反应为snmp 32位的问题，按照如下的文章折腾一番后，

nagios

cacti

100M

windows server 2008

check_nt

原创推荐 2013-07-12 14:47:02 4881 阅读 5点赞 1收藏 2评论

停电遭遇ORA-600

ORACLE

ORA-600

原创推荐 2013-06-17 19:28:18 9365 阅读 4点赞 6评论

ORA-10567故障处理

一：场景描述数据库版本：11.2.0.1 64bit active dataguard操作系统版本：centos 5.8 64bit早上数据库例行检查，发现undo表空间数据文件太大，查询了最大的block后，发现实际只使用到几百兆。于是想当然alter database datafile 'xxxx' resize 3G;万事ok！在这之前，遇到这种情况，也都是这样处理，均未出现

ORA-10567

原创推荐 2013-05-24 15:10:21 5999 阅读 1点赞

关于Oracle表碎片整理

数据库在日常使用过程中，不断的insert，delete，update操作，导致表和索引出现碎片是在所难免的事情，碎片多了，sql的执行效率自然就差了，道理很简单，高水位线（HWL）下的许多数据块都是无数据的，但全表扫描的时候要扫描到高水位线的数据块，也就是说oracle要做许多的无用功！因此oracle提供了shrink space碎片整理功能。对于索引，可以采取rebuild online的方

oracle

statistics

shrink space cascade

dbms_stats

原创推荐 2013-03-22 11:27:25 10000+阅读 3点赞

Nagios短信分组报警

Nagios监控对于服务器运维来讲是非常好的工具，可以监控各种操作系统的服务器，windows，linux,aix等等，还可以对路由器和交换机，打印机等网络设备进行监控，再结合邮件，短信,MSN等报警方式为系统管理人员节省了许多巡检时间而且成效显著！在我的运维环境中，随着监控客户端的增多，报警的频率也随着提高，没日没夜的收短信，最终不得不把手机短信调成震动模式。在收到的报警短信中，大部

nagios

fetion

分组报警

原创推荐 2013-03-08 13:55:22 5788 阅读 6点赞 3评论

配置Centos5上使用ACFS集群文件系统

在centos5.8 64位系统上安装完一套oracle 11.2.0.3 rac测试环境后，发现acfs和advm无法使用，ASMCA图形界面的acfs和volume选项卡为灰色！这是由于acfs不支持centos系统导致的，下面就介绍下如何在配置centos上使用acfs集群文件系统！一：问题描述 [grid@rac1 ~]$ sqlplus /

centos5

rac

acfs

advm

11.2.0.3

原创推荐 2013-02-20 11:55:26 9727 阅读 2点赞 5评论

SYSAUX表空间使用率高问题处理

一般来讲除开业务数据存放的表空间，DBA要着重关注SYSTEM,SYSAUX,UNDO,TEMP表空间，SYSTEM表空间的大小一般是衡定的，UNDO和TEMP表空间的大小由数据库的业务情况决定，而SYSAUX表空间在默认条件下你如果不做任何配置，随着时间的推移，会膨胀的越来越大！SYSAUX表空间做为SYSTEM表空间的辅助表空间，主要存放EM相关的内容以及表统计信息，AWR快照，审计信息等，个

awr

sysaux

原创推荐 2013-02-19 16:18:10 10000+阅读 4点赞 6评论

Mongodb主从配置

一：使用命令行方式配置mongodb主从 [root@server11 ~]# /usr/local/mongodb/bin/mongod --bind_ip 192.168.1.112 -port 3306 --dbpath /data/mongodb/db1/ --logpath

master

slave

mongodb

原创推荐 2013-01-22 11:13:56 8232 阅读 1点赞 1收藏 2评论

Mongodb安装

MongoDB是一个介于关系数据库和非关系数据库之间的产品，是非关系数据库当中功能最丰富，最像关系数据库的。他支持的数据结构非常松散，是类似json的bjson格式，因此可以存储比较复杂的数据类型。Mongo最大的特点是他支持的查询语言非常强大，其语法有点类似于面向对象的查询语言，几乎可以实现类似关系数据库单表查询的绝大部分功能，而且还支持对数据建立索引。它的特点是高性能、易部署、易使用，存储

mongodb

原创 2013-01-21 15:22:53 2552 阅读 2点赞 1收藏 2评论

Oracle swap 100%案例分析

操作系统版本：centos5.8 64bit 数据库版本：11.2.0.1 问题描述：最近对数据库添加内存到32G，并调大了MEMORY_MAX_SIZE参数为28G，MEMORY_TARGET参数为24G；运行了一小段时间，没有发现大的问题，只是nagios监控到主库和备库的swap使用率偏高，而在添加内存之前并未出现过这种情况，调整前操作系统内存大小为16G，调整后MEMO

memory

swap

orace

原创推荐 2013-01-18 16:31:12 4984 阅读 2点赞 3评论

监控IIS并发连接数

需求描述：先前网站运营过程中，有出现页面访问出现server too busy的信息，问题出现时刻后台数据库及memcache，redis-server等服务均正常，初步判断为IIS并发数设置太小，于是首先想到对IIS进行优化，对IIS认识不深，于是google了几番，以豆丁网的文章比较靠谱，文章地址http://www.docin.com/p-231099967.html；调整完了以后，为了

iis

NSClient

原创推荐 2012-11-12 15:18:00 10000+阅读 3点赞 4评论

浅谈apache与tomact的整合

一般来讲，配置apache和tomcat的整合有三种方式，mod_proxy,mod_ajp和mod_jk等三种方式，前2种配置步骤类似且相对容易，且只支持apache2.2以后的版本，mod_jk则配置相对复杂，但强在稳定性和性能方面，因为没有系统的写过这方面的文档，故在此简要的记录下使用mod_proxy和mod_jk两种方式来整合apache和tomcat！三种方式的对比，具体请参考：h

apache

tomcat

mod_jk

mod_proxy

原创 2012-08-16 17:29:16 10000+阅读 5点赞 6评论

FastDFS同Apache的整合配置

在前面一篇文章中介绍了fastfds的简单安装和文件上传功能，以及使用fastdfs自带的http下载功能等；本文中将介绍如何使用fastdfs-apache-module模块整合fastdfs和apahce；整合完毕后，客户端访问apache，apache根据配置，使用fastdfs连接tracker查询相应组内可用的stroage服务器，最后完成http请求的重定向！因而建议在每台storag

apache

fastdfs

原创 2012-08-01 12:11:40 8266 阅读 4点赞 1收藏 1评论

FastDFS介绍和配置过程

由于网站使用nfs共享方式保存用户上传的图片，附件等资料，然后通过apache下载的方式供用户访问，在网站架构初期，使用这种简单的方式实现了静态资源的读写分离，但随着网站数据量的增加，图片服务器渐渐成为整个网站的短板，缘次催生了使用fastfds的想法，故而先进行一番简单的测试！在开始之前还是先来看看fastfds的介绍信息：

fastdfs

FastDFS配置

原创推荐 2012-07-31 09:36:13 10000+阅读 20点赞 1收藏 15评论

Oracle会话和进程数的监控

背景：先前在生产库上配置了oracle监控，每5分钟尝试连接一次数据库，若连接失败则通过nagios+fetion自动报警,此配置参考文章：http://ylw6006.blog.51cto.com/470441/787496 早晨收到报警信息后，登陆数据库执行ps -ef查看oracle的后台进程都在，使用conn /as sysdba的方式登陆数据库，提示连接到空闲的实例，使用easy co

oracle

session

process

原创推荐 2012-07-26 17:27:31 10000+阅读 3点赞 2评论

测试组合索引

测试背景：生产数据库的会员表和产品表中存在三个CLOB字段(这些字段主要用来存会员和产品的描述信息)，随着数据量的增长，全表扫描的时候，I/O等待严重，于是想到分表！提出问题：这两张大表，加起来的索引总共有35个，其中会员表的索引数为17个，产品表的索引数为18个(35个索引中不包含LOB字段的索引)，这些索引大部分为组合索引，且存在函数索引(函数索引均为组合索引的前导列进行desc排序)

测试

index

函数索引

组合索引

原创推荐 2012-07-09 14:03:13 2276 阅读 1点赞 1评论

求职者需要知道的五个要点

从08年决定开始从事IT行业，今年已经是第4个年头了，期间换过3家公司！面试经历无数，也算略有职场心得吧！母亲曾戏言：我们市的IT公司都被你逛遍了吧！哈哈…… 下面就来谈谈我的一点心得！一：什么岗位适合你？每个求职者，从学校到社会，都有各自的专业，各有所长！这里以我为例，我早年学过网络组建，windows服务器管理和linux服务器管理，这工作岗位就有多种选择，

龙年薪途

秘籍大起底

原创推荐 2012-02-29 15:55:53 3724 阅读 19点赞 10评论

巧用nagios脚本监控oracle连接

场景：程序修改完成后，上传到应用服务器tomcat，重启tomcat后，发现启动异常！前端nginx负载均衡出现504错误，网站无法打开！排查：经过排查tomcat日志，发现连接数据库异常；登陆数据库后以"conn /as sysdba"方式登陆正常，数据库轻载，无压力；于是检查数据库的监听器，输入"lsntctl services"命令，卡住，

oracle

nagios

休闲

listener

check_nrpe

原创推荐 2012-02-23 10:20:57 5896 阅读 3点赞 1收藏 5评论

蜘蛛，爬虫多,代码质量差下的相对供求平衡策略

需求分析：由于种种问题，导致蜘蛛访问和抓取量大的的时候，后台数据库高负载，影响正常的用户访问和英文平台的访问！比较推荐的做法是写robot.txt文件，但seo方面又希望对蜘蛛访问不做速度和页面方面的限制，典型的僧多粥少场景，或者使用oracle的资源计划来限制数据库用户的会话连接数，但可能对正常的用户造成影响！所以想做一个相对智能的脚本对爬虫进行适当的限制，保证数据库服务器负载正常的情况下，

sql

iptables

workspace

spider

robot.txt

原创推荐 2011-12-20 14:32:05 1652 阅读 2点赞 3评论

Rman备份异机恢复指南续

先前整理了一篇rman备份异机恢复的文档，那篇文档比较偏向复杂型，需要对oracle的整个体系结构有一定的了解才能领悟，类似于oracle的手工建库；文章地址：http://ylw6006.blog.51cto.com/470441/659104 其实oracle 10g的rman也提供了类似于DBCA一样的简便工具来实现rman备份的异机恢复，也就是dup

oracle

休闲

rman

duplicate

incremental

原创 2011-10-08 15:44:44 2012 阅读

Extmail邮件过滤和杀毒

前面整合好了extmail，不过没有测试使用foxmail这种客户端去测试收发邮件功能，今天测试的时候发现了蛮多问题，大部分和/etc/authmysqlrc这个文件的配置和权限相关，都是小问题，折腾了大半天时间，哎！邮件系统真的是很麻烦！下面就记录下邮件过滤和病毒查杀的配置，参考文档如下，感谢作者分享！ http://www.linuxquestions.in/index.php?

职场

mail

休闲

clamav

greylist

原创 2011-09-13 16:53:55 2795 阅读

官方博客	全部文章	热门标签	班级博客
了解我们	网站地图	意见反馈

鸿蒙开发者社区	51CTO学堂
51CTO	软考资讯	汽车开发者社区

51CTO博客

ylw6006