运维的本质的博客_python,Mysql,KVM,服务器&存储,Go语言,自动化运维,操作系统,Docker,puppet,ansible,shell

buffer和cache的区别

buffer cache

翻译 2016-12-16 10:47:25 487 阅读

文件系统性能测试指标

测试的定义Write: 测试向一个新文件写入的性能。当一个新文件被写入时，不仅仅是那些文件中的数据需要被存储，还包括那些用于定位数据存储在存储介质的具体位置的额外信息。这些额外信息被称作“元数据”。它包括目录信息，所分配的空间和一些与该文件有关但又并非该文件所含数据的其他数据。拜这些额外信息所赐，Write的性能通常会比Re-write的性能低。Re-write: 测试向一个已存在的文件写入的性能

空间

操作系统

信息

Random

工作量

转载精选 2016-11-14 18:01:01 3404 阅读 1点赞

python 列表生成式、生成器、迭代器、yield

列表生成式： python内置的用来创建list的生成式。例子：要生成list [1, 2, 3, 4, 5, 6, 7, 8, 9, 10]可以用list(range(1, 11))：但如果要生

python

生成器

元素

转载精选 2016-09-29 14:04:17 1712 阅读

centos6.2 64 部署docker

centos6.2 64 部署docker安装docker yum源：yum install http://mirrors.yun-idc.com/epel/6/i386/epel-release-6-8.noarch.rpm[root@yz6245 yum.repos.d]# yum install docker-ioLoaded plugins: fastestmirror, re

Docker

docker

原创精选 2016-09-23 10:16:28 1643 阅读 1点赞

hadoop集群同步实现

#!/usr/bin/env python#coding=utf-8#scribe日志接收存在小集群到大集群之间， distcp 同步失败的情况，需要手动进行补入。#1、如果查询补入的日志量少，则可以之间用脚本处理。如果量大，则使用 hadoop 提交job。# hadoop job 提交方式：# hadoop jar /usr/local/hadoop-2.4.0/share/ha

hadoop

distcp

原创 2016-09-22 10:02:00 2152 阅读 1点赞

crontab环境变量问题

在crontab中运行脚本来查看hadoop相关信息，由于hadoop、java默认部署在/usr/local下面，所以导致crontab执行时出现报错。具体与环境变量有关系，下文描述比较清楚。################下文出处： http://xiachaofeng.iteye.com/blog/1405184今天遇见一个问题，crontab

crontab

Hadoop

原创 2016-09-18 14:20:28 1392 阅读 1点赞

hdfs web_ui深入讲解、服务启动日志分析、NN SNN关系

hdfs启动顺序： 1、namenode 2、datenode 3、secondnamenode 4、yarnwebui: &nbs

storage

记录

status

hadoop

Journal

原创 2016-09-17 07:46:12 1371 阅读

crontab中反引号和$()无效的解决

关于crontabQ1:为何可以手工执行，加入crontab后却不能正确执行A：1.如果crontab执行失败，会发送email给你，请在mail中查找出错原因2.crontab中的PATH变量设置与交互式shell环境中不同，要执行的命令必须有正确路径3.在crontab中%字符被认为是换行，所以你的命令中有%时，在crontab中要加\转义比如30 * * * * date '+%D' >

crontab

原创 2016-09-16 07:11:04 2687 阅读

kafka集群维护

kafka集群基本信息实时查看和修改：集群信息实时查看（topic工具) kafka-topics,sh --list --zookeeper x.x.x.x kafka-topics.sh --describe --zookeeper x.x.x.x --topic t

集群

kafka

原创 2016-09-14 16:54:49 863 阅读

kafka集群维护

kafka集群基本信息实时查看和修改：集群信息实时查看（topic工具) kafka-topics,sh --list --zookeeper x.x.x.x kafka-topics.sh --describe --zookeeper x.x.x.x --topic t

kafka

原创 2016-09-14 07:08:34 1155 阅读

zookeeper集群搭建

软件环境： linux服务器 1、3、5 （2*n + 1 ）。与选举相关，不能是偶数。 &nbs

学习

zookeeper

原创 2016-09-13 06:15:49 519 阅读 1点赞

kafka学习记录

消息系统kafka：支持协议仿AMQP，动态扩容（支持zk），支持负载均衡、集群。（事物：多个全部提交，要么全部成功，要么全部失败。）AMQP：高级消息队列 advanced message queue protocol。三个组件： broker即为一个实例&

kafka

原创 2016-09-13 06:07:20 585 阅读

kvm虚拟机操作常用命令

在我们KVM系列专题的第四部分，我们将会一起讨论下在命令行界面下来管理KVM环境。我们分别用‘virt-install’和virsh命令行工具来创建并配置虚拟机和存储池，用qemu-img命令行工具来创建并管理磁盘映像。Linux系统的KVM管理在这篇文章里没有什么新的概念，我们只是用命令行工具重复之前所做过的事情，也没有什么前提条件，都是相同的过程，之前的文章我们都讨论过。第一步: 配置存储池V

Linux

程序

虚拟机

文章

target

转载精选 2016-09-12 03:28:06 1911 阅读

官方博客	全部文章	热门标签	班级博客
了解我们	网站地图	意见反馈

鸿蒙开发者社区	51CTO学堂
51CTO	软考资讯

51CTO博客

Alexs

buffer和cache的区别

文件系统性能测试指标

python 列表生成式、生成器、迭代器、yield

centos6.2 64 部署docker

hadoop集群同步实现

crontab环境变量问题

hdfs web_ui深入讲解、服务启动日志分析、NN SNN关系

crontab中反引号和$()无效的解决

kafka集群维护

kafka集群维护

zookeeper集群搭建

kafka学习记录

kvm虚拟机操作常用命令

欢迎