党志强的博客_大数据,集群,云计算,操作系统,Solaris,存储,Red Hat,文件系统,Linux,Linux,kernel,存储转载

微软word提示：您正试图运行的函数包含有宏或需要宏语言支持的内容

问题描述关闭Word提示：您正试图运行的函数包含有宏或需要宏语言支持的内容。而在安装此软件时，您(或您的管理员)选择了不安装宏或控件的支持功能。解决方法点击【开始菜单】—选择【控制面板】—找到并打开【程序和功能】(xp的是添加删除)—在里面找到安装好的【Office软件】右键选择【更改】—在弹出的更改对话框中选择【添加或删除功能】然后点击继续。在安装选项界面点击【Office共享功能】前面的+号，

word

转载 2021-03-23 22:47:58 3696 阅读

深入理解GlusterFS之数据均衡

GlusterFS是一个免费的开源分布式文件系统，具有无中心节点、堆栈式设计、全局统一命名空间、高可用、高性能和横向扩展等特点，在业界被广泛使用。本文主要介绍GlusterFS的数据均衡功能（即rebalance），内容涉及数据均衡的产生背景、使用场景、基本原理、程序实现剖析、操作命令实践、存在的问题以及需要优化的地方等，希望能

GlusterFS

转载 2020-02-22 21:26:58 2714 阅读

常见开源告警系统对比分析(prometheus、open-falcon、zabbix)

原标题：大规模集群之告警系统实践本文根据邓欢在2018年7月78日高效运维社区【数据库专场沙龙】现场演讲内容整理而成。摘要：首先介绍告警的选型，然后介绍Alertmanager的实现，最后给大家介绍一下我们的实践经验。分享大纲：一. 告警的选型二. Alertmanager的实现三. Alertmanager的实践我今天会首先介绍告警的选型，然后介绍Alertmanager的实现，最后给大家介绍一

监控报警

prometheus

open-falcon

转载 2018-11-16 20:50:44 10000+阅读 1点赞 2收藏

这个项目谁来R? - RACI模型

在快速发展的过程中，会不时的冒出一些之前没有明确界定的事情，往往产生一些看似大家都在负责，事实上无人负责的事情。RACI模型对快速发展的我们的最重要的启发是：每件事都要尽早确定谁负责，也就是确定R。RACI的一个扩展，RASCI，是更加全面及适用我们的情况的。谁负责（R = Responsible），负责执行任务的角色，具体负责操控项目、解决问题。谁批准（A = Accountable），对任务负

主R

RACI

转载 2018-11-02 17:49:55 10000+阅读

Kubernetes 资源管理概述

Kubernetes 从创建之初的核心模块之一就是资源调度。想要在生产环境使用好 Kubernetes，必须对它的资源模型以及资源管理非常了解。这篇文章算是对散布在网络上的 Kubernetes 资源管理内容的一个总结。干货文章，强列推荐一读。Kubernetes 资源简介什么是资源？在 Kubernetes 中，有两个基础但是非常重要的概念：Node 和 Pod。Node 翻译成节点，是对集群资

kubernetes

资源管理

转载 2018-10-11 13:43:21 4736 阅读 1点赞 1评论

Kubernetes Cluster AutoScaler简介

ClusterAutoScalerClusterAutoScaler是一个自动扩展和收缩Kubernetes集群Node的扩展。当集群容量不足时，它会自动去CloudProvider（支持GCE、GKE和AWS）创建新的Node，而在Node长时间资源利用率很低时自动将其删除以节省开支。ClusterAutoScaler独立于Kubernetes主代码库，维护在https://github.com

kubernetes

autoscaler

转载 2018-07-12 15:06:05 5765 阅读 1点赞

kubernetes之网络分析

Kubernetes是一个开源的容器集群管理平台，可用来自动化部署、扩展和运维应用容器。关于这个平台本身的各组件及具体功能不在本文讨论范围，本文主要关注kubernetes的网络方案。在讨论网络之前有必要先了解下相关概念，这些概念和网络息息相关。基本概念Containers是最小的资源单位，用于轻松地打包应用程序及相关配置。但在kubernetes中，容器不是操作的最小单位，甚至容器本身对kube

kubernetes

转载 2017-12-27 18:50:29 5126 阅读

深入理解GlusterFS之POSIX接口

（作者：林世跃@TaoCloud）FUSE是用户空间的文件系统接口，FUSE内核模块为普通应用程序与内核虚拟文件系统VFS的交互提供了一个桥梁。基于FUSE用户空间模块，开发人员可以不必了解VFS内核机制就能快速便捷地开发POSIX兼容的文件系统交互接口。本文主要介绍GlusterFS基于FUSE的POSIX文件系统接口的实现机制和工作原理，给出通过修改FUSE读写数据块大小提升大I/O带宽性能的

POSIX

GlusterFS

fuse

转载 2017-08-27 19:26:00 7088 阅读

NFS-Ganesha源代码分析

NFSv4简要概述NFS这个协议(NFSv2)最初由Sun Microsystems在1984年设计提出，由于存在一些不足，因此在随后由几家公司联合推出了NFSv3。到了NFSv4时，开发完全由IETF主导，设计目标是：– 提高互联下的NFS访问和性能– 提供安全性– 更强的跨平台操作– 方便后期扩展我们可以看到NFSv4在缓存能力、扩展性、高可用性方面取得了很大的突破，放弃了之前版本的无状态性，

nfs-ganesha

转载 2017-08-27 19:22:23 10000+阅读

Linux 系统使用建议

原标题：Linux 系统使用规范不要修改系统级配置文件，请添加自定义配置文件到系统级配置目录中。例如：一般在配置文件的同级目录下都会有一个配置文件名.d的配置目录，它们是为了防止多用户多服务环境配置冲突问题。proc 内核参数配置，不要直接修改配置文件/etc/sysctl.conf，应该以业务或服务名命名配置文件（如 99-app-sysctl.conf)，然后将其放入/etc/sys

linux

转载 2017-08-25 11:27:19 1188 阅读

孤儿进程与僵尸进程[总结]

1、前言　　之前在看《unix环境高级编程》第八章进程时候，提到孤儿进程和僵尸进程，一直对这两个概念比较模糊。今天被人问到什么是孤儿进程和僵尸进程，会带来什么问题，怎么解决，我只停留在概念上面，没有深入，倍感惭愧。晚上回来google了一下，再次参考APUE，认真总结一下，加深理解。2、基本概念　　我们知道在unix/linux中，正常情况下，子进程是通过父进程创建的，子进程在创建新的进程。子进程

linux

僵尸进程

孤儿进程

转载 2017-08-15 19:27:23 728 阅读

GlusterFS企业级功能之EC纠删码

（作者：杨阳@TaoCloud）在这个数据爆炸的时代，很多行业不得不面临数据快速增长的挑战，为了应对呈爆炸式增长态势的数据量，构建大规模的存储系统成了一种普遍的应用需求。但数据是如此重要，如何保证存储可靠性、数据可用性成了大规模存储系统的难点和要点。数据冗余是保障存储可靠性、数据可用性的最有效手段，传统的冗余机制主要有副本（Replication）和纠删编码（Erasure Code，以下简称纠删

GlusterFS

EC纠删码

转载 2017-05-11 18:10:40 9304 阅读

kvm常见故障及解决方案

一、启动虚拟机Connection reset by peer# virsh start vmhost1error: Failed to start domain vmhost1error: Unable to read from monitor: Connection reset by peer在虚拟机运行过程中关闭宿主服务器就有可能导致这种情况出现，由于宿主服务器中的kvm虚拟机控制器与安装在

故障处理

kvm

转载精选 2016-05-25 15:58:29 10000+阅读 1收藏

强制重启Linux系统的几种方法

实际生产环境中某些情况下 Linux 服务器系统在出现致命错误需要远程进行重启，通过常规的 reboot、init 6 等方法无法正常重启（例如重启时卡在驱动程序里等情况），这时就需要通过下面介绍的几种特殊的方法进行强制重启。注意这些强制重启的方法都是直接跳过 umount 文件系统及 sync 等操作，可能导致数据损坏，不在特殊情况下请勿使用，当然

linux

强制重启系统

转载精选 2016-05-19 16:48:47 4646 阅读

如何分析系统MCE异常？

Machine Check Exception (MCE) 是CPU发现硬件错误时触发的异常(exception)，中断号是18，异常的类型是abort：导致MCE的原因主要有：总线故障、内存ECC校验错、cache错误、TLB错误、内部时钟错误，等等。不仅硬件故障会引起MCE，不恰当的BIOS配置、firmware bug、软件bug也有可能引起MCE。在 Linux 系统上，如果发生的MCE错

mcelog

mce

转载精选 2016-05-05 18:13:09 10000+阅读 1收藏

Linux用户进程内存空间分析

经常使用 top 命令了解进程信息，其中包括内存方面的信息。命令top帮助文档是这么解释各个字段的。VIRT , Virtual Image (kb)RES, Resident size (kb)SHR, Shared Mem size (kb)%MEM, Memory usage(kb)SWAP, Swapped size (kb)CODE, Code size (kb)DATA, Data+S

linux

内存空间

用户进程

转载精选 2016-04-14 14:29:38 2213 阅读

x86 spinlock实现分析

1. TAS lock (test-and-set)这是最简单的spinlock，CPU会在硬件上提供一些指令来帮助OS实现spinlock，比如x86就有xchg, LOCK指令前缀等指令。。。test_and_set()可以利用这些指令对某个memory地址，来原子地完成：写入true到这个地址，同时返回这个地址储存的旧的值。void spin_lock(lock){

分析

原理

spinlock

自旋锁

转载精选 2016-03-12 12:54:50 3009 阅读

给进程设置实时优先级

linux内核有五种调度方法：SCHED_FIFO 实时调度策略，first in first outSCHED_RR 实时调度策略，robin round SCHED_OTHER 分时调度策略SCHED_BATCH 批处理SCHED_IDLE 优先级最低的策略实时进程和分时进程的调度算法不同，分别在rt.c和fair.c中实现。实时进程的优先级总是高于普通进程。实时进程根据

Linux

进程优先级

转载精选 2016-02-18 10:08:13 10000+阅读

Linux的ulimit各种限制之深入分析

一般可以通过ulimit命令或编辑/etc/security/limits.conf重新加载的方式使之生效通过ulimit比较直接,但只在当前的session有效,limits.conf中可以根据用户和限制项使用户在下次登录中生效.对于limits.conf的设定是通过pam_limits.so的加载生效的,比如/etc/pam.d/sshd,这样通过ssh登录时会加载limit.又或者在/etc

Linux

ulimit

转载精选 2016-02-18 10:06:24 8449 阅读

剖析2015四大合并案：滴滴快的、58赶集、美团大众点评、携程去哪儿 1+1>2？

滴滴快的实现了大吃小，58赶集联合发展、美图大众点评以及去哪儿携程由于交易刚宣布，整合还需要时间，不过从目前了解的状况看，依然会有一方管理层出局的状况将非常可能出现。

2015

四大并购

转载精选 2015-12-14 15:41:50 1351 阅读

2015科技公司收购大盘点

　　IBM收购人工智能公司AlchemyAPI　　本周，IBM收购了初创公司AlchemyAPI，旨在利用其工具加强Watson人工智能。AlchemyAPI能够利用深度学习人工智能，搜集企业、网站、广告主发行的图片、文字等信息，并做出相应的文本、数据分析。深度学习是机器学习研究中的一个新的领域，其动机在于建立、模拟人脑进行分析学习的神经网络，它模仿人脑的机制来解释数据，例如图像，声音和文本。Fa

2015

科技公司收购

转载精选 2015-12-14 15:34:01 775 阅读

Linux进程的Uninterruptible sleep（D）状态

Linux系统进程状态PROCESS STATE CODESHere are the different values that the s, stat and state output specifiers (header "STAT" or "S") will display to describe the state of a process.D Uninterru

linux

僵尸进程

Uninterruptible slee

d状态

转载精选 2015-12-10 10:18:33 4057 阅读

分布式系统的事务处理

当我们在生产线上用一台服务器来提供数据服务的时候，我会遇到如下的两个问题：1）一台服务器的性能不足以提供足够的能力服务于所有的网络请求。2）我们总是害怕我们的这台服务器停机，造成服务不可用或是数据丢失。于是我们不得不对我们的服务器进行扩展，加入更多的机器来分担性能上的问题，以及来解决单点故障问题。通常，我们会通过两种手段来扩展我们的数据服务：1）数据分区：就是把数据分块放在不同的服务器上（如：u

分布式文件系统

事务处理

转载精选 2015-11-24 15:33:06 748 阅读

Ceph vs Swift - 架构剖析

【编者的话】Ceph和Swift，哪种更好？这个问题上大家争论不休，本文从两者的架构角度分析两种方式各自的优缺点，并且给出如何选择的建议。当工程师们讨论存储，谈到Ceph和Swift时，他们通常都一致认为其中一个非常棒，另外一个却很糟糕。但问题时，他们在哪个好哪个不好上却意见不一。经常会有客户问我相同的问题，“我们听说Ceph可以代替其他所有类型的存储。为什么不能用它做所有事情呢？”我会在Vanc

对比

Swift

Ceph

转载精选 2015-11-11 09:55:48 1410 阅读

Erasure code（纠删码）原理

1. 什么是erasure code? erasure code可以认为是RAID的通式，任何RAID都可以转换为特定的erasure code。在传统的RAID中，仅支持少量的磁盘分布，当系统中存在多个分发点和多节点时，RAID将无法满足需求。比如RAID5只支持一个盘失效，即使是RAID6也仅支持两个盘失效，所以支持多个盘失效的算法也就是erasure code是解决这一问题的办法。定义：e

原理

详解

纠删码

erasure code

转载精选 2015-10-16 15:31:46 8003 阅读 1收藏

tornado实现https访问功能

原标题：使用 Tornado 跟 SSL 建立安全链接记录一下过程。首先，我们需要的当然就是 Tornado、Python、OpenSSL, 这里只是记录建立 ssl ，需要其他 linux 下知识的暂时不讲，需要的话以后另开主题。其实 Tornado 本身已经支持了 SSL ，所以我们这里主要的只是生成可用的证书。到 OpenSSL 的安装目录的 bin 文件夹下，参考

https

ssl

python

tornado

转载精选 2015-07-10 12:54:26 6605 阅读

Easy Basic HTTP authentication with Tornado

I recently got a chance to play around with Tornado, which is pretty neat (although that certainly isn’t news). One thing that I tried to do pretty quickly and had a hard time with was Basic

用户认证

tornado

转载精选 2015-07-01 14:57:52 1645 阅读

修改git全部已提交的用户名和邮箱

即：修改git所有commit中的用户名和email作为一名 Git 苦手，我一直使用的是傻瓜级的 Github 客户端，去年九月迁移到 OS X 后也是如此。好几个月后我发现自己的 contribution graph 有一大片空白，才意识到迁移之后 commit 的作者信息都错误了…Before没计入 contribution 简直不能忍啊！身为打卡强迫症觉得这几个月相当于白干了啊！查看 gi

git

github

修改用户名和邮箱

转载精选 2015-06-03 14:44:03 10000+阅读

苹果OS X系统常用键盘快捷键和触控板使用技巧总结

前两天刚刚买了一台MacBook Air，系统是OS X 10.8（Mountain Lion）。对于用惯了Windows GUI的我来说，很多命令找不到了，很不习惯。经过这几天的摸索，越来越感觉苹果系统的好用了。尤其是触控板，完全替代了鼠标，并且可用性远超鼠标。现在基本不用鼠标了，连触控板下方的左右键也基本不用了。看网上很多帮助文档都是以快捷键为中心组织的，实际上我更想做某个操作时查找一个快捷键

苹果系统快捷方式

苹果触摸板使用技巧

转载精选 2015-05-24 16:15:23 3758 阅读

GlusterFS基础知识

一、什么是GlusterFS glusterfs是一个横向扩展的分布式文件系统，就是把多台异构的存储服务器的存储空间整合起来给用户提供统一的命名空间。用户访问存储资源的方式有很多，可以通过NFS，SMB，HTTP协议等访问，还可以通过gluster本身提供的客户端访问。二、典型部署拓扑图三、概念和算法1、Trusted Storage Pool 一堆存储节点的集

glusterfs

转载精选 2015-05-22 11:26:57 3203 阅读

官方博客	全部文章	热门标签	班级博客
了解我们	网站地图	意见反馈

鸿蒙开发者社区	51CTO学堂
51CTO	软考资讯

51CTO博客

敏而好学

微软word提示：您正试图运行的函数包含有宏或需要宏语言支持的内容

深入理解GlusterFS之数据均衡

常见开源告警系统对比分析(prometheus、open-falcon、zabbix)

这个项目谁来R? - RACI模型

Kubernetes 资源管理概述

Kubernetes Cluster AutoScaler简介

kubernetes之网络分析

深入理解GlusterFS之POSIX接口

NFS-Ganesha源代码分析

Linux 系统使用建议

孤儿进程与僵尸进程[总结]

GlusterFS企业级功能之EC纠删码

kvm常见故障及解决方案

强制重启Linux系统的几种方法

如何分析系统MCE异常？

Linux用户进程内存空间分析

x86 spinlock实现分析

给进程设置实时优先级

Linux的ulimit各种限制之深入分析

剖析2015四大合并案：滴滴快的、58赶集、美团大众点评、携程去哪儿 1+1>2？

2015科技公司收购大盘点

Linux进程的Uninterruptible sleep（D）状态

分布式系统的事务处理

Ceph vs Swift - 架构剖析

Erasure code（纠删码）原理

tornado实现https访问功能

Easy Basic HTTP authentication with Tornado

修改git全部已提交的用户名和邮箱

苹果OS X系统常用键盘快捷键和触控板使用技巧总结

GlusterFS基础知识

欢迎