Google是可伸缩性之王。每个人都知道Google是因为他们对大量，复杂信息的快速搜索，但是Google的技术并不只是在搜索领域闪闪发光。他们构建大型应用的平台方式能够让他们以惊人的竞争速度在网络规模应用上面大展拳脚。Google的目标一直是构建更高性能更高规模基础设施来支持他们的产品。他们怎么做到的呢？ 参考资料以及信息来源&nb
简介 本指南将以一台机器为例，演示从安装 PBS，PostgreSQL 到实现一个简单的 apache 日志 ETL 分析程序的完整安装过程。 安装 PBS 编译 下载 TORQUE 源代码：http://www.clusterresources.com/downloads/torque/ 。解压缩后进行编译。 $ tar zxvf torque -2.3.3.tar.gz
PBS是功能最为齐全，历史最悠久，支持最广泛的本地集群调度器之一。 PBS的目前包括openPBS，PBS Pro和Torque三个主要分支。其中OpenPBS是最早的PBS系统，目前已经没有太多后续开发，PBS pro是PBS的商业版本，功能最为丰富。Torque是Clustering公司接过了OpenPBS，并给与后续支持的一个开源版本。 下面是本人安装torque的过程。 一、Torqu
最近开始一个项目，要用到openPBS，网上搜集了一些资料，放博客与大家分享 一、OpenPBS安装 1、 必须用root登录 2、 创建安装路径，一般是：/usr/local/OpenPBS 3、 cp OpenPBS安装包到安装路径并释放 4、 进入释放的目录，例如：$>OpenPBS_2_3_16\ 5、&nb
本文是Linux高性能集群系列文章的第五部分。这一部分首先介绍集群系统中的资源管理主要任务和系统管理主要任务，然后列举并比较了几种常用的资源管理软件和系统管理软件。 1 集群作业管理 从用户角度看，集群系统就好像一台服务器或者PC。很多用户可以同时使用这个系统。但是当太多的用户使用集群系统时，系统性能会变得很差。资源管理就是管 理用户提交的作业，合理给各个作业分配资源从而确保充分
PBS(Portable Batch System)是由NASA开发的灵活的批处理系统。它被用于集群系统、超级计算机和大规模并行系统。PBS主要有如下特征： 易用性：为所有的资源提供统一的接口，易于配置以满足不同系统的需求，灵活的作业调度器允许不同系统采用自己的调度策略。移植性：符合POSIX 1003.2标准，可以用于shell和批处理等各种环境。适配性：可以适配与各种管理策略，并提供可扩
大致环境为480个IBM HS20刀片的计算节点，20台X366 IO节点，2个管理节点。 计算节点系统为：RedHat Enterprise Linux AS 3.0 update6。 1：xcat安装的前提条件 LINUX要完全安装，至少要有两块网卡，一块进行管理，一块进行计算应用 XCAT有包含四个安装包 xcat-dist-core-1.2.0-RC3.tgz xcat-
Copyright © 2005-2024 51CTO.COM 版权所有 京ICP证060544号
