linuxjcq的博客_mysql,nginx,shell

EC2的AMI制作（二）：安装tools和制作AMI

在对自己的实例做好了所有配置后，就可以开始制作AMI了。需要用到的工具有： 1. AMI tools wget http://s3.amazonaws.com/ec2-downloads/ec2-ami-tools.noarch.rpm -P /usr/local/src rpm -ivh /usr/local/src/ec2-ami-tools.norach.rpm 2. API t

职场

休闲

ec2 ami amazon snap

原创 2012-02-10 17:56:57 4386 阅读

EC2的AMI制作（一）：安装EC2实例

基本概念 EC2实例的需要使用AMI来创建实例。使用自定义的AMI可以根据自己的应用定制和快速部署。 AMI：Amazon Machine Image，是一个模板，它包含操作系统、应用程序服务器和应用程序等地配置。 AMI可以分为两种：backed by Amazon EBS 和 backed by instance store backed by Amazon EBS可以在关闭后不丢失修

职场

休闲

ec2 ami 实例安装 Elastic

原创 2012-02-10 16:34:59 9853 阅读

pig,hive安装配置：使用cloudrea

一. Pig安装 1. 安装 yum install hadoop-pig 2. 配置 a. 复制配置文件 cp -r /etc/pig/conf.dist /etc/pig/conf.my_cluster b. 安装配置文件 alternatives --install /etc/pig/conf pig-conf /etc/pig/conf.my_cluster 50 2. 启

职场

休闲

pig hive hadoop

原创 2012-01-16 16:42:05 1509 阅读

Flume分布式日志系统（三）：flume shell

flume提供了flume shell方式来管理，非常强大。 1. 连接可以使用 “flume shell”进入flume命令行环境，“connect”命令可以用来连接任何的flume的master服务器。 [root@test01] ~ 0 $ flume shell [flume (disconnected)] connect tes

职场

休闲

flume shell

原创 2012-01-16 12:29:19 2673 阅读

hadoop安装配置：使用cloudrea

这里使用cloudrea的rpm源，安装hadoop 环境为： 192.168.255.132 test01.linuxjcq.com =》master 192.168.255.133 test02.linuxjcq.com =》slave01 192.168.255.134 test03.linuxjcq.com =》slave02 每台主机中的/etc/hosts文件有以上配置和基本

职场

休闲

hadoop 安装配置 yum ins

原创 2012-01-13 17:14:07 1949 阅读

Flume分布式日志系统（二）：flume使用ZooKeeper

默认情况下Flume在内存中保存各个节点的配置，重启后丢失，可以使用ZooKeeper保存各个节点配置信息。 cloudera的rpm仓库安装在前面的文章中，ZooKeeper使用三台服务器对应信息如下192.168.255.132 test01.linuxjcq.com 192.168.255.133 test02.linuxjcq.com 192.168.255.134 test03.l

职场

休闲

flume zookeeper

原创 2012-01-13 15:49:01 4257 阅读

开源日志系统比较

转自董的博客：http://dongxicheng.org/search-engine/log-systems/ 1. 背景介绍许多公司的平台每天会产生大量的日志（一般为流式数据，如，搜索引擎的pv，查询等），处理这些日志需要特定的日志系统，一般而言，这些系统需要具有以下特征：（1）构建应用系统和分析系统的桥梁，并将它们之间的关联解耦；（2）支持近实时

职场

休闲

开源日志系统 flume scribe

转载精选 2012-01-13 15:23:02 1871 阅读 1点赞 1评论

Flume分布式日志系统（一）：flume安装配置

使用cloudera的源来进行安装flume，使用的系统为CentOS 6.0，64位的系统。 1. 安装cloudear的源 a. 下载 wget http://archive.cloudera.com/redhat/6/x86_64/cdh/cdh3-repository-1.0-1.noarch.rpm -P /usr/local/src b. 安装

安装

职场

休闲

flume

cloudera

原创推荐 2012-01-13 15:18:25 6866 阅读 1点赞 1评论

Hbase安装配置（含分布式ZooKeeper）

环境说明系统为CentOS 6.0 192.168.255.128 =》 server01 192.168.255.130 =》 server02 192.168.255.131 =》 server03 /etc/hosts文件中有这些IP和域名的映射关系配置server01在hadoop用户下可以通过密钥无需密码访问server02和serve

职场

休闲

hbase hadoop zookeep

原创 2012-01-09 17:28:30 10000+阅读 1点赞 1评论

ganglia安装配置（监控hadoop)

环境：系统 CentOS 6.0 hadoop集群中有3台服务器 server01 -> master 192.168.255.128 server02 -> slave 192.168.255.130 server03 -> slave 192.168.255.131 软

监控

nginx

hadoop

ganglia

hadoop-metrics2.prop

原创 2012-01-06 11:02:29 9056 阅读 1点赞 1评论

官方博客	全部文章	热门标签	班级博客
了解我们	网站地图	意见反馈

鸿蒙开发者社区	51CTO学堂
51CTO	软考资讯

51CTO博客

linuxjcq