Hadoop2/cdh4集群安装CDH 是Cloudera 完全开源的Hadoop 分布式系统架构，为了满足企业的需求而特别构建的系统。即一个开源的企业级分布式存储系统。全称：Cloudera Hadoop。它是在Apache Hadoop基础上打入了很多patch。使之性能更好，更加满足生产环境。Hadoop介绍Hadoop是apache 的开源项目，开发的主要目的是为了构建可靠、可拓展、稳定的
原创
精选
2014-08-02 00:26:40
841阅读
CentOS 6.4下CDH4集群安装四、Cloudera Manager安装CDH4集群安装方法有两种：自动监测和手动安装；首先采用Cloudera Manager免费版进行整个集群的自动安装和CDH4配置只需在一台机器上安装Cloudera Manager，我们在Master上安装1.下载Cloudera-manager-install.bin下载地址：（打开不了了，已下载，参考附件）可以在
原创
2013-07-24 22:20:35
1297阅读
CentOS 6.4下CDH4集群安装官网地址：http://www.cloudera.com/content/cloudera-content/cloudera-docs/CDH4/latest/CDH4-Installation-Guide/CDH4-Installation-Guide.html 一、系统准备工作1.确定操作系统是否为CDH4所支持 我们安装的操作系
原创
2013-07-24 22:01:13
1417阅读
点赞
CentOS 6.4下CDH4集群安装三、CDH4集群部署1.集群环境选择5台物理PC机，构建Hadoop集群；操作系统均为CentOS 6.4；集群包括5个节点：1个Master，4个Slave节点注：节点之间可以局域网连接，使用静态IP，相互ping通；也可以不用静态IP，直接使用外网分配的固定的IP；以静态为例：机器主机名192.168.12.10Master192.168.12.11Sla
原创
2013-07-24 22:16:02
1084阅读
点赞
3评论
手动安装CDH4集群1、下载CDH4.3源码包采用源码包安装，下载地址：http://www.cloudera.com/content/cloudera-content/cloudera-docs/CDHTarballs/3.25.2013/CDH4-Downloadable-Tarballs/CDH4-Downloadable-Tarballs.html源码包名：hadoop-2.0.0-cdh
原创
2013-08-03 14:58:27
2723阅读
点赞
远程客户端安装及配置1、远程客户端安装配置1)下载hadoop安装包安装在Client01机器上安装hadoop，和其他机器安装方式相同2)修改主机名# vim /etc/sysconfig/network修改为：HOSTNAME = Client011)修改hosts文件# vim /etc/hosts在文件中添加配置：192.168.12.10 Master2)系统环境变量配置修改/etc/p
原创
2013-08-03 15:20:04
2652阅读
点赞
2评论
在Kubernetes(K8S)中实现cdh4的过程是指将Cloudera Distribution of Hadoop (CDH)版本4部署到Kubernetes集群中的过程。CDH是一种用于处理大数据的开源软件套件，包含了Hadoop、Hive、Hbase等组件。在K8S中实现cdh4可以帮助用户更好地管理和运行大数据相关的工作负载。
下面我将逐步介绍实现cdh4的流程，包括创建K8S集群、
libhadoop.so其实是后面安装impala时要用到此处配置环境变啦时注意以下载到CDH
原创
2021-12-30 16:34:52
141阅读
1.1 CDH4服务器规划 编号虚拟机IP服务110.255.0.120Namenode1RecourseManagerzkfc210.255.0.145Namenode2zkfc310.255.0.146Jou
原创
2014-09-17 00:11:18
1646阅读
本文的安装只涉及了hadoop-common、hadoop-hdfs、hadoop-mapreduce和hadoop-yarn，并不包含HBase、Hive和Pig等。 http://blog.csdn.net/aquester/article/details/24621005 1. 规划 1.1.
转载
2016-08-14 14:06:00
100阅读
2评论
翻了翻自己之前写的CDH4安装部署文档，word文档有100页之多，花了不少时间写的，不能写完就丢弃了，而且抱着温故而知新的态度，于是分了几个章节整理了下，打算传到博客上来。先从CDH4的介绍开始。 Hadoop发行版本-CDH4目前而言，不收费的Hadoop版本主要有三个（均是国外厂商），分别是：Apache（最原始的版本，所有发行版均基于这个版本进行改进）、Cloudera版本（Clouder
原创
2014-09-16 23:12:43
1259阅读
点赞
1评论
cdh4 install for Centos6那个最美的年代,最好的时光,一路梦想,一路流泪,流的不会是懦弱的泪,而是对奋斗的寄于;1,repo配置>>>/etc/yum.repo/wget http://archive.cloudera.com/cdh4/redhat/6/x86_64/cdh/cloudera-cdh4.repo或是wget archive.
原创
2021-12-30 16:28:55
114阅读
准备环境： 使用2台centos服务器，每台机器上部署3个实例，集群为三个主节点与三个从节点：第一台192.168.1.107:7000192.168.1.107:7001192.168.1.107:7002第二台192.168.1.108:7003 192.168.1.108:7004 192.168.1.108:7005安装配置：192.168.1.107服务器&
原创
2017-09-07 14:00:45
1306阅读
点赞
具体就不做介绍了，直接开始安装准备环境：使用2台centos服务器，每台机器上部署3个实例，集群为三个主节点与三个从节点：
第一台
192.168.1.107:7000
192.168.1.107:7001
192.168.1.107:7002
第二台
192.168.1.108:7003
192.168.1.108:7004 
原创
2017-05-08 15:11:36
1160阅读
Redis5.0集群安装配置下载redis 安装包 http://download.redis.io/releases/redis-5.0.2.tar.gz一 解压安装redis[root@node1 ~]# tar zxvf redis-5.0.2.tar.gz -C /usr/local/[root@node1 local]# mv redi
原创
2022-01-28 21:06:05
341阅读
最近学习了下hadoop的安装。下面详细说明下步骤一、环境我的是在Linux环境下进行安装的。对于想在windows系统上学习的同学，可以采用虚拟机方式或通过cygwin模拟linux环境方式进行学习。现在有三台服务器，分配如下：10.0.1.100 NameNode10.0.1.201 DataNode110.0.1.202 DataNode2NameNode(主服务器)可以看作是分布式文件系统
转载
精选
2015-01-22 10:09:40
314阅读
版本及准备我部署的是hadoop-2.0.0-cdh4.2.0.tar.gz，下载地址为http://archive.cloudera.com/cdh4/cdh/4/hadoop-2.0.0-cdh4.2.0.tar.gz。在http://archive.cloudera.com/cdh4/cdh/4/下还可以下载到CDH hadoop生态圈内相关的包。再准备一个jdk1.6+的java环境，设置好JAVA_HOME。需要注意的是，window下直接点击链接下载到的包可能无法解压成功，原因是包是放在linux ftp上的，直接下载会有问题。建议在linux机器上用wget命令下载就可以了，如果
转载
2013-09-26 22:38:00
63阅读
2评论
HDFS dfs.block.size HDFS中的数据block大小，默认是64M，对于较大集群，可以设置为128或264M dfs.datanode.socket.write.timeout/dfs.socket.timeout 增加dfs.datanode.socket.write.timeout和dfs.socket.timeout两个属性的设置（默认300
原创
2015-05-14 16:59:44
6120阅读
Hadoop-2.5.1集群安装配置笔记1.环境1.1.虚拟机准备3台虚拟机，安装Centos 64-bit操作系统，采用最小安装。（本来想多跑几台虚拟机，但本人笔记本电脑内存有限，最多只能同时跑3个虚拟机）虚拟机一律配置静态IP地址，配置域名解析，各虚拟机时间同步。192.168.17.100 nameNode192.168.17.101 dataNode1192.168.17.102 data
转载
精选
2014-10-20 15:48:47
609阅读
