Hadoop2/cdh4集群安装CDH 是Cloudera 完全开源的Hadoop 分布式系统架构，为了满足企业的需求而特别构建的系统。即一个开源的企业级分布式存储系统。全称：Cloudera Hadoop。它是在Apache Hadoop基础上打入了很多patch。使之性能更好，更加满足生产环境。Hadoop介绍Hadoop是apache 的开源项目，开发的主要目的是为了构建可靠、可拓展、稳定的
原创
精选
2014-08-02 00:26:40
841阅读
远程客户端安装及配置1、远程客户端安装配置1)下载hadoop安装包安装在Client01机器上安装hadoop，和其他机器安装方式相同2)修改主机名# vim /etc/sysconfig/network修改为：HOSTNAME = Client011)修改hosts文件# vim /etc/hosts在文件中添加配置：192.168.12.10 Master2)系统环境变量配置修改/etc/p
原创
2013-08-03 15:20:04
2652阅读
点赞
2评论
CentOS 6.4下CDH4集群安装四、Cloudera Manager安装CDH4集群安装方法有两种：自动监测和手动安装；首先采用Cloudera Manager免费版进行整个集群的自动安装和CDH4配置只需在一台机器上安装Cloudera Manager，我们在Master上安装1.下载Cloudera-manager-install.bin下载地址：（打开不了了，已下载，参考附件）可以在
原创
2013-07-24 22:20:35
1297阅读
CentOS 6.4下CDH4集群安装官网地址：http://www.cloudera.com/content/cloudera-content/cloudera-docs/CDH4/latest/CDH4-Installation-Guide/CDH4-Installation-Guide.html 一、系统准备工作1.确定操作系统是否为CDH4所支持 我们安装的操作系
原创
2013-07-24 22:01:13
1417阅读
点赞
CentOS 6.4下CDH4集群安装三、CDH4集群部署1.集群环境选择5台物理PC机，构建Hadoop集群；操作系统均为CentOS 6.4；集群包括5个节点：1个Master，4个Slave节点注：节点之间可以局域网连接，使用静态IP，相互ping通；也可以不用静态IP，直接使用外网分配的固定的IP；以静态为例：机器主机名192.168.12.10Master192.168.12.11Sla
原创
2013-07-24 22:16:02
1084阅读
点赞
3评论
手动安装CDH4集群1、下载CDH4.3源码包采用源码包安装，下载地址：http://www.cloudera.com/content/cloudera-content/cloudera-docs/CDHTarballs/3.25.2013/CDH4-Downloadable-Tarballs/CDH4-Downloadable-Tarballs.html源码包名：hadoop-2.0.0-cdh
原创
2013-08-03 14:58:27
2723阅读
点赞
在Kubernetes(K8S)中实现cdh4的过程是指将Cloudera Distribution of Hadoop (CDH)版本4部署到Kubernetes集群中的过程。CDH是一种用于处理大数据的开源软件套件，包含了Hadoop、Hive、Hbase等组件。在K8S中实现cdh4可以帮助用户更好地管理和运行大数据相关的工作负载。
下面我将逐步介绍实现cdh4的流程，包括创建K8S集群、
libhadoop.so其实是后面安装impala时要用到此处配置环境变啦时注意以下载到CDH
原创
2021-12-30 16:34:52
141阅读
cdh4 install for Centos6那个最美的年代,最好的时光,一路梦想,一路流泪,流的不会是懦弱的泪,而是对奋斗的寄于;1,repo配置>>>/etc/yum.repo/wget http://archive.cloudera.com/cdh4/redhat/6/x86_64/cdh/cloudera-cdh4.repo或是wget archive.
原创
2021-12-30 16:28:55
114阅读
版本及准备我部署的是hadoop-2.0.0-cdh4.2.0.tar.gz，下载地址为http://archive.cloudera.com/cdh4/cdh/4/hadoop-2.0.0-cdh4.2.0.tar.gz。在http://archive.cloudera.com/cdh4/cdh/4/下还可以下载到CDH hadoop生态圈内相关的包。再准备一个jdk1.6+的java环境，设置好JAVA_HOME。需要注意的是，window下直接点击链接下载到的包可能无法解压成功，原因是包是放在linux ftp上的，直接下载会有问题。建议在linux机器上用wget命令下载就可以了，如果
转载
2013-09-26 22:38:00
63阅读
2评论
HDFS dfs.block.size HDFS中的数据block大小，默认是64M，对于较大集群，可以设置为128或264M dfs.datanode.socket.write.timeout/dfs.socket.timeout 增加dfs.datanode.socket.write.timeout和dfs.socket.timeout两个属性的设置（默认300
原创
2015-05-14 16:59:44
6120阅读
翻了翻自己之前写的CDH4安装部署文档，word文档有100页之多，花了不少时间写的，不能写完就丢弃了，而且抱着温故而知新的态度，于是分了几个章节整理了下，打算传到博客上来。先从CDH4的介绍开始。 Hadoop发行版本-CDH4目前而言，不收费的Hadoop版本主要有三个（均是国外厂商），分别是：Apache（最原始的版本，所有发行版均基于这个版本进行改进）、Cloudera版本（Clouder
原创
2014-09-16 23:12:43
1259阅读
点赞
1评论
参考了很多mapre1 插件生成文档，大部分都是hadoop标准版本的，这里给
原创
2022-11-11 16:42:10
147阅读
https://ccp.cloudera.com/display/SUPPORT/CDH4+Downloadable+Tarballs
原创
2022-07-22 16:21:34
71阅读
1.1 CDH4服务器规划 编号虚拟机IP服务110.255.0.120Namenode1RecourseManagerzkfc210.255.0.145Namenode2zkfc310.255.0.146Jou
原创
2014-09-17 00:11:18
1646阅读
一.准备工作 离线部署: MySQL离线部署 CM离线部署 Parcel⽂文件离线源部署 规划: 节点 MySQL组件 Parcel文件离线源 CM服务进程 大数据组件 cdh001 ActivityMonitor NN RM DN NM cdh002 Alert PublisherEvent Se ...
转载
2021-10-22 18:00:00
698阅读
2评论
OS: CentOS 6.4 x86_64Servers:hadoop-master: 172.17.20.230 内存10G- namenodehadoop- secondarynamenode: 172.17.20.234 内存10G- secondarybackupnamenode,jobtrackerhadoop-node-1: 172.17.20.231 内存10G- datanode,
原创
2023-05-16 17:48:48
97阅读
前言：无论是CM或者CDH使用的过程中，学习研究CDH使用、CDH升级、CM升级等等原因而考虑卸载CM、CDH，本教程使用于基于CM安装的CDH的卸载。当然，如果CDH采用独立安装方式安装，在删除对应目录时，更改相应目录即可，主要分为CM卸载和CDH卸载两部分，理论上使用于CDH4和CDH5的卸载（新版本如有更改则不适用）。一、卸载CM：（CM主机执行）1、移除所有服务 &
原创
2015-05-22 15:54:02
2758阅读
大数据集群管理方式分为手工方式（Apache hadoop）和工具方式（Ambari + hdp 和Cloudera Manger + CDH）主机：192.168.0.32：Server+agent192.168.0.33：agent192.168.0.34：agent安装之前准备环境：网络名称CDH需要IPv4。不支持IPv6。按如下方式配置群集中的每个主机，以确保所有成员可以相互通信：将主机
原创
2018-09-18 11:52:42
10000+阅读
