在Kubernetes(K8S)中实现cdh4的过程是指将Cloudera Distribution of Hadoop (CDH)版本4部署到Kubernetes集群中的过程。CDH是一种用于处理大数据的开源软件套件，包含了Hadoop、Hive、Hbase等组件。在K8S中实现cdh4可以帮助用户更好地管理和运行大数据相关的工作负载。
下面我将逐步介绍实现cdh4的流程，包括创建K8S集群、
1.1 CDH4服务器规划 编号虚拟机IP服务110.255.0.120Namenode1RecourseManagerzkfc210.255.0.145Namenode2zkfc310.255.0.146Jou
原创
2014-09-17 00:11:18
1646阅读
翻了翻自己之前写的CDH4安装部署文档，word文档有100页之多，花了不少时间写的，不能写完就丢弃了，而且抱着温故而知新的态度，于是分了几个章节整理了下，打算传到博客上来。先从CDH4的介绍开始。 Hadoop发行版本-CDH4目前而言，不收费的Hadoop版本主要有三个（均是国外厂商），分别是：Apache（最原始的版本，所有发行版均基于这个版本进行改进）、Cloudera版本（Clouder
原创
2014-09-16 23:12:43
1259阅读
点赞
1评论
cdh4 install for Centos6那个最美的年代,最好的时光,一路梦想,一路流泪,流的不会是懦弱的泪,而是对奋斗的寄于;1,repo配置>>>/etc/yum.repo/wget http://archive.cloudera.com/cdh4/redhat/6/x86_64/cdh/cloudera-cdh4.repo或是wget archive.
原创
2021-12-30 16:28:55
114阅读
参考了很多mapre1 插件生成文档，大部分都是hadoop标准版本的，这里给
原创
2022-11-11 16:42:10
147阅读
https://ccp.cloudera.com/display/SUPPORT/CDH4+Downloadable+Tarballs
原创
2022-07-22 16:21:34
71阅读
前言：无论是CM或者CDH使用的过程中，学习研究CDH使用、CDH升级、CM升级等等原因而考虑卸载CM、CDH，本教程使用于基于CM安装的CDH的卸载。当然，如果CDH采用独立安装方式安装，在删除对应目录时，更改相应目录即可，主要分为CM卸载和CDH卸载两部分，理论上使用于CDH4和CDH5的卸载（新版本如有更改则不适用）。一、卸载CM：（CM主机执行）1、移除所有服务 &
原创
2015-05-22 15:54:02
2758阅读
在安装CDH4集群之前，安装的系统需要满足以下几个条件：支持的操作系统版本Operating SystemVersionPackagesRed Hat compatibleRed Hat Enterprise Linux (RHEL)5.764-bit6.264-bit, 32-bit6.464-bitCentOS5.764-bit6.264-bit, 32-bit6.464-bitOracle
原创
2014-09-16 23:22:06
961阅读
今天把CDH4的yarn降到MRv1以后，启动pig的job时候报了这个错，
INFO mapreduce.Cluster: Failed to use org.apache.hadoop.mapred.LocalClientProtocolProvider due to error: Invalid "mapreduce.jobtracker.address" config
转载
精选
2012-08-09 09:40:19
940阅读
http://www.linuxidc.com/Linux/2013-07/87846.htm
原创
2023-03-28 13:28:26
100阅读
手动安装CDH4集群1、下载CDH4.3源码包采用源码包安装，下载地址：http://www.cloudera.com/content/cloudera-content/cloudera-docs/CDHTarballs/3.25.2013/CDH4-Downloadable-Tarballs/CDH4-Downloadable-Tarballs.html源码包名：hadoop-2.0.0-cdh
原创
2013-08-03 14:58:27
2723阅读
点赞
Hadoop2/cdh4集群安装CDH 是Cloudera 完全开源的Hadoop 分布式系统架构，为了满足企业的需求而特别构建的系统。即一个开源的企业级分布式存储系统。全称：Cloudera Hadoop。它是在Apache Hadoop基础上打入了很多patch。使之性能更好，更加满足生产环境。Hadoop介绍Hadoop是apache 的开源项目，开发的主要目的是为了构建可靠、可拓展、稳定的
原创
精选
2014-08-02 00:26:40
841阅读
CentOS 6.4下CDH4集群安装四、Cloudera Manager安装CDH4集群安装方法有两种：自动监测和手动安装；首先采用Cloudera Manager免费版进行整个集群的自动安装和CDH4配置只需在一台机器上安装Cloudera Manager，我们在Master上安装1.下载Cloudera-manager-install.bin下载地址：（打开不了了，已下载，参考附件）可以在
原创
2013-07-24 22:20:35
1297阅读
CentOS 6.4下CDH4集群安装官网地址：http://www.cloudera.com/content/cloudera-content/cloudera-docs/CDH4/latest/CDH4-Installation-Guide/CDH4-Installation-Guide.html 一、系统准备工作1.确定操作系统是否为CDH4所支持 我们安装的操作系
原创
2013-07-24 22:01:13
1417阅读
点赞
CentOS 6.4下CDH4集群安装三、CDH4集群部署1.集群环境选择5台物理PC机，构建Hadoop集群；操作系统均为CentOS 6.4；集群包括5个节点：1个Master，4个Slave节点注：节点之间可以局域网连接，使用静态IP，相互ping通；也可以不用静态IP，直接使用外网分配的固定的IP；以静态为例：机器主机名192.168.12.10Master192.168.12.11Sla
原创
2013-07-24 22:16:02
1084阅读
点赞
3评论
$HADOOP_HOME/hdfs/name state: NON_EXISTENT
因为没有format
format时报错连接不上
From all of your JN : sudo service hadoop-hdfs-journalnode start
or if you deployed using tarball, maybe somethi
原创
2022-07-22 16:21:28
61阅读
1 Namenode规划说明：由于Namenode非常重要，一旦丢失数据或停止工作，整个集群就不能恢复了，所以一般来说，Namenode单独安装在一台服务器上，且两个Namenode分开部署。由于ZKFC负责监控Namenode的状态信息，所以每
原创
2014-09-16 23:24:44
2331阅读
--hadoop文件位置：log目录 :1/var/log/hadoo
原创
2023-08-04 20:23:19
92阅读
一、cdh是什么
CDH is Cloudera’s 100% open source Hadoop distribution, built specifically to meet enterprise demands
即一个开源的分布式存储系统
二、cdh4包含了哪些软件和功能
首先hbase,hadoop,zookeeper这些是必不可少的
其次hive,oozie,M
原创
2012-10-16 10:47:05
6741阅读
点赞
4评论
