https://ccp.cloudera.com/display/SUPPORT/CDH4+Downloadable+Tarballs
原创
2022-07-22 16:21:34
71阅读
在Kubernetes(K8S)中实现cdh4的过程是指将Cloudera Distribution of Hadoop (CDH)版本4部署到Kubernetes集群中的过程。CDH是一种用于处理大数据的开源软件套件，包含了Hadoop、Hive、Hbase等组件。在K8S中实现cdh4可以帮助用户更好地管理和运行大数据相关的工作负载。
下面我将逐步介绍实现cdh4的流程，包括创建K8S集群、
libhadoop.so其实是后面安装impala时要用到此处配置环境变啦时注意以下载到CDH
原创
2021-12-30 16:34:52
141阅读
1.1 CDH4服务器规划 编号虚拟机IP服务110.255.0.120Namenode1RecourseManagerzkfc210.255.0.145Namenode2zkfc310.255.0.146Jou
原创
2014-09-17 00:11:18
1646阅读
翻了翻自己之前写的CDH4安装部署文档，word文档有100页之多，花了不少时间写的，不能写完就丢弃了，而且抱着温故而知新的态度，于是分了几个章节整理了下，打算传到博客上来。先从CDH4的介绍开始。 Hadoop发行版本-CDH4目前而言，不收费的Hadoop版本主要有三个（均是国外厂商），分别是：Apache（最原始的版本，所有发行版均基于这个版本进行改进）、Cloudera版本（Clouder
原创
2014-09-16 23:12:43
1259阅读
点赞
1评论
cdh4 install for Centos6那个最美的年代,最好的时光,一路梦想,一路流泪,流的不会是懦弱的泪,而是对奋斗的寄于;1,repo配置>>>/etc/yum.repo/wget http://archive.cloudera.com/cdh4/redhat/6/x86_64/cdh/cloudera-cdh4.repo或是wget archive.
原创
2021-12-30 16:28:55
114阅读
$HADOOP_HOME/hdfs/name state: NON_EXISTENT
因为没有format
format时报错连接不上
From all of your JN : sudo service hadoop-hdfs-journalnode start
or if you deployed using tarball, maybe somethi
原创
2022-07-22 16:21:28
61阅读
OS: CentOS 6.4 x86_64Servers:hadoop-master: 172.17.20.230 内存10G- namenodehadoop- secondarynamenode: 172.17.20.234 内存10G- secondarybackupnamenode,jobtrackerhadoop-node-1: 172.17.20.231 内存10G- datanode,
原创
2023-05-16 17:48:48
97阅读
CDH6部署文档
title: CDH6部署文档
categories: Hadoop
tags: HadoopCDH6部署文档1.虚拟机准备设置hadoop101、hadoop102、hadoop103的主机对应内存分别是：8G、8G、8G (看条件分配)设置主机名并添加到/etc/hosts文件内hostnamectl set-hostname hadoop1
hostname
转载
2023-07-17 20:48:49
49阅读
Hadoop2/cdh4集群安装CDH 是Cloudera 完全开源的Hadoop 分布式系统架构，为了满足企业的需求而特别构建的系统。即一个开源的企业级分布式存储系统。全称：Cloudera Hadoop。它是在Apache Hadoop基础上打入了很多patch。使之性能更好，更加满足生产环境。Hadoop介绍Hadoop是apache 的开源项目，开发的主要目的是为了构建可靠、可拓展、稳定的
原创
精选
2014-08-02 00:26:40
841阅读
前言 折腾了一段时间hadoop的部署管理，写下此系列博客记录一下。 为了避免各位做部署这种重复性的劳动，我已经把部署的步骤写成脚本，各位只需要按着本文把脚本执行完，整个环境基本就部署完了。部署的脚本我放在了开源中国的git仓库里(http://git.oschina.net/snake1361222/hadoop_scripts)。 本文的所有部署都基于clo
推荐
原创
2013-07-03 20:33:21
2089阅读
点赞
8评论
前言 折腾了一段时间hadoop的部署管理，写下此系列博客记录一下。 为了避免各位做部署这种重复性的劳动，我已经把部署的步骤写成脚本，各位只需要按着本文把脚本执行完，整个环境基本就部署完了。部署的脚本我放在了开源中国的git仓库里(http://git.oschina.net/snake1361222/hadoop_scripts)。 本文的所有部署都基于clo
原创
2013-07-25 15:23:21
422阅读
前言 折腾了一段时间hadoop的部署管理，写下此系列博客记录一下。 为了避免各位做部署这种重复性的劳动，我已经把部署的步骤写成脚本，各位只需要按着本文把脚本执行完，整个环境基本就部署完了。部署的脚本我放在了开源中国的git仓库里(http://git.oschina.net/snake1361222/hadoop_scripts)。 本文的所有部署都基于clo
推荐
原创
2013-07-25 15:23:39
692阅读
点赞
前言：无论是CM或者CDH使用的过程中，学习研究CDH使用、CDH升级、CM升级等等原因而考虑卸载CM、CDH，本教程使用于基于CM安装的CDH的卸载。当然，如果CDH采用独立安装方式安装，在删除对应目录时，更改相应目录即可，主要分为CM卸载和CDH卸载两部分，理论上使用于CDH4和CDH5的卸载（新版本如有更改则不适用）。一、卸载CM：（CM主机执行）1、移除所有服务 &
原创
2015-05-22 15:54:02
2758阅读
今天把CDH4的yarn降到MRv1以后，启动pig的job时候报了这个错，
INFO mapreduce.Cluster: Failed to use org.apache.hadoop.mapred.LocalClientProtocolProvider due to error: Invalid "mapreduce.jobtracker.address" config
转载
精选
2012-08-09 09:40:19
940阅读
在安装CDH4集群之前，安装的系统需要满足以下几个条件：支持的操作系统版本Operating SystemVersionPackagesRed Hat compatibleRed Hat Enterprise Linux (RHEL)5.764-bit6.264-bit, 32-bit6.464-bitCentOS5.764-bit6.264-bit, 32-bit6.464-bitOracle
原创
2014-09-16 23:22:06
961阅读
--hadoop文件位置：log目录 :1/var/log/hadoo
原创
2023-08-04 20:23:19
92阅读
1 Namenode规划说明：由于Namenode非常重要，一旦丢失数据或停止工作，整个集群就不能恢复了，所以一般来说，Namenode单独安装在一台服务器上，且两个Namenode分开部署。由于ZKFC负责监控Namenode的状态信息，所以每
原创
2014-09-16 23:24:44
2331阅读
一、cdh是什么
CDH is Cloudera’s 100% open source Hadoop distribution, built specifically to meet enterprise demands
即一个开源的分布式存储系统
二、cdh4包含了哪些软件和功能
首先hbase,hadoop,zookeeper这些是必不可少的
其次hive,oozie,M
原创
2012-10-16 10:47:05
6741阅读
点赞
4评论
