CDH4报错一则

精选转载

chcearth 2012-08-09 09:40:19

文章标签 CDH4 文章分类 Hadoop 大数据

今天把CDH4的yarn降到MRv1以后，启动pig的job时候报了这个错，

INFO mapreduce.Cluster: Failed to use org.apache.hadoop.mapred.LocalClientProtocolProvider due to error: Invalid "mapreduce.jobtracker.address" configuration value for LocalJobRunner

解决方法：把环境变量HADOOP_MAPRED_HOME置为空就好了。

原文见：http://www.ne.jp/asahi/hishidama/home/tech/apache/hadoop/hadoopCDH4.html

上面说hbase也有类似的问题。

上一篇：hbase问题一则

下一篇：CDH4+hive报错

提问和评论都可以，用心的回复会被更多人看到评论

发布评论

相关文章

CDH使用Disk Balancer平衡磁盘HDFS数据

原因:CDH HDFS集群机器上有很多块存储盘,磁盘存储空间是一样的,数据写入不均。从 CDH 5.8.2 开始，Cloudera Manager提供了一个全面的存储容量管理解决方案，可以跨节点(Balancer)、存储类型(Mover)和单个DataNode中的磁盘(磁盘平衡器)。启用磁盘平衡器在HDFS配置中搜索safety valve，在HDFS服务高级配置代码段（安全阀）创建

hdfs json HDFS
第二十七节搭建大数据平台CDH6.3.2

CDH集群6.3.2版本安装

centos cloudera mysql
生成订单30分钟未支付，则自动取消，该怎么实现？

了解需求方案 1：数据库轮询方案 2：JDK 的延迟队列方案 3：时间轮算法方案 4：redis 缓存方案 5：使用消息队列了解需求在开发中，往往会遇到一些关于延时任务的需求。例如生成订单 30 分钟未支付，则自动取消生成订单 60 秒后,给用户发短信对上述的任务，我们给一个专业的名字来形容，那就是延时任务。那么这里就会产生一个问题，这个延时任务和定时任务的区别究竟在哪里呢？一共有如下几点区别定时

System redis java
cdh4

在Kubernetes(K8S)中实现cdh4的过程是指将Cloudera Distribution of Hadoop (CDH)版本4部署到Kubernetes集群中的过程。CDH是一种用于处理大数据的开源软件套件，包含了Hadoop、Hive、Hbase等组件。在K8S中实现cdh4可以帮助用户更好地管理和运行大数据相关的工作负载。下面我将逐步介绍实现cdh4的流程，包括创建K8S集群、

bash cloudera Hadoop
yum cdh4

cdh4 install for Centos6那个最美的年代,最好的时光,一路梦想,一路流泪,流的不会是懦弱的泪,而是对奋斗的寄于;1,repo配置>>>/etc/yum.repo/wget http://archive.cloudera.com/cdh4/redhat/6/x86_64/cdh/cloudera-cdh4.repo或是wget archive.

hadoop hdfs mapreduce
CDH4安装部署系列之一-CDH4介绍

翻了翻自己之前写的CDH4安装部署文档，word文档有100页之多，花了不少时间写的，不能写完就丢弃了，而且抱着温故而知新的态度，于是分了几个章节整理了下，打算传到博客上来。先从CDH4的介绍开始。 Hadoop发行版本-CDH4目前而言，不收费的Hadoop版本主要有三个（均是国外厂商），分别是：Apache（最原始的版本，所有发行版均基于这个版本进行改进）、Cloudera版本（Clouder

CDH4介绍 NameNode HA
CDH4安装部署系列之四-安装部署高可用CDH4

1.1 CDH4服务器规划编号虚拟机IP服务110.255.0.120Namenode1RecourseManagerzkfc210.255.0.145Namenode2zkfc310.255.0.146Jou

安装部署 CDH4
hadoop cdh4 eclipse plugin

参考了很多mapre1 插件生成文档，大部分都是hadoop标准版本的，这里给

mapreduce eclipse hadoop apache
hadoop cdh4 下载地址

https://ccp.cloudera.com/display/SUPPORT/CDH4+Downloadable+Tarballs

cloudera h5 html
CDH使用之CM、CDH4、5卸载

前言：无论是CM或者CDH使用的过程中，学习研究CDH使用、CDH升级、CM升级等等原因而考虑卸载CM、CDH，本教程使用于基于CM安装的CDH的卸载。当然，如果CDH采用独立安装方式安装，在删除对应目录时，更改相应目录即可，主要分为CM卸载和CDH卸载两部分，理论上使用于CDH4和CDH5的卸载（新版本如有更改则不适用）。一、卸载CM：（CM主机执行）1、移除所有服务 &

Hadoop CDH
吹水一则

不知不觉原来没有update自己的这个blog有这么久了，这个网站的blog policy挺不错的，我以前在一个blog网站中花了不少心血写了点东西，就是因为时间长没有update，结果被取消帐号了，讽刺的是，我用google search还能search出我当初在里面的文章，只是已经成为陌路人了，shit！！不过51cto做得很不错，因为像我这种懒人，有时候还是会以忙为借口不常update bl

blog 职场休闲
笑话一则

中午在食堂吃饭，新闻里在讲超人，同事问我：超人的最大特点是什么？我边看电视边响亮的回答：内裤穿外面了！恰巧这时一女性不偏不倚从我面前经过，相当诧异的盯着我边走边看，我一时没反应过来，也诧异的看着她诧异着为什么看我，直到同事笑出声来我才反应过来，出误会了。。。。尴尬啊！

笑话
杂谈一则

杂谈昨天晚上可能写文章写的有点晚，加上自己本来就睡眠质量一般，到了晚上特别兴奋，睡到早上又「特别困」，于是早

java 迭代器匿名函数 python 生成器
IT笑话一则

一个女程序员 twitter 上发了一条 tweet:　　昨晚梦见男朋友和别的女人在逛街，梦里我的第一反应是查源代码…结果调试半天查不出来为什么显示的是那个女人不是我，最...

程序员
日记一则

时间过的真快,怎么个快法子呢？可以用"白驹过隙、岁月如梭、光阴似箭"之类的词语来形容。看看日历，今天7号，放假这些日子过了稀里糊涂的，该来总结一下了。其实我是没有写日志的习惯的，不过今天觉得自己该总结一下这阶段的生活，就觉得该干的事没干，预定的计划没有完成，心里不是滋味，想躲起来做东西，可是在一个能免费上网的环境，当你打开电脑你就会习惯

职场休闲
转载一则

本文出自 “青衫绿叶” 博客，请务必保留此出处http://xingmieyang.blog.51cto.com/621352/195083本文出自 51CTO.COM技术博客看到这么多人写网工通过心得，偶也忍不住了，写写，第一次写，呵呵，不要见外，不足之处多多指教。09年5月成绩 55/49 分不高，和60+的牛人比差远了，献丑了1.第一次听说软考

职场网工休闲
一则寓言

（1）一只小鸟正在飞往南方过冬的途中。天气太冷了，小鸟冻僵了，从天上掉下来，跌在一大片农田里。它躺在田里的时候，一只母牛走了过来，而且拉了一泡屎在它身上。冻僵的小鸟躺在牛屎堆里，发掘牛粪真是太温暖了。牛粪让它慢慢缓过劲儿来了!它躺在那儿，又暖和又开心，不久就开始高兴地唱起歌来了。一只路过的猫听到了小鸟的歌声，走过来查个究竟。顺着声音，猫发现了躲在牛粪中的小鸟，非常敏捷地将它刨了出来，并将它给吃了!

职场休闲
面试一则

今天去面商飞了.....一面出来比较沮丧，估计没戏....谁知刚面完，没精打采地吃完午饭...回到宿舍，没精打采地躺倒床上，闭上眼睛养了会神......突然手机滴噜噜像起来...随手翻开一看，号码好像见过>>>.MS是商飞招聘组的电话.......一阵兴奋，不过还不知道是好消息还是坏消息...."你好"“是***吗？”“是的”“你好，我是

面试职场找工作 IT职场休闲
备注一则

今天不少大事儿。Linux要20周年了。（虽然最早的代码好像都是92年左右公开的，不过这种细节都无所谓啦）金山整合了驱动之家。永中要宣告破产了。360浏览器要跑Chrome插件了。这事儿貌似以前听Google工程师说过，不过以前一直偷偷摸摸的，现在居然闹这么大动静。来不及写东西，先扔这里做个备注吧。明天，又是一年QCon大会。说来我加入51CTO其实是两年多，但总觉得是

职场休闲 QCon 备注
cdh4 ha (hadoop-2.0.0-cdh4.1.2.tar.gz)

$HADOOP_HOME/hdfs/name state: NON_EXISTENT因为没有formatformat时报错连接不上From all of your JN : sudo service hadoop-hdfs-journalnode startor if you deployed using tarball, maybe somethi

hdfs hadoop zookeeper

官方博客	全部文章	热门标签	班级博客
了解我们	网站地图	意见反馈

鸿蒙开发者社区	51CTO学堂
51CTO	软考资讯

CDH4报错一则

CDH4报错一则

51CTO博客