1、启动yarn时报Error: JAVA_HOME is not set and could not be found.修改/etc/hadoop/hadoop-env.sh中设JAVA_HOME，应当使用绝对路径。export JAVA_HOME=$JAVA_HOME /
原创
2016-05-10 13:22:22
1551阅读
1.能正常访问bincoding.cn:50030，不能连接到9000端口 Call to bincoding.cn/123.206.212.115:9000 failed on connection exception: java.net.ConnectException: Connection
原创
2022-03-11 13:56:22
126阅读
以下为本人在学习hadoop过程中遇到问题，在此做下总结方便以后查阅，同时也希望对大家有所帮助；1、启动hadoop时没有NameNode的可能原因：（1） NameNode没有格式化（2） 环境变量配置错误（3） Ip和hostname绑定失败2、地址占用报错：org.apache.hadoop.hdfs.server.namenode.NameNode: 
转载
2023-08-04 11:23:09
59阅读
博客：liping博文：hadoop关于处理大量小文件的问题和解决方法 博文：hadoop无法解决的问题博客：Idmer 数据挖掘者从数据中获取价值！欢迎探讨一切关于数据挖掘、商业智能、商业分析、行业应用方面的问题……博文：数据挖掘中易犯10大错误博文：数据挖掘学习和研究的一些指导性建议汇总
原创
2014-06-29 20:54:11
523阅读
一、环境介绍：1、系统：Debian8.12、JAVA：jdk1.7.0_803、Hadoop：2.6.0-cdh5.15.1Compiledwithprotoc2.5.0二、架构介绍1、双namenode+zookeeper集群的HA使用sshfencingHAnamenode介绍：Namenode管理者文件系统的Namespace。它维护着文件系统树(filesystemtree)以及文件树中
原创
2018-08-29 17:35:15
4149阅读
先给大家来一个亲测可用的hadoop3.2.0下载地址，直接shell：wget http://mirrors.hust.edu.cn/apache/hadoop/core/stable/hadoop-3.2.0.tar.gz写一些我在安装hadoop时碰到的一些问题。1.启动hadoop报找不到jdk error。但是我也忘了jdk安装在哪里，查找资料后用whereis java 命令得到超链接
1.datanode节点TaskTracker任务启动，但是DataNode任务未启动 这一般是由于对hadoop进行升级后导致的，需要删除hadoop.tmp.dir所对应的文件夹，然后再对namenode进行重新格式化，删除之前先将数据导出，要不然数据就没了 2./lib/ld-linux.so.2: bad ELF interpreter: 没有那个文件或目录 缺少 glibc
转载
2023-07-12 12:38:22
226阅读
1、搭建Hadoop单节点集群遇到namenode或datanode启动不起来的问题。 可能原因：多次格式化namenode导致datanode与namenode之间的id不一致 原因分析：执行文件系统格式化时，会在namenode数据文件夹（即配置文件中dfs.name.dir在本地系统的路径）中保存一个current/VERSION文件，记录name
通过ambari工具搭建了hadoop2.0完全分布式集群。Hive无法连接mysql。
在测试hive的时候，按照官方文档里的说明通过下面命令检查根目录的时候：总是报错无法连接mysql。检查发现ambari的web配置界面里添加连接mysql的密码配置不生效。服务器配置文件中没有相应的密码配置字段。
原创
2014-02-20 14:35:47
8441阅读
点赞
1评论
hadoop配置遇到问题
1#name节点无法正常启动
tail -f /home/hadoop/hadoop/logs/hadoop-ha
原创
2013-03-20 18:24:57
1302阅读
hadoop配置遇到问题 1#name节点无法正常启
原创
2013-03-20 18:24:57
106阅读
虽然基本上所有的问题解决方案都是网上查到的，但是，为了避免重复劳动，我还是决定攒一份自己的使用日志~
原创
2013-08-28 16:38:46
2609阅读
hadoop MapReduce初试遇到的问题./hadoop jar ./MapReduce-jar-with-dependencies.jar com.hc360.mp.WordCountHbaseReader /user/hbase/tabelname01 tablename在hadoop集群上执行 MapReduce任务时，需要用到许多依赖jar，一般情况下都是在执行时，在执行命令上进行配
原创
2016-07-20 11:43:23
1732阅读
一.在root下进行格式化这样很糟糕 这样的话，若是第一次装的话，我的建议是将生成的文件都删掉，恢复到最开始的状态，1. 首先你需要删除vi conf/hdfs-site.xml 配置文件的dfs.name.dir和dfs.data.di的路径位置，我的是：/home/hadoop/dfs 故为：rm -rf /home/hadoop/dfs
转载
2023-05-29 15:40:26
148阅读
yum install -y gcc gcc-c++ make zlib zlib-devel pcre pcre-devel libjpeg libjpeg-devel libpng libpng-devel freetype freetype-devel libxml2 libxml2-devel glibc glibc-devel glib2 glib2-devel
转载
精选
2015-08-30 22:30:36
450阅读
安装zeromq-3.2.5./configureyum install gcc-c++
原创
2016-09-08 15:55:17
769阅读
Checking monitor: must be configured to display at least 256 colors >>> Could not execute auto check for display colors using command /usr/openwin/bin/xdpyinfo. Check if the DISPLAY variable
转载
2017-06-09 00:15:16
870阅读
apt-get clean apt-get autoremove
转载
2018-08-17 11:30:00
61阅读
2评论
在安装Yeoman遇到了一些报错，具体的步骤就不多说了，直接上码,具体的两处报错的地方。 第一个，创建webapp，直接报权限的错误，这时才留意到在它之前还有一个错误。 前一个错误，再安装yeoman时，报的错误如下。 没办法，只能各种搜索，各种重装，最后发现原先的nodejs、npm版本有些老了，
转载
2018-01-18 10:10:00
132阅读
2评论
