接上：http://onlyoulinux.blog.51cto.com/7941460/1554951上文说到用hadoop2.4.1分布式结合hase0.94.23出现大量的报错，没能解决，最后用新版本hbase0.96.2同样的配置没遇到报错，个人感觉是版本兼容性问题，报错内容如下：2014年 09月 22日 星期一 19:56:03 CST Starting master on nncor
原创
2014-09-27 04:54:12
1417阅读
点赞
1.环境说明[code lang="xml"]centos6.4 64bit[/code]2.更新系统安装包[code lang="xml"]
原创
2022-10-28 06:54:22
63阅读
上一篇介绍了hadoop2.4.1的编译过程，以及hive和spark的编译，这次简单介绍hbase的编译过程。hbase0.98.8默认使用hadoop2.2.0进行编译，笔者的hadoop环境是2.4.1版本，为避免包不一致引发的各种错误，需要对hbase进行重新编译。1、生成编译使用的pom文件 修改$HBASE_HOME/pom.xml,<
原创
2014-12-11 15:35:48
1673阅读
1.准备Linux环境 1.0配置VMware点击VMware快捷方式，右键打开文件所在位置 -> 双击vmnetcfg.exe -> VMnet1 host-only ->修改subnet ip 设置网段：192.168.1.0 子网掩码：255.255.255.0 -> apply -> ok 回到windows --> 打开网络和共享中心 -> 更改适配器设置 ->
原创
2016-04-20 00:32:59
115阅读
1.准备Linux环境 1.0配置VMware点击VMware快捷方式，右键打开文件所在位置 -> 双击vmnetcfg.exe -> VMnet1 host-only ->修改subnet ip 设置网段：192.168.1.0 子网掩码：255.255.255.0 -> apply -> ok 回到windows --> 打开网络和共享中心 -> 更改适配器设置 ->
原创
2022-04-22 17:06:36
85阅读
hadoop2.4.1伪分布模式部署 - wrencai时间 2014-08-08 14:54:33 博客园-所有随笔区原文 http://www.cnblogs.com/wrencai/p/3899375.htmlhadoop2.4.1伪分布模式部署（ 承接上一篇hadoop2.4.1-src的编译安装继续配置 ： http://www.cnblogs.com/wrenc
原创
2015-09-16 17:11:04
561阅读
#关闭防火墙 service iptablesstop1：安装JDK1.1上传jdk-7u_65-i585.tar.gz1.2解压jdk#创建文件夹 mkdir /home/hadoop/app#解压 tar -zxvf jdk-7u55-linux-i586.
原创
2016-11-15 19:11:54
571阅读
第一步配置jdk环境变量[root@xuegod Java]#tar -xf jdk-8u66-linux-x64.tar.gz -C /usr/src/[root@xuegodJava]# cd !$cd /usr/src/[root@xuegod src]#cd jdk1.8.0_66/[root@xuegod jdk1.8.0_66]# vim /etc/profileexport JAVA
原创
2015-12-06 02:49:32
907阅读
1.准备Linux环境 1.0点击VMware快捷方式，右键打开文件所在 -> 双击vmnetcfg.exe -> VMnet1
转载
2022-04-13 11:48:35
37阅读
centos6.5 x86 虚拟机上安装完全分布式hadoop-2.4.1结合hbase-0.94.23一、环境准备：以下3台虚拟机:192.168.1.105 nn namenode1
原创
精选
2014-09-18 22:21:22
1171阅读
点赞
Hadoop HA的实现方式上图大致架构包括：1、 利用共享存储来在两个NN间同步edits信息。以前的HDFS是share nothing but NN，现在NN又share storage，这样其实是转移了单点故障的位置，但中高端的存储设备内部都有各种RAID以及冗余硬件包括电源以及网卡等，比服务器的可靠性还是略有提高。通过NN内部每次元数据变动后的flush操作，加上
原创
精选
2014-07-31 17:20:56
825阅读
注意:所有的安装用普通哟用户安装，所以首先使普通用户可以以sudo执行一些命令: 0.虚拟机中前期的网络配置 1.赋予hadoop用户以sudo执行一些命令 添加下面第二行内容: 登录hadoop用户查看
原创
2021-07-15 14:38:32
223阅读
-----------hadoop编译1、编译环境 CentOS6.5 64位 jdk1.7.0_71 maven-3.2.3 hadoop2.4.12、安装JDK,maven &n
原创
2014-12-10 10:36:32
5839阅读
前期准备就不详细说了，课堂上都介绍了1.修改Linux主机名2.修改IP3.修改主机名和IP的映射关系
转载
2022-03-04 16:59:27
24阅读
1.准备Linux环境 1.0点击VMware快捷方式，右键打开文件所在位置 -> 双击vmnetcfg.e
转载
2022-03-04 17:05:27
20阅读
*****副本存放策略：1、先在客户端所连接的datanode上存放一个副本2、再在另一个机架上选择一个datanode存放第二个副本3、最后在本机架上根据负载情况随机挑选一个datanode存放第三个副本****副本数量的配置优先级1、服务端hdfs-site.xml中可以配置2、在客户端指定dfs.replication的值客户端所指定的值优先级更高!!
原创
2016-05-04 17:57:19
97阅读
*****副本存放策略： 1、先在客户端所连接的datanode上存放一个副本 2、再在另一个机架上选择一个datanode存放第二个副本 3、最后在本机架上根据负载情况随机挑选一个datanode存放第三个副本 ****副本数量的配置优先级 1、服务端hdfs-site.xml中可以配置 2、在客户端指定dfs.replication的值 客户端所指定的值优先级更高!!! ****DataNo
原创
2022-04-09 14:06:34
60阅读
Hadoop-2.4.1安装配置 1、下载地址 http://mirrors.hust.edu.cn/apache/hadoop/common/hadoop-2.4.1/ linux命令下具体操作如下：wget http://mirrors.hust.edu.cn/apache/hadoop/common/hadoop-2.4.1/hadoop-2.4.
转载
精选
2015-09-16 17:09:11
986阅读
测试环境介绍：Hadoop 1.0.3 升级到Hadoop2.4.1 当前老环境（三副本环境）：Namenode 192.168.1.10Datanode 192.168.1.11 （SecondNamenode）Datanode 192.168.1.12
原创
2014-08-12 16:13:30
1549阅读
hadoop2.4.1+hbase0.98.3实现的分布式网盘系统初步
原创
2014-08-02 17:40:14
1094阅读
