Hadoop Two HA: ActiveStandbyElector
转载
精选
2015-08-06 11:46:36
5538阅读
点赞
声明：本文面向有linux基础的大数据初学者，因好多配置都可以单独出一篇文章，如写的过于详细篇幅较大对阅读和操作会带来负面影响，如遇到问题可以自行百度或加文章末尾留的QQ群探讨。整体流程如图：准备工作：下载hadoop-2.6.0.tar.gz http://mirror.bit.edu.cn/apache/hadoop/common/hadoop-2.6.0/ 下载jdk-7u55-
原创
精选
2016-10-19 22:32:35
1257阅读
点赞
由于下载的是hadoop的最新版，网上各种杂七杂八的东西都不适用。好在官网上说的也够清楚了。如果有人看这篇文章的话，最大的忠告就是看官网。官网2.6.0的安装教程：http://hadoop.apache.org/docs/r2.6.0/hadoop-project-dist/hadoop-comm...
转载
2014-12-04 22:40:00
118阅读
2评论
Hadoop2.6.0的所有Java API都在http://hadoop.apach 件的例子。参照《实践Hadoop》(刘鹏) 书中的第50页。利用FileSys...
转载
2014-12-29 15:05:00
162阅读
2评论
用到的软件： 一、安装jdk： 1、要安装的jdk，我把它拷在了共享文件夹里面。 （用优盘拷也可以） 2、我把jdk拷在了用户文件夹下面。 （其他地方也可以，不过路径要相应改变） 3、执行复制安装解压命令： 解压完毕： 查看解压的文件夹： 4、配置 环境变量： 写入如下5行代码： 使配置生效： 5、
原创
2021-07-08 17:09:05
163阅读
下载安装下载网址： http://archive.cloudera.com/cdh5/cdh/5/首先先下载安装包：我的版本是：hadoop-2.6.0-cdh5.15.1所以下载地址是： http://archive.cloudera.com/cdh5/cdh/5/hadoop-2.6.0-cdh5.15.1.tar.gz
下载完后解压：tar xvf hadoop-2.6.0-cdh5.15.
转载
2023-06-21 16:46:34
584阅读
Hadoop2.6.0学习笔记（一）MapReduce介绍
原创
2015-07-19 22:02:07
1922阅读
介绍通过hdfs shell和java api两种方式操作hdfs
原创
2015-07-19 12:39:59
9499阅读
如何编译Apache Hadoop2.6.0源代码 1．安装CentOS 我使用的是CentOS6.5，下载地址是http://mirror.neu.edu.cn/centos/6.5/isos/x86_64/，选择CentOS-6.5-x86_64-bin-DVD1.iso 下载，注意是64位的，
原创
2021-07-29 10:58:54
506阅读
Hadoop2.6.0学习笔记（七）MapReduce分区
原创
2015-12-05 19:23:31
6594阅读
Hadoop2.6.0学习笔记（三）Hadoop序列化
原创
2015-11-29 10:47:03
1569阅读
Hadoop2.6.0学习笔记（七）HDFS读写流程
原创
2015-11-28 22:02:27
1498阅读
Hadoop2.6.0学习笔记（五）MapReduce实现TopN
原创
2015-08-05 22:36:57
2691阅读
原本的目的是想模拟一个流的上传过程，就是一边生成数据，一边存储数据，因为能用上HADOOP通常情况下原本数据的大小就大到本地硬盘存不下。这一般是通过把数据先一部分一部分的缓冲到本地的某个文件夹下，hdfs把缓冲文件夹中的文件一点一点上传，并把上传了的缓冲文件删除。 我这里没有实现数据的分次生成...
转载
2014-12-31 10:33:00
87阅读
2评论
之前跑了一下hadoop里面自带的例子，现在顺一下如何通过源代码来运行程序。我懒得装eclipse,就全部用命令行了。整体参考官网上的：http://hadoop.apache.org/docs/r2.6.0/hadoop-mapreduce-client/hadoop-mapreduce-clie...
转载
2014-12-27 16:36:00
58阅读
2评论
Hadoop2.6.0学习笔记（八）InputFormat和OutputFormat
原创
2015-12-07 17:49:41
2292阅读
想实现书上倒排索引的例子，但是我不会java想用C++写，如果用hadoop streaming 那么输入必须是标准输入的形式， 那么我怎么获得每个文件的文件名呢？查了一下，还有一种方法叫做hadoop pipes 也是可以用来支持C++的，但是怎么用我还不懂
转载
2015-01-16 13:48:00
88阅读
2评论
想自己走一遍从代码到运行的流程，结果各种错，郁闷啊。问题①http://localhost:50070/ 里面一进去就告诉我块丢了....解决：bin/hadoop fsck -delete删除所有有问题的内容
转载
2014-12-27 16:16:00
157阅读
2评论
