用到的软件： 一、安装jdk： 1、要安装的jdk，我把它拷在了共享文件夹里面。 （用优盘拷也可以） 2、我把jdk拷在了用户文件夹下面。 （其他地方也可以，不过路径要相应改变） 3、执行复制安装解压命令： 解压完毕： 查看解压的文件夹： 4、配置 环境变量： 写入如下5行代码： 使配置生效： 5、
原创
2021-07-08 17:09:05
163阅读
声明：本文面向有linux基础的大数据初学者，因好多配置都可以单独出一篇文章，如写的过于详细篇幅较大对阅读和操作会带来负面影响，如遇到问题可以自行百度或加文章末尾留的QQ群探讨。整体流程如图：准备工作：下载hadoop-2.6.0.tar.gz http://mirror.bit.edu.cn/apache/hadoop/common/hadoop-2.6.0/ 下载jdk-7u55-
原创
精选
2016-10-19 22:32:35
1257阅读
点赞
由于下载的是hadoop的最新版，网上各种杂七杂八的东西都不适用。好在官网上说的也够清楚了。如果有人看这篇文章的话，最大的忠告就是看官网。官网2.6.0的安装教程：http://hadoop.apache.org/docs/r2.6.0/hadoop-project-dist/hadoop-comm...
转载
2014-12-04 22:40:00
118阅读
2评论
Hadoop2.6.0的所有Java API都在http://hadoop.apach 件的例子。参照《实践Hadoop》(刘鹏) 书中的第50页。利用FileSys...
转载
2014-12-29 15:05:00
162阅读
2评论
下载安装下载网址： http://archive.cloudera.com/cdh5/cdh/5/首先先下载安装包：我的版本是：hadoop-2.6.0-cdh5.15.1所以下载地址是： http://archive.cloudera.com/cdh5/cdh/5/hadoop-2.6.0-cdh5.15.1.tar.gz
下载完后解压：tar xvf hadoop-2.6.0-cdh5.15.
转载
2023-06-21 16:46:34
587阅读
介绍通过hdfs shell和java api两种方式操作hdfs
原创
2015-07-19 12:39:59
9499阅读
如何编译Apache Hadoop2.6.0源代码 1．安装CentOS 我使用的是CentOS6.5，下载地址是http://mirror.neu.edu.cn/centos/6.5/isos/x86_64/，选择CentOS-6.5-x86_64-bin-DVD1.iso 下载，注意是64位的，
原创
2021-07-29 10:58:54
506阅读
Hadoop2.6.0学习笔记（一）MapReduce介绍
原创
2015-07-19 22:02:07
1922阅读
转载自：http://dblab.xmu.edu.cn/blog/install-hadoop-in-centos/本 Hadoop 教程由厦门大学数据库实验室出品，转载请注明。本教程适合于在 CentOS 6.x 系统中安装原生 Hadoop 2，适用于Hadoop 2.7.1, Hadoop 2.6.0 等版本，主要参考了官方安装教程，步骤详细，辅以适当说明，相信按照步骤来，都能顺
转载
2021-08-17 21:02:38
182阅读
Hadoop2.6.0学习笔记（七）MapReduce分区
原创
2015-12-05 19:23:31
6594阅读
Hadoop Two HA: ActiveStandbyElector
转载
精选
2015-08-06 11:46:36
5538阅读
点赞
Hadoop2.6.0学习笔记（三）Hadoop序列化
原创
2015-11-29 10:47:03
1569阅读
将2.6.0tar.gz上传到 / usr , cchmod -R hadoop:hadop hadoop-2.6.0 ， 配置 /etc/profile2. java的环境配置 , hadoop环境配置ssh免密登录配置 （查看之前记录）3. 配置文件hadoop-env.sh中配置java环境core-sit.xmlhdfs-site.xml4.格式化文件系统# had
翻译
2018-07-23 22:27:11
1640阅读
Hadoop2.6.0学习笔记（五）MapReduce实现TopN
原创
2015-08-05 22:36:57
2691阅读
原本的目的是想模拟一个流的上传过程，就是一边生成数据，一边存储数据，因为能用上HADOOP通常情况下原本数据的大小就大到本地硬盘存不下。这一般是通过把数据先一部分一部分的缓冲到本地的某个文件夹下，hdfs把缓冲文件夹中的文件一点一点上传，并把上传了的缓冲文件删除。 我这里没有实现数据的分次生成...
转载
2014-12-31 10:33:00
87阅读
2评论
Hadoop2.6.0学习笔记（七）HDFS读写流程
原创
2015-11-28 22:02:27
1498阅读
之前跑了一下hadoop里面自带的例子，现在顺一下如何通过源代码来运行程序。我懒得装eclipse,就全部用命令行了。整体参考官网上的：http://hadoop.apache.org/docs/r2.6.0/hadoop-mapreduce-client/hadoop-mapreduce-clie...
转载
2014-12-27 16:36:00
58阅读
2评论
Hadoop2.6.0学习笔记（八）InputFormat和OutputFormat
原创
2015-12-07 17:49:41
2292阅读
