Hadoop 实例练习 二：数据去重； 主要思想：MapReduce会将相同key值得<key，value>对发送至同一台Reducer机器上进行处理
Hadoop之SecondaryNameNode介绍
Hadoop端口和管理界面
实现目标：在对文档进行单词词频计算的同时，对输出结果按单词的词频进行排序设计思路：用一个并行计算任务显然是无法同时完成单词词频统计和排序的。为什么无法同时完成呢？想一下单词词频统计任务的MapReduce过程：在Map阶段，Mapper将作为输入的n个文档分割为对应的n（或n个以上）个InputSplits，每个InputSplits分配给一个Mapper--> 调用RecordReader
发现一篇好的博客：http://blog.csdn.net/luyee2010/article/category/1311168mapreduce的过程写的很好：http://blog.csdn.net/luyee2010/article/details/8623124mapreduce实例练习：http://www.cnblogs.com/xia520pi/archive/2012/06/04/
原文地址：http://blog.csdn.net/liuxiaochen123/article/details/8786715其他好的参考文献：http://www.ibm.com/developerworks/cn/opensource/os-cn-hadoop2/index.html1、MapReduce理论简介 1.1 MapReduce编程模型MapReduce采用"分而治之"
Hadoop的数据类型
1、Hadoop开发环境简介1.1 Hadoop集群简介Java版本：jdk-6u31-linux-i586.binLinux系统：CentOS6.0Hadoop版本：hadoop-1.0.0.tar.gz1.2 Windows开发简介Java版本：jdk-6u31-windows-i586.exeWin系统：Windows 7 旗舰版Eclipse软件：eclipse-jee-indigo-SR
Hadoop的常用命令
Hadoop正常启动，所有服务：namenode，datanode，jobtracker，tasktracker都正常启动运行。且执行hadoop其他命令如-ls，-rm，-mkdir等都正常运行。就是执行hadoop fs -put test.txt input命令时失败，出错信息： could only be replicated to 0 nodes,instead of 1 call to Namenode/192.168.101.135:9000 failed on local exception:java.net.NoRouteToHostException:没有到主机的路由
Vsphere是Vmware公司推出的一套服务器虚拟化解决方案，下面的介绍都是基于安装好的Vsphere平台进行的，这里不介绍Vsphere的安装。 使用的过程大概分为几步：登陆Vsphere-->构建资源池和创建虚拟机-->配置虚拟机-->安装操作系统-->启动。
Copyright © 2005-2024 51CTO.COM 版权所有 京ICP证060544号
