介绍 Spring for apache hadoop(1)
原创duanyaji11 ©著作权
©著作权归作者所有:来自51CTO博客作者duanyaji11的原创作品,请联系作者获取转载授权,否则将追究法律责任
今天看到一篇关于spring 支持 hadoop 开发的消息,心里小小的激动了一下,
毕竟在强大的spring 的IOC 容器辅助下,相信hadoop 的开发会变得更加的容易
有趣。
首先我们来看看在spring 里面是怎么利用依赖注入的思想完成word count的小例子的
MapReduce 作业
从这里我们可以清晰的看出整个过程是非常的清晰的。我们不得不为这种创造性的改进
而感到无比的欣喜。
而关于hadoop 的一些相应的属性或环境的配置也是相当的方便和灵活的
我们就可以通过这种方式写出没有java代码的MapReduce,我们甚至可以根据自己的喜好
来配置我们的属性而不必担心集成问题
而对于Apache Hadoop Tool 配置起来也是相当容易
同时,让我们惊喜的是,srping for hadoop 对Habse/Hive/pig也有很好的支持
提问和评论都可以,用心的回复会被更多人看到
评论
发布评论
相关文章
-
Apache Hadoop 简单配置及实践
Leave a replyApache Hadoop 是一个分布式计算基础框架,通过它可
操作系统 运维 java Hadoop hadoop -
Hadoop技术之Apache Hadoop集群搭建Apache Hadoop概述
duce模块配置yarn-site.xml yarn模块配置第三类1个: workers。......
hadoop apache 大数据 Hadoop xml -
实践:使用 Apache Hadoop 处理日志
使用典型 Linux 系统上的 Hadoop 从日志中提取有用数据M. Tim Jones, 独立作家, 顾问简介: 日志是任何计算系统中一个必不可少的部分,支持从审计到错误管理等功能。随着日志的发展和日志来源数...
hadoop hdfs 应用程序 mapreduce python