继phpHiveAdmin之后,推出第二个开源项目:EasyHadoop。和phpHiveAdmin一样,EasyHadoop也是个为懒惰而生的项目。简而言之,就是在一个网页上对Hadoop集群进行安装,重启,修改配置文件,查看log等功能。后续还会加入hive,hbase,pig之类的。当然,Cloudera Manager是个不错的选择,不过一旦集群数量超过50,当然仍然可以使用hadoop,
推荐
原创
2012-09-04 20:53:49
7648阅读
点赞
17评论
版本:easyhadoop 1.2.1,操作系统:Centos 6.4;首先,我要说的是要用对版
转载
2013-09-26 22:27:00
192阅读
2012-04-14,在北航主南203,第二次easyhadoop开发者聚会核心主题:Hadoop高可用和性能调优和Hadoop相关软件发布. 网站:www.easyhadoop.com EasyHadoop 交流群:930869301.Hadoop 国内外应用,带EasyHadoop v2.0 介绍 [暴风-xiaojun] 2.Hadoop系统监控和Hive负载均衡,带phpHive
原创
2012-04-15 02:07:52
2833阅读
点赞
1评论
之前一直忙于写代码,也没有整理一下思路来做一个技术点的分享,也该整理一下技术相关的东西。分两篇吧,一篇太长了也不利于阅读,废话写多了,大家看着困。当然我的技术水平也很烂,懂行的不要见笑就好了。第一篇写EasyHadoop,第二篇写phpHiveAdminEasyHadoop最早只是一个hadoop的安装Shell脚本,这就没有什么可说的了,界面化的分布式安装还有有些知识点可以总结和分享下的,或许能
推荐
原创
2012-11-14 18:05:31
5319阅读
点赞
1评论
一、集群安装监控和管理模块一 EasyHadoop集群入门 ·Hadoop暴风应用案例 http://tech.watchstor.com/spec/salon/20120512/#585565-baidu-1-49444-69d7345a4fe33e9a9d9dabb775dd2d10 ·EasyHadoop Manager安装及部署 模块二 Had
现在easyhadoop用户逐渐多了,对技术架构和实现感兴趣的人也多了,看到easyhadoop这套管理平台以后会问,我们公司没有这个东西,我想用,或者我已经用了,然后我也想自己用java或者其他语言尝试实现一套类似easyhadoop这样的工作系统,都有什么需要了解的技术关键点?我在这里写一下几个关键点,一来算解答问题了,二来也算是对自己工作的一个回顾。表面上看,是一套基于B/S方式实现的分布式
推荐
原创
2013-06-05 17:28:14
9455阅读
点赞
8评论
随着Hadoop的推出,大数据处理实现了技术上的落地。但是对于一般的公司和开发者而言,Hadoop依旧是一个陌生或者难以使用的技术。这次的阿里云开发者大会上,向磊凭借EasyHadoop将Hadoop平民化而获得了最佳创意奖,InfoQ对他进行了采访。InfoQ: 首先请您做下自我介绍并介绍本次的参赛作品EasyHadoop?向磊:大家好,我是向磊,本次阿里云开发者大赛最佳创意奖作品EasyHad
抽空用php写了一个基于Hive的查询工具,公司内部使用反响比较好,胡乱填了一些东西之后,将其开源,贡献给需要的人。本项目遵循GPL3许可协议,欢迎有志者加入github共同完善。加上以公司数据组名义贡献的开源脚本easyhadoop,一键安装hadoop脚本。详细软件信息访问phpHiveAdmin 和 github 或者 googlecode安装说明1: 运行"git cl
推荐
原创
2012-02-06 16:13:15
9133阅读
点赞
17评论
不多说,直接上干货! 1.什么是Ambari? 2.Ambari项目是由哪几部分构成的? 3.Ambari系统架构是如何组成的? 前言 Hadoop集群的管控一直是一个热门的话题,对于这样的一个应用场景,我所知道国内很早就有人研究并且取得不错的成绩,这就是EasyHadoop。它的功能主要有
转载
2023-12-31 19:28:09
63阅读
其实也是在easyhadoop做第二次重构的时候用到了这个嵌入式的webserver去做服务器状态的监控,可以单独摘出来写个东西。思路主要是用python脚本获取linux服务器的各种状态信息,然后用webserver的方式,以json数据发给http,主控节点去读取webserver返回的json,生成系统监控报表。代码简单,开发和部署都很方便。用到的主要东西是python的第三方嵌入式web模
推荐
原创
2013-05-23 14:42:11
3704阅读
点赞
3评论
1.本站不保证该用户上传的文档完整性,不预览、不比对内容而直接下载产生的反悔问题本站不予受理。2.该文档所得收入(下载+内容+预览三)归上传者、原创者。3.登录后可充值,立即自动返金币,充值渠道很便利Python&Hadoop构建数据仓库从开源中来 到开源中去,EasyHadoop 童小军tongxiaojun@2012年10年20日演讲大纲• 个人介绍• 思考数据分析系统的基本指标• H
转载
2024-08-02 11:32:53
41阅读
Hadoop集群的管控一直是一个热门的话题,对于这样的一个应用场景,很早就有人研究并且取得不错的成绩,这就是EasyHadoop。它的功能主要有集群安装,管理,监控等功能,国外的Ambari是Apache的顶级项目,现在是大数据新贵Hortonworks公司在推进的项目Ambari,这款软件具有集群自动化安装、中心化管理、集群监控、报警等功能,使得安装集群从几天的时间缩短在几小时以内,运维人员从数
转载
2023-10-15 17:26:35
153阅读
这些日子一直在写新版EasyHadoop的代码,疏于写博,好在终于赶在耶稣出生之前之前把1.1.1版本的发布代码提交到了github,可以轻松一下了,抽时间写个东西,算是补作业吧。
其实我也不是一个特别会写东西的人,今年能在51cto获此殊荣,对我来说的确是受宠若惊。
关于坚持:
总结下来,厚着脸皮自夸的说算是个厚积的过程吧。我是个老程序员了,当我去参加阿里云大赛得知获奖选手中最年轻的孩子是
推荐
原创
2012-12-24 21:15:35
3316阅读
点赞
13评论
2012年11月7日去杭州参加了阿里云开发者大赛,凭借EasyHadoop和phpHiveAdmin十分幸运的从数千名参赛者中脱颖而出获得了二等奖中的最佳创意奖。之前是一个同事告诉我,阿里云在搞开发者大赛,于是就报名参加了一下。之后再也没有上去看过,直到有一天,突然接到阿里云打来的电话,说我的作品成功入围20强,问我是否有时间去杭州参加颁奖,于是就订了11月7日赴杭州的机票。这里不得不说,阿里云的
推荐
原创
2012-11-12 17:35:13
4745阅读
点赞
20评论
有人说:金秋十月是个丰收的季节,11月亦是。11月9日,51CTO博主向磊在首届阿里云开发者大赛中获得二等奖。真是一个让所有博主都为之高兴的好消息。
阿里云开发者大会一年一度,备受技术人的关注,而今年首届阿里云开发者大赛更是吸引了几千名技术爱好者参加。51CTO博主向磊从众多参赛者中脱颖而出,凭借作品“EasyHadoop”获得了二等奖(最佳创意奖,奖金5万元)。
原创
2012-11-13 10:09:38
3660阅读
点赞