2014年9月30日,2014 Spark开发者大赛在北京正式启动。本次大赛由Spark亚太研究院联合国内领先的IT技术创新与发展的互联网媒体平台51CTO传媒及国内最大的IT在线教育平台51CTO学院在亚太范围内发起。面向云计算大数据从业者、Spark技术爱好者及数百所高校在读学生。无论是对Spark有浓厚兴趣的初学者、或者Spark应用高手,还是Spark源码级别大牛,都可以借助本次大赛,一展才华,就Spark技术与应用实践展开交流及切磋。
Spark是当今大数据领域最活跃最热门的高效的大数据通用计算平台,基于RDD,Spark成功的构建起了一体化、多元化的大数据处理体系,在“One Stack to rule them all”思想的引领下,Spark成功的使用Spark SQL、Spark Streaming、MLLib、GraphX近乎完美的解决了大数据中Batch Processing、Streaming Processing、Ad-hoc Query等三大核心问题,更为美妙的是在Spark中Spark SQL、Spark Streaming、MLLib、GraphX四大子框架和库之间可以无缝的共享数据和操作,这是当今任何大数据平台都无可匹敌的优势。在实际的生产环境中世界上已经出现很多一千个以上节点的Spark集群,以eBay为例,eBay的Spark集群节点已经超过2000个,Yahoo!等公司也在大规模的使用Spark,国内的淘宝、腾讯、百度、网易、京东、华为、大众点评、优酷土豆等也在生产环境下深度使用Spark。从2014 Spark Summit上官方发布的信息可知Spark已经获得世界20家顶级公司的支持,这些公司中包括Intel、IBM等,同时必须强调的是包括最大的四大Hadoop发行商都提供了对Spark非常强有力的支持,尤其是世界头号Hadoop发行商Cloudera已经公开表明除了Impala,一切技术和业务皆转向Spark! 与Spark火爆程度形成鲜明对比的是Spark人才的严重稀缺,这一情况在国内尤其严重。主办方希望通过举办本次大赛,能够将Spark相关产品和技术最大程度地在开发者中传播和推广,吸引和鼓励更多的开发者借助Spark技术,进行应用开发。同时本届大赛还将在全国百所高校进行推广,帮助更多的学生从校园开始就了解、学习和掌握Spark相关技术和知识,并努力培养出一批Spark相关产品和技术的忠实粉丝,当他们走出校园、走入市场后,便能直接和间接地成为有利于Spark技术的有生力量。通过参加本次大赛,让优秀开发者得到展示自身能力的机会,部分优秀的作品还可能得到业界的关注并通过后续合作开发形成生产力、产生商业价值。
大赛详细信息:
一、大赛主题:发现最有正能量的网络达人
世界之大,藏龙卧虎,在每个领域都有最有影响力的人,也许他们不是家喻户晓,但是他们一定是对我们今天的生活产生过巨大影响的人。也许10年以前,想发现他们并不是件容易的事,但是近十年,互联网技术的惊人发展,已经改变了我们生活的方方面面,在线视频,博客,RSS,微信、微博、社交网等也跟着互联网的脚步发生巨大飞跃,如何在互联网庞大的信息和数据中,发现这些“正能量、最具影响力”的人?让他们的价值公诸于世,让他们被更多人所认识和了解?大数据背后,技术是根本,借助本次大赛,通过Spark技术,发现这些“正能量”网络达人。
使用Spark技术及算法实现最快速的精准找出整个互联网(或某领域)最有正能量影响力的人,例如您使用Spark技术及算法找出整个互联网最有影响力的技术传播者、也可以找出当今世界最有影响力的大学生或者研究者……
二、报名及作品提交(9月30日—10月31日)
1. 登录大赛官网 http://www.sparkinchina.com/meeting/2014yt/dhhd.asp ,了解赛制及规则。并点击我要参赛并下载参赛报名表,报名参加大赛。报名截止日期为10月25日。
作品提交方式:在大赛官网上点击作品提交,向组委会直接提交参赛作品。或者将(设计文档、代码及使用数据、视频)通过百度网盘上传,并将用户名、密码发送至大赛作品提交专用邮箱conteste@sparkinchina.com。 参赛作品第一次提交截止时间为10月31日。
提交作品时,需将大赛报名表一并提交,否则视为无效。
赛制将采用晋级赛,分别评出32强、8强、4强,并最终评选出冠、亚、季军。
三、作品评审
1. 10月31日前:第一次算法和作品提交
2. 10月31--11月10日,作品初选32强出炉
3. 11月10--20日 第二次算法和代码提交
4. 11月20--27日 专家评审团筛选出8强,并给8强提出问题和改进建议
5. 11月27--30日 第三次算法和代码提交
6. 12月3日:4强出炉,通过答辩,评选出冠、亚、季军。
四、结果公布
最终比赛结果及获奖名单将在2014年Spark亚太峰会、大赛官网、Spark亚太研究院官方微博、微信公众号、及合作媒体等渠道公布。
关注Spark亚太研究院,了解更多精彩内容。
微信号:spark-china
网址:www.sparkinchina.com
交流群号:1群:317540673 2群:297931500
Spark亚太研究院近期活动:
决胜云计算大数据时代--Spark亚太研究院100期公益大讲堂
每周四晚 20:00--21:30
报名地址:http://ke.qq.com/cgi-bin/courseDetail?course_id=6167