鉴于Spark的巨大价值和潜力，同时由于国内极度缺乏Spark人才，Spark亚太研究院在完成了对Spark源码的彻底研究的同时，不断在实际环境中使用Spark的各种特性的基础之上，推出了《Spark亚太研究院决胜大数据时代100期公益大讲堂》，希望能够帮助大家了解Spark的技术，感兴趣的童鞋速来报名吧！【第三期时间】 本周
原创
2014-07-08 14:38:34
721阅读
人生在世，天灾人祸难挡，当我们享受着平静生活的时候，也许在你不知道的地方，我们的同胞，正遭受着磨难。虽然我们不能亲自赶赴灾区向受灾的同胞伸出援助之手，但在灾难另一端的我们，却能以另一种方式，尽我们力所能及的事，为灾区贡献自己的一份力量。 「腾讯公益」就是由我们熟知的腾讯出品的一个公益类小程序，旨在提供各种公益项目的捐赠、查看，项目进展反馈等服务，凝点滴之爱，汇聚成江流，共同温暖世界。首页是各种公
原创
2021-02-25 21:02:09
893阅读
人生在世，天灾人祸难挡，当我们享受着平静生活的时候，也许在你不知道的地方，我们的同胞，正遭受着磨难。虽然我们不能亲自赶赴灾区向受灾的同胞伸出援助之手，但在灾难另一端的我们，却能以另一种方式，尽我们力所能及的事，为灾区贡献自己的一份力量。 「腾讯公益」就是由我们熟知的腾讯出品的一个公益类小程序，旨在提供各种公益项目的捐赠、查看，项目进展反馈等服务，凝点滴之爱，汇聚成江流，...
原创
2022-06-01 19:33:14
944阅读
英雄联盟公益争霸赛—为公益而战一、报名前须知：l 报名时间————3月17日——28日l 报名费每人5元（参赛时队长交给工作人员），登封俱补网吧再补贴5元，八大志愿者协会用于公益事业（为洗马小学添置桌椅等）l 比赛上网费用——参赛者用身份证上网（自费）l 比赛服务器和账号登封俱网吧提供l 比赛时间地点——3月29日开战 （暂定14:00）
原创
2022-04-21 14:38:32
183阅读
大数据啊大数据！浪尖浪尖聊大数据开始本文之前，希望大家参与一下下面的投票。做这个投票的主要原因是最近经常有找浪尖咨询大数据，自学，培训及找工作的事情，问题归类如下：大数据要不要培训自学一段时间，发现很痛苦，没人指导想放弃，培训费用太高了培训发现跟不上，举步维艰培训结束了，为啥面试机会甚少下面分类回答一下。1.大数据需要培训吗？对于java老鸟，因为有比较强的编程经验，可以买点视频或者找大牛付费专栏
原创
2021-03-19 13:47:02
10000+阅读
我上大学时那时候安卓的版本才到安卓4.4,在智能手机出来普及以前,各大网站的数据量并没有那么多,但是随着智能手机的普及,互联网巨头家里的数据呈现几何级增长,像什么微博,微信,视频网站的数据;需要找到合适的存储方式—>>分布式存储架构,可以水平扩展,实现存储数据类型多样化,二维可以实现高容错高吞吐量,轻松实现大文件存储(支持P级别的
原创
2023-03-15 11:01:42
328阅读
1.大数据对思维方式的影响是使得分析全样而非抽样、效率而非精准、相关而非因果。 2.区别：大数据侧重于对海量数据的存储、处理与分析，从海量数据中发现价值，服务于生产和生活；云计算本质上旨在整合和优化各种IT资源，并通过网络以服务的方式廉价地提供给用户；物联网的发展目标是 实现物物相连，应用创新是物联网发展的核心。 联系：从整体上看
最近这一周主要在琢磨企业的公益活动该如何开展。这主要是缘于大老板（董事长）他最近交待给我的一项任务：他希望市场部能更好地开展企业的公益捐助工作，并要我在11月份给他提交一份关于本财年公益活动的一份计划。
对于企业的公益活动的开展，我的认识很是粗浅，而且没有把企业公益行为完全提升到战略、品牌建设这个阵营里来。其实公司在公益活动上一直都有所作为的，比如：曾经捐助过贫困山区的2所希望小
原创
2007-11-05 20:16:13
431阅读
2评论
昨晚收到一条短信，大致是说回复数字多少，就给西部母亲水窖工程捐款多少。一开始以为骗人的呢，后来几经查找，发现不是，于是按照提示回复了一个数字。
8858中国儿童基金会手机公益短信捐款
8899中国残疾人联合会手机短信捐款
5838全国妇联捐助贫困母亲手机短信捐款
8595中华健康快车基金会扶贫治盲手机短信捐款
9993中国红十字会手机短信捐款
10660888中华环保联合会手机短信
原创
2007-11-19 21:04:34
479阅读
大数据生态系统不断涌现，新技术迅速出现，其中许多根据IT行业的需求而扩展。这些技术可确保协调工作，通过这些工具和技术，大数据可以实现飞跃式发展。什么是大数据技术？首先，需要了解什么是大数据，其实大数据是一种特定的描述，用于描述庞大的数据集合，这些数据的规模巨大，并且随着时间呈指数增长。它只是指定了难以使用常规管理工具进行存储，查询和转换的大量数据。实际上，大数据技术是一种结合了数据挖掘，数据存储，
一、大数据技术的发展的三个阶段 1. 存起来-等待机遇2009年开始BAT大力发展Hadoop技术，这个期间主要解决海量数据的存储与简单分析问题。既然大数据有价值，那么就先将数据存起来。要发挥数据的价值，我们先要有数据。网站浏览点击行为日志存储简单的PV与UV统计，满足基本需求更注重存储能力、集群规模、扩展能力2.用起来-市场化开始注重对大数据的整合，构成全角度的数据。Hive技术的兴起，目前阿里
高并发场景淘宝双十一春运抢票微博大V热点信息疫情口罩抢购系统秒杀活动系统高并发系统特点大流量PV：page view，某个页面浏览量或点击量。UV：unique visitor，通过互联网访问、浏览某个网页的自然人。IP：Internet Protocol，独立IP是指访问过某站点的IP总数，以用户的IP地址作为统计依据。VV：visit view，访客一天内访问网站的次数。当访客完成所有浏览并最
今天听了一场报告会，是清华计算机系60周年系列讲座之一，主讲人是哈工大软院院长李建中教授，主题《计算和数据资源受限的大数据计算的复杂性理论与高效算法研究》，李老师介绍的大数据计算理论体系很...
原创
2022-04-29 22:22:20
1969阅读
大数据框架 系统平台 Hadoop、CDH、HDP 监控管理 CM、Hue、Ambari、Dr.Elephant、Ganglia、Zabbix、Eagle 文件系统 HDFS、GPFS、Ceph、GlusterFS、Swift 、BeeGFS、Alluxio 资源调度 YARN、Mesos 协调框架
原创
2022-07-30 00:54:47
869阅读
大数据概述： 大数据的发展历程：第一阶段：萌芽期（20世纪90年代至21世纪初） 第二阶段：成熟期（21世纪前十年） 第三阶段：大规模应用期（2010年以后） 大数据的特点（简称4V）：数据量大 数据类型多 处理速度快 价值密度低 大数据的特征：全面而非抽样 效率而非精确 相关而非因果 在科学研究上的四种范式： 实验科学、理论科学、计算科学、数据密集型科学大数据技术 主要包括数据采集与预处理、数据
Spark-Core介绍计算引擎，类似MapReduce，将数据存放在内存中，减少磁盘IO，他是有scala编写的总体技术栈讲解Spark Streaming流式计算框架Spark GraphX图形计算引擎ML Base机器学习Spark SQL使用SQL处理业务优点更快易于使用Spark Sql支持多种环境运行模式Local多用于本地测试，如在 eclipse ， idea 中写程序测试等。St
近年来，伴随手机的普及以及移动互联网技术的迅猛发展，手机使用中产生的大数据资源的研究与应用价值受到学者们的重视。然而，合理开发、利用手机大数据的边界尚未确定，海量数据仍处于“沉睡”之中。忠实记录用户行为据2016年1月工信部发布的2015通信运营业统计公报，中国移动电话用户总数达13.06亿户。如此规模的移动电话用户群体将产生海量数据。同济大学建筑与城市规划学院副教授钮心毅介绍，手机数据包括通话详
