大数据的应用开发过于偏向底层，具有学习难度大，涉及技术面广的问题，这制约了大数据的普及。现在需要一种技术，把大数据开发中一些通用的，重复使用的基础代码、算法封装为类库，降低大数据的学习门槛，降低开发难度，提高大数据项目的开发效率。大数据在工作中的应用有三种：与业务相关，比如用户画像、风险控制等；与决策相关，数据科学的领域，了解统计学、算法，这是数据科学家的范畴；与工程相关，如何实施、如何实现、解决
转载
2018-11-14 09:57:13
1556阅读
原创
2021-09-01 10:17:42
27阅读
1.1 什么是大数据 主要解决：海量数据的存储和海量数据的分析计算问题 大数据中的存储单位：bit，byte，KB，MB，GB，TB，PB，EB，ZB 1byte = 8bit 1KB = 1024byte 1MB = 1024KB 1GB = 1024MB 1TB = 1024GB ...... ...
转载
2021-10-13 10:08:00
147阅读
2评论
大数据（big data），指无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合，是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产。 大数据的定义是4Vs：Volume、Velocity、Variety、Veracity。用中文简单描述就是大、快、多、真。 Volume —— 数据量大 随着技术的发展，人们收集信息...
原创
2021-07-17 15:06:47
289阅读
一、什么是大数据进入本世纪以来，尤其是2010年之后，随着互联网特别是移动互联网的发展，数据的增长呈爆炸趋势，已经很难估计全世界的电子设备中存储的数据到底有多少，描述数据系统的数据量的计量单位从MB（1MB大约等于一百万字节）、GB（1024MB）、TB（1024GB），一直向上攀升，目前，PB（等于1024TB）级的数据系统已经很常见，随着移动个人数据、社交网站、科学计算、证券交易、网站日志、传
转载
2018-11-12 18:47:03
486阅读
一 大
转载
2022-07-02 00:13:15
237阅读
原文地址：http://club.alibabatech.org/article_detail.htm?articleId=8
任 何比较关注业界新闻的人，都会知道最近一两年IT行业的几个关键字：移动端、LBS、SNS和大数据。前边三个，大家应该是很熟悉的，因为身边早已充斥着 相关的应用。唯独最后一个大数据，在大部分人眼中却是非常陌生的，除了知道如数据挖掘、智能推荐等几个看似非常
转载
精选
2013-04-22 10:55:27
649阅读
什么是大数据? “大数据”最近两年在IT行业可是一个非常热门的词，和“互联网思维”一样，大数据已经开始在各个行业应用起来了，在我国2014年召开的两会上面，听到最多的就是利用大数据分析处理，那么究竟什么是大数据呢，怎样去理解这个概念?让我们一起来看看把。 1.大数据的定义 大数据，又被成为巨量的资料，就是指那些所包含的数据资料量非常大，规模海量到甚至无法通过人脑甚至主流软件工具，在正确合理的
原创
2014-06-19 14:01:39
830阅读
什么是大数据？某比萨店的电话铃响了，客服人员拿起电话。客服：XXX比萨店。您好，请问有什么需要我为您服务？顾客：你好，我想要一份……客服：先生，烦请先把您的会员卡号告诉我。顾客：16846146***。客服：陈先生，您好！您是住在泉州路一号12楼1205室，您家电话是2646****，您公司电话是...
转载
2014-06-24 12:36:00
140阅读
2评论
1 TB（太字节）= 1024 GB1 PB（拍字节）= 1024 TB。
本文资料来自百度文库相关文档Hadoop，Spark和Storm是目前最重要的三大分布式计算系统，Hadoop常用于离线的复杂的大数据处理，Spark常用于离线的快速的大数据处理，而Storm常用于在线的实时的大数据处理。简单说，Hadoop或者说Hadoop生态圈，是为了解决大数据应用场景而出现的，它包含了文件系统、计算框架、调度系统等，Spark是Hadoop生态圈里的一种分布式计算引擎。&n
转载
2023-08-07 17:34:42
62阅读
在讲新一代大数据技术架构前，先讲下大数据特征与大数据技术要解决的问题。1.大数据特征：“大量化(Volume)、多样化(Variety)、快速化(Velocity)、价值密度低（Value）”就是“大数据”显著的4V特征，或者说，只有具备这些特点的数据，才是大数据。2.大数据技术要解决的问题：大数据技术被设计用于在成本可承受的条件下，通过非常快速（velocity）地采集、发现和分析，从大量（vo
转载
2023-08-15 15:06:21
505阅读
大数据都学什么？大数据(big data)，指无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合，是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产，下面给大家看一下大数据都需要学点什么。 第一阶段为JAVASE+MYSQL+JDBC，主要学习一些Java语言的概念，如字符、流程控制、面向对象、进程线程、枚举反射等，学习MySQL数据
转载
2024-01-15 13:21:36
92阅读
文章目录1.什么是大数据?字面意思:专业解释:再专业点:2.大数据的特点-- 4V(Volume,Velocity,Variety)?2.1Volume(大量)2.2 Velocity(高速)2.3 Variety(多样)2.4 Value(低价值密度)3.大数据主要做什么?4.大数据的应用场景5.大数据未
原创
2021-12-23 15:37:23
1447阅读
文章目录1.什么是大数据?字面意思:专业解释:再专业点:2.大数据的特点-- 4V(Volume,Velocity,Variety)?2.1Volume(大量)2.2 Velocity(高速)2.3 Variety(多样)2.4 Value(低价值密度)3.大数据主要做什么?4.大数据的应用场景1.什么是大数据?字面意思:大量的数据，海量的数据一般我们的数据都是以处理M丶G丶T等单位(一...
原创
2022-02-16 16:03:03
568阅读
1.为什么产生大数据技术？ 首先，大数据是众多数据信息的集合，随着社会的发展，我们周围的数据信息越来越多，仅仅是通过我们人脑对这些数据信息进行分类处理，是很有限的，而大数据技术就是为了解决这个问题而产生的，通过这个技术，把这些数据信息进行分类处理，然后把我们所需的数据信息呈现给我们，为我们查找数据信 ...
转载
2021-09-09 22:39:00
257阅读
2评论
什么是大数据？大数据 ，英文为Big Data 。这个如今耳熟能详的名 是《自然》 Nature 杂志2008 日的专辑 Big Data 中首次提出的Google在其推动世界范围内的信息整合过程中，极大地推动了大数据技术的创新和发展。然而 ，到底什么是大数据？它的概念和外延包括哪些？由于大数据是最近新衍生出来的概念，它的内涵和外延也在不断地拓展和变化 ，目前还没有 个业界广泛采纳的明确定义201
原创
2021-02-26 13:59:33
1463阅读
大数据的价值评估，需要从社会效益、企业效益、个人效益和产品效益来综合评价。比如，金融数据和电商数据碰撞到一起，就产生了像小额贷款那样的互联网金融；电信数据和政府数据相遇，可以产生人口统计学方面的价值，帮助城市规划人们居住、工作、娱乐的场所；金融数据和医学数据在一起，可以发现骗保；物流数据和电商数据在一起，可以了解各个经济子域的运行情况等。
原创
2018-02-05 15:23:58
3631阅读
今天跟一个测试同事聊天：我：最近忙什么项目呢？他：在测大数据血缘我：啥？他：血缘啊我：啥血缘？他：大数据血缘啊我：血缘是啥？他：就是数据血缘啊我：...看看，天就是这么被聊死的，我忍不住内心OS（怪不得你秃顶还没女朋友）我赶紧回来问问 google，分析了各路答案之后，可以总结成两句话：通常我们会对原始数据进行多个步骤的各种加工，最后产生出新的数据，在这个过程中会产生很多表，这些数据表之间的链路关
原创
2019-07-25 20:04:37
2385阅读
点赞
漫画，大数据科普！
转载
2021-08-12 15:53:07
211阅读
