开源大数据OLAP组件，可以分为MOLAP和ROLAP两类。ROLAP中又可细分为MPP数据库和SQL引擎两类。对于SQL引擎又可以再细分为基于MPP架构的SQL引擎和基于通用计算框架的SQL引擎：MOLAP一般对数据存储有优化，并且进行部分预计算，因此查询性能最高。但通常对查询灵活性有限制。MPP数据库是个完整的数据库，通常数据需要导入其中才能完成OLAP功能。MPP数据库在数据入库时对数据分布
转载
2021-03-05 19:17:10
329阅读
2评论
hive的基本类型 Hive数据类型 Java数据类型 长度 例子 TINYINT byte 1byte有符号整数 20 SMALINT short 2byte有符号整...
原创
2021-04-25 23:00:40
341阅读
第2章 Spark弹性分布数据集2.1 弹性分布式数据集 弹性分布式数据集（Resilient Distributed Datasets(RDD)）是spark的一种基本的数据结构。
原创
2022-06-15 17:46:43
77阅读
实验二、环境大数据（必须基于实验一验证通过的环境） 实验目的1． 学会分析环境数据文件；2． 学会编写解析环境数据
原创
2024-04-16 13:42:08
116阅读
此文已由作者叶林宝授权网易云社区发布。 欢迎访问网易云社区，了解更多网易技术产品运营经验。 方案四：Sort on Cell Values 简述： 上述方案三， 当数据行数较多， 情况下， 在二次排序还是可能出现oom情况， 而且， 不同的field_index的数据可能shuffle到同一个分区，
转载
2018-10-31 09:15:00
39阅读
方案四：Sort on Cell Values简述：上述方案三， 当数据行数较多， 情况下， 在二次排序还是可能出现oom情况， 而且， 不同的field_index的数据可能shuffle到同一个分区，这样就加大了oom的概率。当field_index本身取值较多 情况下， 增加分区数是其中一种解决方法。但是field_index取值本身就少于分区数的情况下， 增加分区数对缓解oom就没任何作用
转载
2018-10-31 09:15:00
65阅读
什么是大数据安全分析Last Updated @ 2015-01-27 by 叶蓬【关键词】大数据安全分析，大数据【摘要】大数据安全分析是指将大数据技术应用于安全分析领域。借助当前大数据分析的技术，有助于解决传统安全分析面临的诸多挑战。 在《为什么需要大数据安全分析》一文中，我们已经阐述了一个重要观点，即：安全要素信息呈现出大数据的特征，而传统的安全分析方法面临重大挑战，信息与网络安全需
原创
2015-01-27 09:23:08
4637阅读
点赞
LGD主赞助商 必威电竞 BetWay特约稿件题图 / 佚名文 / 天辉夜魇今天21时左右，DOTA2国服客户端无法正常启动，不少兄弟为之苦恼，纷纷私信我求助，下面就教大家一招一劳永逸的办法——使用Steam客户端。一招解千愁■ 下载安装Steam客户端1. 打开电脑浏览器，搜索关键词Steam，点击下图中的第一个链接，注意域名是：https://store.steampowered.com/ab
转载
2024-01-07 10:24:53
49阅读
第四步：配置WCF服务在Services项目中右击“App.Config”配置文件，在弹出的右键菜单中选择“编辑WCF配置”。单击左侧的“服务”-“Wcf_MassData.DataTransfers”在右侧的Name，弹出“服务类型浏览器”对话框，在此类型中我们找到此WCF服务项目编译出来的Wcf_MassData.dll文件，双击它就可以出现此服务中的对外公布的服务，点击选中它单击确定。这样我
原创
2010-08-06 16:12:36
2550阅读
聊聊HDFS 大数据大数据，先解决存数据的问题，那不得不说hdfs，干什么用的呢，就是负责数据的存储。号称hadoop的大本营，即hadoop分布式文件系统。hdfs架构分为3个部分：nameNode（nn）：用于存储文件的元数据，元数据是什么举个例子：比如文件名，文件目录结构，文件的一些属性（生产时间，副本数量，文件权限）......，以及每个文件的块列表和块所在的dataNode等（一会
转载
2021-02-02 20:53:23
319阅读
2评论
上一篇《大数据基础知识科普(1)》为大家讲解了关于服务器,存储磁盘以及RAID的内容。这一篇将沿着之前的脚步,为大家带来更多学习大数据必须要掌握的知识! 目录什么是集群?什么是计算机网络？什么是交换机？什么...
原创
2021-06-02 09:35:48
373阅读
========= 基础 =========1 var, val和def三个关键字之间的区别?valimmutable varia
原创
2022-11-03 14:07:04
88阅读
1．有两根不均匀分布的香，香烧完的时间是一个小时，你能用什么方法来确定一段15分钟的时间？ 答：把两根香同时点起来，第一支香两头点着，另一支香只烧一头，等第一支香烧完的同时（这是烧完总长度的3/4），把第二支香另一头点燃，另一头从燃起到熄灭的时间就是15分！2．一个经理有三个女儿，三个女儿的年龄加起来等于13，三个女儿的年龄乘起来等于经理自己的年龄，有一个下属已知道经理的年龄，但仍不能确定经理三个
转载
2022-11-03 14:36:30
248阅读
!大数据linux2.png(https://s2.51cto.com/images/20220723/1658572296534183.png?xossprocess=image/watermark,size_14,text_QDUxQ1RP5Y2a5a6i,color_FFFFFF,t_100,g_se,x_10,y_10,shadow_20,type_ZmFuZ3poZW5naGVpdGk=
原创
2022-07-23 18:31:50
178阅读
上一篇《大数据基础知识科普(1)》为大家讲解了关于服务器,存储磁盘以及RAID的内容。这一篇将沿着之前的脚步,为大家带来更多学习大数据必须要掌握的知识!目录什么是集群?什么是计算机网络？什么是交换机？什么是局域网？什么是网络拓扑？以太网络InfiniB
原创
2022-04-01 09:33:10
209阅读
1.下载sqluldr264.exe2.CMD 执行 sqluldr264 用户名/密码@IP:1523/SERVICE_NAME query="select * from user.tablename" head=yes file=d:\xx.csv
原创
2023-10-09 09:13:50
139阅读
Step_4:HIVE安装Step_4.1:下载Hive通过：http://apache.petsads.us/hive/hive-2.1.0/，链接下载。记录下载的路径/下载，进入到下载路径下
原创
2022-06-15 17:40:57
97阅读
17.2 简单消费者实例 已经创建一个producer给Kafka集群发送信息。现在需要创建一个consumer来接收来自集群中的信息。
原创
2022-06-15 17:42:10
83阅读
11.7 setData方法zookeeper类提供setData方法来修改附着在指定znode的数据。setData方法：setData(String path, byte[] data, int version
原创
2022-06-15 17:43:48
100阅读
最近使用vue3.0+vue-router4.x+element-plus ui框架联合开发了一个小的商城项目，首先简单说一下element-plus ui框架。官网上介绍了element-plus ui框架适用于vue3.0开发pc端，使用时发现只是框架部分代码可以拿来直接使用，但是其余的代码还没有更新下面总结vue3.0遇到的一些问题，老生长谈的就是虚拟dom的获取相对于vue2.x来说很是有
