1.传统数仓发展史传统数据仓库的发展史这里不展开架构细讲，只需快速过一遍即可。了解这个历史发展过程即可。1.1 传统数仓历史1.1.1 5个时代 传统数仓发展史可以称为5个时代的经典论证战。按照两位数据仓库大师 Ralph kilmball、Bill Innmon 在数据仓库建设理念上碰撞阶段来作为小的分界线：1970～1991 数据仓库概念萌芽到全企业集成。1991～1994 EDW企业数据集成
转载
2024-09-22 22:22:23
77阅读
大数据面试题及答案1 kafka的message包括哪些信息2 怎么查看kafka的offset3 hadoop的shu
转载
2022-01-18 10:09:40
174阅读
大数据面试题及答案1 kafka的message包括哪些信息2 怎么查看kafka的offset3 hadoop的shuffle过程4 spark集群运算的模式5 HDFS读写数据的过程6 RDD中reduceBykey与groupByKey哪个性能好，为什么？7 spark2.0的了解8 rdd 怎么分区宽依赖和窄依赖9 sp
转载
2021-12-07 16:49:37
226阅读
在美国，大数据工程师平均年薪达17.5万美元，在中国顶尖的互联网公司里，大数据工程师的薪酬比同级别的其他职位高出30%以上。DT时代来得太突然了，国内发展势头很猛，而大数...
转载
2022-08-09 21:32:02
132阅读
最新BAT10道面试题1、kafka的message包括哪些信息一个Kafka的Message由一个固定长度的header和一个变长的消息体body组成header部分由一个字节的magic(文件格式)和四个字节的CRC32(用于判断body消息体是否正常)构成。当magic的值为1的时候，会在magic和crc32之间多一个字节的数据：attributes(保存一些相关属性，比如是否压缩、压缩格
原创
2021-02-26 14:04:24
179阅读
BAT大数据工程师JD技能图谱.png开课吧-大数据开发架构师-深度对标阿里P7.png
原创
2022-01-07 17:33:40
179阅读
BAT大数据工程师JD技能图谱.png开课吧-大数据开发架构师-深度对标阿里P7.png
原创
2021-07-09 10:18:12
346阅读
认识大数据什么是大数据？可能有人会说写字楼的所有人的资料信息就是个大数据。NO！这里的数据只能说比较大，但却不能称之为大数据。百度百科上给出了很明确的解释“大数据（bigdata），指无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合，是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产。”在这里还是要推荐下我自己建的大数据学习交流群:52
原创
2019-05-23 11:44:37
578阅读
风起云涌的大数据战场上，早已迎百花齐放繁荣盛景，各大企业加速跑向“大数据时代”。而我们作为大数据的践行者，在这个“多智时代”如何才能跟上大数据的潮流，把握住大数据的发展方向。前言大数据起源于2000年左右，也就是互联网高速发展阶段。经过几年的发展，到2008年 Hadoop 成为 Apache 顶级项目，迎来了大数据体系化的快速发展期，到如今 Hadoop 已不单单指一个软件，而成为了大数据生态体
原创
2021-03-14 09:36:30
175阅读
风起云涌的大数据战场上，早已迎百花齐放繁荣盛景，各大企业加速跑向“大数据时代”。而我们作为大数据的践行者，在这个“多智时代”如何才能跟上大数据的潮流，把握住大数据的发展方向。前言 大数据起源于2000年左右，也就是互联网高速发展阶段。经过几年的发展，到2008年 Hadoop 成为 Apache 顶级项目，迎来了大数据体系化的快速发展期，到如今 Hadoop 已不单单指一个软件，而成为了大数据生态
原创
精选
2021-02-03 20:31:49
1899阅读
风起云涌的大数据战场上，早已迎百花齐放繁荣盛景，各大企业加速跑向“大数据时代”。而我们作为大数据的践行者....
转载
2023-01-02 21:00:36
339阅读
话不多说，直接上干货资料，我们精选了50个百度、腾讯、阿里等大厂的大数据、算法落地经验，分享给大家：识别二维码，回复"大厂经验"，获取PDF干货合集！合集目录：
转载
2021-04-30 22:57:18
342阅读
话不多说，直接上干货资料，我们精选了50个百度、腾讯、阿里等大厂的大数据、算法落地经验，分享给大家：识别二维码，回复"大厂经验"，获取PDF干货合集！合集目录：识别二维码，回复"大厂经验"，获取PDF干货合集！
转载
2023-01-02 11:52:59
210阅读
我上大学时那时候安卓的版本才到安卓4.4,在智能手机出来普及以前,各大网站的数据量并没有那么多,但是随着智能手机的普及,互联网巨头家里的数据呈现几何级增长,像什么微博,微信,视频网站的数据;需要找到合适的存储方式—>>分布式存储架构,可以水平扩展,实现存储数据类型多样化,二维可以实现高容错高吞吐量,轻松实现大文件存储(支持P级别的
原创
2023-03-15 11:01:42
572阅读
大数据啊大数据！浪尖浪尖聊大数据开始本文之前，希望大家参与一下下面的投票。做这个投票的主要原因是最近经常有找浪尖咨询大数据，自学，培训及找工作的事情，问题归类如下：大数据要不要培训自学一段时间，发现很痛苦，没人指导想放弃，培训费用太高了培训发现跟不上，举步维艰培训结束了，为啥面试机会甚少下面分类回答一下。1.大数据需要培训吗？对于java老鸟，因为有比较强的编程经验，可以买点视频或者找大牛付费专栏
原创
2021-03-19 13:47:02
10000+阅读
在开发过程中我们不管是用来测试性能还是在生产环境中页面展示好看一点, 又或者学习验证某一知识点经常需要一些测试数据, 这个时候如果手敲的话, 十行二十行还好, 多了就很死亡了, 接下来介绍两种常用的MySQL测试数据批量生成方式：存储方式+函数Navicat的数据生成表准备了两张表。角色表:id: 自增长role_name: 随机字符串, 不允许重复orders: 1-1000任意数字用户表:id
转载
2024-10-25 08:37:29
48阅读
1.大数据对思维方式的影响是使得分析全样而非抽样、效率而非精准、相关而非因果。 2.区别：大数据侧重于对海量数据的存储、处理与分析，从海量数据中发现价值，服务于生产和生活；云计算本质上旨在整合和优化各种IT资源，并通过网络以服务的方式廉价地提供给用户；物联网的发展目标是 实现物物相连，应用创新是物联网发展的核心。 联系：从整体上看
转载
2024-01-16 00:39:18
318阅读
先说题外话，不喜或不同观点者勿怪：1、说的是DOS，CMD可以不用看2、在CN－DOS论坛上找到一个有关BAT加密的高楼大厦，一口气从1楼爬到350楼，试验一下，结果是： 大失所望，这些所谓的加密可说是自欺欺人，最简单的破解方法是先用RAR压缩，再用RAR查看，加密一目了然，所以奉劝各位，别再在BAT加密上浪费时间和精力了。3、非要bat加密，只有bat2com。有人说了，
转载
2023-12-15 18:52:26
3阅读
