1.Spark概述
1.1spark发展历史
2009年诞生
2014成为Apache顶级项目
2016发布2.0
2019发布3.0
2020九月份发布3.0.1
1.2使用现状
1.3官网介绍
spark是一个大数据领域统一的数据分析、计算、处理引擎
1.3.1流行原因
1.5组成模块
补充：Hadoop和spark的对比
Spark综合学习笔记（一）
原创
©著作权归作者所有：来自51CTO博客作者wx59658a994b151的原创作品，请联系作者获取转载授权，否则将追究法律责任
提问和评论都可以，用心的回复会被更多人看到
评论
发布评论
相关文章
-
Spark综合学习笔记（二）Spark内核原理
D的一个分区会依赖于父RDD的1个分区–错误父EDD的一个分区会被子RDD的1个分区所依赖–正确为什么要区分宽窄依赖对窄依赖：并行化+容错宽依赖：进行阶段划分，（shuffle后的阶段需要
spark big data scala 流程图 并行执行 -
Spark综合学习笔记（三）搜狗搜索日志分析
据，封装到RDD数据集中，调用Transformation函数和Action函数进行处理不同业务统计分析三、分词工具测试使用比较流行好用的中文分区：HanLP,面向生产环境的自
postman 测试工具 spark scala 数据 -
Spark综合学习笔记（十一）SparkStreaming案例5 topN
学习致谢https://www.bilibili.com/video/BV1Xz4y1m7cv?p=45添加链接描述代码实现pack
spark java hadoop apache 数据 -
Spark综合学习笔记（三十三）Structured Streaming Source-Rate
mo02_Source_Socket { def
spark big data scala sql apache -
Spark综合学习笔记（三十二）Structured Streaming Source-Socket
ming-programming-guide.html代码演示
spark big data 大数据 sql 批处理 -
spark学习笔记
Spark通过减少磁盘IO来达到性能的提升 为了适应迭代计算，Spark将经常被
spark python apache -
mongodb能不能信创
import pymongo 目录 1、连接MongDB 2、指定数据库 3、指定集合 4、插入数据 5、查询 6、计数 7、排序 8、偏移 9、更新 10、删除 正文 1、连接mongodb 连接mongodb需要用到pymongo的Mon
mongodb能不能信创 mongodb $inc 加小数 数据 mongodb 字段
