1.单例模式：确保一个类只有一个实例，并提供一个全局访问点来访问这个唯一的实例。对于单例模式，在单例类的内部创建它的唯一实例，并通过静态方法getInstance()让客户端可以使用它的唯一实例；为了防止在外部对单例类实例化，将其构造函数的可见性设置为private，在单例类内部定义一个singleton类型的静态对象作为供外部共享访问的唯一实例。/**这种单例模式示例有问题存在，下文中会做完善，
转载
2023-10-23 23:00:34
46阅读
chapter1_basics$ java -jar javarepl-428.jarWelcome to
原创
2022-06-10 11:29:47
212阅读
1.RDD介绍：
RDD，弹性分布式数据集，即分布式的元素集合。在spark中，对所有数据的操作不外乎是创建RDD、转化已有的RDD以及调用RDD操作进行求值。在这一切的背后，Spark会自动将RDD中的数据分发到集群中，并将操作并行化。
Spark中的RDD就是一个不可变的分布式对象集合。每个RDD都被分为多个分
转载
2024-10-22 14:47:55
8阅读
Java 的REPL 工具1.概述2. jShell命令
原创
2021-08-14 00:41:49
220阅读
Spark常用代码 文章目录Spark常用代码1. 创建RDD方法2. 专门读取小文件wholeTextFiles3. rdd的分区数4. Transformation函数以及Action函数4.1 Transformation函数4.2 Action函数4.3 其他常见的函数5. 重分区函数6. 聚合函数6.1 基础聚合函数6.2 Key-Value类型的聚合函数6.3 join相关操作7. 搜
转载
2023-08-28 22:59:13
70阅读
swift 打开终端，输入swift，启动swift$ swiftWelcome to Apple Swift version 5.2.4 (swiftlang-1103.0.32.9 clang-1103.0.32.53).Type :help for assistance. 1> 输入代码感受下 1> var s = "Hello Swift"s: String = "Hello Swift" 2> print(s)Hello Swift 3>
原创
2021-08-04 10:27:23
259阅读
“读取-求值-输出”循环（英语：Read-Eval-Print Loop，简称R
原创
2023-03-10 15:30:14
129阅读
repl_backlog_buffer: 为了解决从库断连后找不到主从差异数据而设立的环形缓冲区，从而避免全量同步带来的性能开销。在redis.conf配置文件中可以设置大小，如果从库断开时间过长，repl_backlog_buffer环形缓冲区会被主库的写命令覆盖，那么从库重连后只能全量同步，所以repl_backlog_size配置尽量大一点可以降低从库连接后全量同步的频率。 ===
转载
2023-07-04 16:41:06
110阅读
DAGScheduler概述：是一个面向Stage层面的调度器；主要入参有：dagScheduler.runJob(rdd, cleanedFunc, partitions, callSite, allowLocal,resultHandler, localProperties.get)rdd： final RDD；cleanedFunc： 计算每个分区的函数；resultHander：
转载
2023-06-30 20:13:08
88阅读
# 实现 MySQL Change Replication
## 简介
MySQL的复制是一种常见的数据同步和备份机制，它可以将一个MySQL数据库的更改同步到另一个MySQL数据库。在这篇文章中，我将向你介绍如何实现MySQL的Change Replication。Change Replication是指将主数据库上执行的更改操作（如插入、更新和删除）同步到备份数据库。
## 流程
下面
原创
2023-07-26 02:48:48
17阅读
# Python REPL: Interactive Python Programming
. The Python REPL a
原创
2023-12-03 09:38:14
42阅读
核心内容： 1、Spark中WordCount的运行原理今天又彻底研究了一下Spark中WordCount的运行原理，在运行逻辑上与Hadoop中的MapReduce有很大的相似之处，今天从数据流动的角度解析Spark的WordCount，即从数据流动的角度来分析数据在Spark中是如何被处理的。 直接分析程序：val lines:RDD[String] = sc.textFile("C:\\
转载
2024-06-30 17:37:54
185阅读
# 如何实现mongodb repl replay
## 1. 流程图
```mermaid
journey
title Mongodb Replication Replay
section 设置环境
开发者 -> 新手: 告知需要安装mongodb
开发者 -> 新手: 告知需要配置mongodb replica sets
sect
原创
2024-03-04 03:26:45
42阅读
Python REPL（Read-Eval-Print Loop）命令是一个交互式环境，用于快速执行Python代码片段。这个环境非常适合调试和试验代码片段。本文将详细描述如何解决“Python REPL命令”相关的问题，内容结构包括环境预检、部署架构、安装过程、依赖管理、扩展部署和版本管理。
### 环境预检
在部署Python REPL之前，我们需要确保开发和执行环境满足特定条件。以下是环
第一章 Spark 性能调优1.1 常规性能调优1.1.1 常规性能调优一：最优资源配置Spark性能调优的第一步，就是为任务分配更多的资源，在一定范围内，增加资源的分配与性能的提升是成正比的，实现了最优的资源配置后，在此基础上再考虑进行后面论述的性能调优策略。资源的分配在使用脚本提交Spa
转载
2024-07-17 15:30:54
61阅读
spark 读取hive中的数据scala> import org.apache.spark.sql.hive.HiveContext
import org.apache.spark.sql.hive.HiveContext
scala> val hiveContext = new HiveContext(sc)
//hive中的feigu数据库中表stud_info
scala>
转载
2023-08-29 13:57:06
36阅读
# Spark Java：构建高效RESTful API的框架
在当今快速发展的Web开发领域，构建RESTful API已成为一种常见的需求。Spark Java是一个轻量级的框架，它提供了一种简单而高效的方式来创建RESTful服务。本文将介绍Spark Java的基本用法，并展示如何使用它来构建一个简单的API服务。
## Spark Java简介
Spark Java是一个用Java
原创
2024-07-29 10:52:15
21阅读
