akka中的EventBus其实是不常用，也最容易被忽略的一个组件。 但如果你深入Cluster的实现就会发现，这个东西其实还挺有用的，而且它是ActorSystem系统中所有事件消息的一个横切面，通过它你可以订阅特定类型的消息，然后做出相应的动作。那读者可能会问了，这个订阅消息也很简单的啊，我自己实现不就好了。嗯，其实你这个想法是对的，akka所有的功能都是基于actor和Actor模型的
转载
2023-06-25 22:38:42
94阅读
# 如何实现 Spark 和 Akka 的结合应用
在大数据和实时计算的时代，Apache Spark 和 Akka 是两个非常重要的框架。Spark 用于处理大规模的数据计算，而 Akka 则用于构建高并发的分布式应用。将这两个框架结合起来，可以充分发挥各自的优势，实现快速的数据处理和实时的响应能力。本文将为您详细介绍如何实现 Spark 和 Akka 的结合应用。
## 1. 流程概述
文章目录思路分析步骤一、创建maven工程，导包二、master进程代码开发三、worker进程代码开发思路分析1.首先启动master，然后依次启动worker
2.启动worker时，向master发送注册信息（使用case class封装注册信息——workerID,memory,cores）
3.接收注册信息，保存注册的worker信息，返回注册成功的消息
4.worker需要定时向mas
转载
2024-04-03 14:15:21
40阅读
一 Dispatchers1.1 理解分发器分发器是一个通信协调员的角色，主要负责消息的接收和传递。主要依据一定的分发策略，用于控制执行流程，然后将到来的消息或者请求路由给相关的业务进程。提供飞机的航空公司类似于Akka的MailBox，机场跑道类似于Akka的线程资源，航空交通管制塔类似于Dispatcher 1.2 分发器的类型1.2.1 Dispatcher 这是默认的分发器，它
转载
2023-10-30 17:41:33
65阅读
前言 因为目前从事物联网(智能建筑)的开发工作，接触了一项框架 AKKA，akka目前在国内并不是应用很广，因为当前物联网还不是如日中天的时间点，但是这项技术的亮点有很多，值得大家学习；接触AKKA这么久在学习的时候发现 网上资料少之又少，所以今天决定写一篇博客，提供给目前正在学习，准备使用AKKA的同学;亮点 &nbs
转载
2023-10-30 17:40:13
46阅读
# 如何实现akka更新spark广播
## 介绍
在大数据处理中，使用Spark广播变量可以提高程序性能。而使用Akka框架可以实现并行计算。本文将介绍如何使用Akka框架更新Spark广播变量。
## 流程
以下是更新Spark广播变量的流程：
| 步骤 | 操作 |
| --- | --- |
| 1 | 创建Akka Actor系统 |
| 2 | 创建一个Actor用于更新广播变量
原创
2024-06-06 04:18:04
39阅读
## Spark, Akka, and gRPC for Streaming Data Processing
In the world of big data processing, streaming data is becoming increasingly important. Spark, Akka, and gRPC are three popular frameworks that
原创
2024-05-20 06:10:30
29阅读
本页讨论了Flink的Akka分布式通信的实现，该版本已在0.9版中采用。使用Akka，所有远程过程调用现在都实现为异步消息。这主要影响的组件JobManager，TaskManager 和JobClient。Akka和ActorAkka 是用于开发并发，容错和可伸缩应用程序的框架。它是参与者模型的实现， 因此类似于Erlang的并发模型。在
转载
2024-07-05 16:53:17
16阅读
最近有个机会在工作上使用了Akka FSM，是个非常有趣的例子。API（实际上就是DSL），使用体验很棒，这里做些基本介绍AKKA FSM是啥Akka FSM是Akka用来简化管理Actor中不同状态和切换状态而构建有限状态机的方法。在底层，Akka FSM就是一个继承了Actor的trait。trait FSM[S, D] extends Actor with Listeners with
转载
2023-06-25 22:38:27
166阅读
AKKA介绍：AKKA是java虚拟机JVM平台上构建高并发、分布式和容错应用工具包和运行时。可以理解为Akka是编写并发程序的框架AKKA是scala语言写成，同时提供了scala和java的接口AKKA主要解决的问题是：可以轻松的写出高效稳定的并发程序，程序员不在 过多的考虑县城，锁，和资源竞争等细节主要解决什么问题处理并发问题保证共享数据的一致性和正确性，因为程序是多线程时，多线程同事对一个
转载
2023-07-24 11:42:08
494阅读
...
转载
2023-01-06 15:48:45
456阅读
Scala
Akka | 引入
Akka依赖 maven 依赖 pom.xml <?xml version="1.0" encoding="UTF-8"?> <project xmlns="http://maven.apache.org/POM/4.0.0" xmlns:xsi="http://www ...
转载
2021-10-28 18:02:00
643阅读
2评论
2 流式HTTP日志流处理器（log-stream processor ）将以HTTP服务运行。让我们来看看这意味着什么。Akka-http 使用 akka-stream，所以从基于文件的APP到HTTP服务并不需要很多粘合代码。Akka-http 是一个非常好的例子，一个包含akka-stream的库。 首先，我们要在工程中添加更多的依赖： 这一次我们将构建LogsApp
转载
2024-08-10 09:08:22
64阅读
Akka并发编程框架1. Akka特性Akka是一个用于构造高并发,分布式和可扩展的基于事件驱动的应用的工具包,Akka是使用scala开发的库,同时可以使用scala和java语言来开发基于Akka的应用程序2. Akka特性提供基于异步非阻塞,高性能的事件驱动编程模型内置容错机制,允许Actor在出错的时候进行恢复或者重置操作超级轻量级的事件处理(每GB堆内存几百万的Actor)使用Akka可
转载
2023-07-05 00:10:52
1011阅读
1. What is an Actor?The Actor Model represents objects and their interactions, resemblinghuman organizations and built upon the laws of physics.is an object with identityhas a behavioronly interacts u
原创
2014-12-23 15:15:25
979阅读
本文已.Net语法为主,同时写有Scala及Java实现代码 严肃的说,演员是一个广泛的概念,作为外行人我对Actor 模型的定义: Actor是一个系统中参与者的虚拟人物,Actor与Actor之间是可以相互沟通,所有的沟通都是通过Message比如说一个呼叫中心,数以百万计的客户可能会呼叫一个1-800的号码,并与许多可能的客户服务代表进行对话向这样类型的交互可以使用演
转载
2023-10-07 08:19:39
172阅读
这是关于如何使用Spring for Apache Kafka在跨多个微服务的MongoDB中管理分布式数据模型。由多个微服务组成的现代分布式系统，每个微服务都拥有一个领域的聚合数据的子集，那么该系统几乎肯定会具有某些数据重复，在这种情况下，我们如何保持数据的一致性？Apache KafkaApache Kafka是一个开放源代码的分布式事件流平台，能够处理数万亿条消息。根据Confluent（最
转载
2024-06-12 09:59:36
45阅读
认识Actor并发模型，一篇就够
简介1、机遇Actor并发模型，底层使用Scala语言，提供java和scala的API
2、运行在jvm上
3、高性能、高容错的分布式并行应用框架特点并发与并行：提供对并行与并发的高度抽象异步非阻塞：Akka-Actor消息通信都是基于异步非阻塞高容错性：为跨多JVM的分布式模型提供强劲的容错处理，号称永不宕机持久化：
转载
2024-02-28 14:00:29
0阅读
1、pom.xml添加<dependency>
<groupId>com.typesafe.
akka</groupId>
<artifactId>
akka-actor_2.12</artifactId>
<version>2.5.12</versio
转载
2023-06-01 20:07:27
123阅读
本文参考Akka官方使用文档，根据自身的经验和理解，提供Akka与Spring集成的方案。本文不说明Spring框架的具体使用，并从Spring已经配置完备的情况开始叙述。Actor系统——ActorSystem 什么是ActorSystem？根据Akka官网的描述——ActorSystem是一个重量级的结构体，可以用于分配1到N个线程，所以
转载
2023-06-25 22:38:07
163阅读
