flink中的rpc框架使用的akka。在本节并不详细讲述akka，而是就flink中rpc来讲述akka的部分内容。本节，我从AkkaRpcActor.handleRpcInvocation方法讲起。 看过hadoop、yarn、hive、hbase、presto的rpc框架，感觉flink的通信框架是最容易让人绕晕的。虽然之前也看过一点spark中akka的通信，但现在早已忘得一干二净。
转载
2024-02-08 14:51:49
85阅读
前言原先项目都是用springMVC加dubbo做的分布式服务，最近有空研究了一下springCloud集成dubbo的过程，因为阿里巴巴前几个月已经官方提供了对应springBoot的dubbo-starter，所以我们可以直接引入依赖即可。1、基于springBoot 2.0.1.RELEASE 版本 （需要注意这个不再支持jdk1.7了） 2、基于springCloud Finchley.
转载
2024-04-19 12:48:02
32阅读
说明：Sleuth用于服务调用链追踪，在log里埋点； Zipkin是一套分布式实时数据追踪系统，可以将Sleuth数据以大盘监控显示出来。 ELK（Elasticsearch + Logstash + Kibana）：根据Trace ID搜索所有上下游Log。一、搭建Zipkin服务端：地址：http://localhost:9411/1.方式1(推荐)，下载官方包zipkin-server-2
转载
2024-02-21 12:55:43
87阅读
网关就是做一下过滤或拦截操作 让我们的服务更加安全 用户访问我们服务的时候就要先通过网关 然后再由网关转发到我们的微服务1. 新建一个网关服务Module 2. 依然选择springboot工程 3. 老规矩起个名字 4. 勾选注册中心客户端 5. 勾选zuul网关模块 6. 编写配置文件server:
# 服务端口号
port: 8085
转载
2023-09-06 10:49:53
40阅读
前段时间 Hystrix 宣布不再维护之后，Feign 作为一个跟 Hystrix 强依赖的组件，必然会有所担心后续的使用。作为 Spring Cloud Alibaba 体系中的熔断器 Sentinel，Sentinel 目前整合了 Feign，本文对整合过程做一次总结，欢迎大家讨论和使用。Feign 是什么？Feign 是一个 Java 实现的 Http 客户端，用于简化 Restful 调用
转载
2023-08-23 20:38:20
48阅读
前言在微服务架构中服务众多，每个微服务都会产生大量的日志数据，服务的调用错综复杂，如何才能快速定位到BUG？所以日志收集是微服务项目不可或缺的。为了方便日志分析，我们需要对微服务的日志数据进行存储,同时提供一个友好的可视化界面方便分析。存储到文件和数据库都不太合适因为数据量太大，也不好查阅。ELK是一个较为成熟的分布式日志解决方案。什么是ELKELK不是一个框架，而是包含三款产品的组合：Elast
转载
2023-09-25 08:18:59
85阅读
seata官方文档：https://seata.io/zh-cn/docs/overview/what-is-seata.htmlseata源码：https://github.com/seata/seata/releases官方文档只提供了dubbo的整合案例，本文提供springCloud + nacos 的整合案例seata-server 安装下载seata从github上下载1.4.2版本
转载
2024-08-29 15:29:34
156阅读
使用场景： 一般前后与后台交互，后台定义接口相关文档给前台，但是一般接口文档后台开会不会实时更新文档，这时swagger的出现，方便了前台开发使用相关接口以及相关字段。 例如： 1.让前台页面开发了解相关上送、返回自字段、以及请求路径，以及相关接口备注和接口属性字段备注， 2.页面直观接口以及属性 例如： 也可参考：swagger样例开发使用： 1.pom添加依赖<dependency>
转载
2024-04-02 13:19:17
32阅读
Zipkin 是 Twitter 的一个开源项目，是一个致力于收集所有服务的监控数据的分布式跟踪系统，它提供了收集数据和查询数据两大接口服务。有了 Zipkin 我们就可以很直观地对调用链进行查看，并且可以很方便地看出服务之间的调用关系以及调用耗费的时间。Zipkin 数据收集服务部署 Zipkin 需要先下载已经编译好了的 jar 包，然后 java–jar 启动即可。curl -sSL htt
转载
2024-08-19 14:19:30
76阅读
简介ZooKeeper 是一种分布式协调服务，用于管理大型主机。ZooKeeper 的设计目标是将那些复杂且容易出错的分布式一致性服务封装起来，构成一个高效可靠的原语集，并以一系列简单易用的接口提供给用户使用。使用安装使用安装使用不在过多赘述了，一开始做了一半，后来感觉和别人的一样，而且别人的更加专业，就删了，安装步骤在下面的参考文章中有描述项目中使用这里主要是被当作注册中心来使用，暂时没有其它的
转载
2023-08-14 13:32:03
75阅读
与创建基于微服务的架构相关的最常提到的挑战之一是监控。每个微服务都应该在与其他微服务隔离的环境中运行，因此它不会与它们共享数据库或日志文件等资源。然而，微服务架构的基本要求是相对容易访问调用历史，包括能够查看多个微服务之间的请求传播。Grepping 日志不是该问题的正确解决方案。在使用 Spring Boot 和 Spring Cloud 框架创建微服务时，可以使用一些有用的工具，比如：Spri
转载
2024-05-26 16:17:24
80阅读
前言本文依托于SpringCloud Alibaba环境集成之nacosSpringCloud Alibaba环境集成之sentinel在SpringCloud Alibaba的使用过程中，我总结为如下步骤：下载并启动服务端客户端引入spring-cloud-starter-alibaba的jar包客户端properties或yml加入相关配置客户端加上相应的注解开启功能服务端增加相应配置数据持久
转载
2024-02-21 10:04:17
37阅读
篇写了分布式链路追踪 spring cloud 分布式链路追踪这样的链路追踪虽然可以解决问题 但日志太过于分散 如果微服务过多 就会变的相当复杂zipkin就可以帮我们把链路调用的过程全部收集起来它就像注册中心一样 分为客户端和服务端 想要使用 首先建一个模块 当作他的服务端首先添加如下依赖 compile 'io.zipkin.java:zipkin-serv
转载
2024-02-27 16:19:26
137阅读
简单的springcloud(采用的版本为：Finchley.RELEASE springboot版本为：2.0.3.RELEASE): 1.创建注册中心Eureka-server 1.1：需要的pom坐标：
转载
2024-05-26 17:05:17
79阅读
因为springCloud Alibaba的开源，让我们看到很多cloud alibaba的组件，今天这篇文章主要讲解下cloud alibaba里开源的流控组件，原因是因为springCloud自身集成的hystrix的监控部署的复杂度，以及UI界面的不友好，所以尝试一下sentinel组件。 官方的文档传送门在这里https://github.com/spring-cloud-incubato
转载
2024-03-20 13:56:57
294阅读
一、介绍Flink是分布式大数据处理框架，那么网络通信就离不开了，从目前来看，几乎所有的开源的大型软件，尤其是Java的，基本已经不再倾向于自己写底层网络通信，毕竟有很多可以使用的Rpc网络通信框架可以来完善使用，Flink也是如此，它是基本Akka Rpc这款Rpc通信框架的。二、分析1、服务端先看一下测试代码的最基础的通信代码（RpcEndPointTest.java）：public inte
转载
2024-03-19 19:45:11
30阅读
DEMOFlink RPC 众所周知底层是Akka，我先来写一个RPC 的用例RPC Gatewaypublic interface HelloGateway extends RpcGateway {
CompletableFuture<String> hello();
}RPC Endpoint也就是服务端执行的public class HelloRpcEndpoint
转载
2024-03-08 10:37:10
38阅读
Apache Flink是新一代的分布式流式数据处理框架，它统一的处理引擎既可以处理批数据(batch data)也可以处理流式数据(streaming data)。在实际场景中，Flink利用Apache Kafka作为上下游的输入输出十分常见，本文将给出一个可运行的实际例子来集成两者。目录一、目标二、环境准备三、创建Flink Streaming工程四、增加kafka和kafka-
转载
2024-07-01 19:51:00
139阅读
主要抽象Flink RPC 框架主要抽象了RpcService,RpcEndpoint,RpcGateway,RpcServer这几个接口，具体实现可以采用多种方式，比如：akka,nettyRpcService我理解为RPC框架的引擎，可以用来启动、停止、连接一个RpcEndpoint，以及执行某些异步任务或者周期性调度任务。主要方法:
connect:连接到一个RpcEndpoint,返回一个
转载
2023-12-10 10:34:31
65阅读
简介1、是什么 springcloud gateway使用webflux的reactor-netty响应式编程组件，底层使用了Netty通讯框架 2、能干嘛 反向代理、鉴权、流量控制、熔断、日志监控 3、网关对比 gateway对比netflix和zuul来说都要靠谱一点 4、三大核心概念 路由(Route):链路URI和ID构成 断言(predicate)：请求参数是否匹配断言条件，匹配则进行路
转载
2024-07-02 08:00:31
44阅读
