一. Spark rpc概述首先说明RPC，引用百度百科：RPC（Remote Procedure Call）—远程过程调用，它是一种通过网络从远程计算机程序上请求服务，而不需要了解底层网络技术的协议。RPC协议假定某些传输协议的存在，如TCP或UDP，为通信程序之间携带信息数据。Spark RPC可以说 是 Spark 分布式集群的基础，若是将 Spark 类比为一个人的话，Spark RPC
转载
2024-06-21 16:18:31
28阅读
## Spark, Akka, and gRPC for Streaming Data Processing
In the world of big data processing, streaming data is becoming increasingly important. Spark, Akka, and gRPC are three popular frameworks that
原创
2024-05-20 06:10:30
29阅读
Spark Streaming1. 课程目标1.1. 掌握Spark Streaming的原理1.2. 熟练使用Spark Streaming完成流式计算任务2. Spark Streaming介绍2.1. Spark Streaming概述2.1.1. 什么是Spark Streaming Spark Streaming类似于
前言现代的软件服务大多数是分布式应用程序，通过暴露自己的 API 对内或对外提供了一系列的功能点。服务与服务之间有时是跨语言、跨平台通信的。为了解决这些复杂场景，市面上也涌现了有很多解决方案。比如构建 RESTful 服务，将服务能力转化为资源集合；也有面向函数调用的客户端-服务器模式：远程过程调用（Remote Procedure Calls）。今天要介绍的 gRPC 就是后者的演变，一个非常受
转载
2024-03-28 10:14:16
66阅读
所谓RPC(remote procedure call 远程过程调用)框架实际是提供了一套机制，使得应用程序之间可以进行通信，而且也遵从server/client模型。使用的时候客户端调用server端提供的接口就像是调用本地的函数一样。grpc原理： 比如 A (client) 调用 B (server) 提供的remoteAdd方法： 首先，A与B之间建立一个TCP连接； 然后，A把需要调用的
转载
2024-02-18 08:16:38
65阅读
此篇中主要简单实现了，grpc的4种交互，包括普通请求，客户端流，服务端流，和双向流。其中服务端采用go语言实现，客户端将采用java实现。 在此篇中基本可以了解到protobuf的基本知识，以及多文件编译上的一些问题。以及在gr
转载
2024-03-20 10:18:16
112阅读
gRPC原理简析gRPC是由谷歌提出并开发的RPC协议，gRPC提供了一套机制，使得应用程序之间可以进行通信。 降级开发者的使用门槛，屏蔽网络协议，调用对端的接口就像是调用本地的函数一样。而gRPC的核心组成部分则是protocol buffers和http2.0，以下将详细讨论：protocol buffers简介开发者可以使用 pb compiler 生成用于读写数据代码。多语言支
转载
2024-05-06 19:18:45
61阅读
Grpc的简单使用心得本文主要介绍一下grpc的环境搭建，并以一个简单的登录注册的例子来展示grpc的简单使用，更详细的内容请参考官方文档：
一、环境搭建1. 查看go version，go版本需要在1.6以上2. 安装protobuf，地址：https://github.com/goo
转载
2024-05-14 14:48:06
48阅读
文章目录一、什么是grpc和protobuf二、python下体验protobuf1.安装2.先体验protobuf33. 生成proto的python文件4. 查看protobuf生成的代码5. 对比一下protobuf生成的效果三、python体验grpc开发四、python下解决grpc import路径出错的bug五、go语言下grpc快速体验1. 下载工具2. 下载go的依赖包3. p
转载
2024-05-13 18:16:24
31阅读
grpc入门（一）一.什么是grpcgrpc是谷歌开源的一款高性能的rpc框架 (https://grpc.io)，可以使用protocol buffers作为IDL(Interface Definition Language)文件，也可以作为底层的信息传输的格式(这也是本博文所介绍的方式)。 以下内容属于笔者对 what is grpc? 的翻译，原文请见: https://grpc
转载
2024-05-27 22:52:17
46阅读
grpc api API design is hard. Often with new projects, we are limited by the information or knowledge of the problem we are trying to solve. Once consumers come on board, insights which were previousl
转载
2024-08-06 20:37:35
48阅读
正如前文所述，gRPC应用通过RPC进行网络通信。作为一个gRPC应用的开发者，你无需知道RPC的实现细节，只需创建一个proto文件，并使用google提供的代码生成工具生成client/server端代码即可。所有低级别的实现细节都隐藏在生成的文件中，你只需处理高级别的抽象即可。然而，如果你想在生产环境构建基于gRPC的系统，了解它的实现原理是很有必要的。本文主要讲解gRPC的通信方式是如何实
转载
2024-02-10 19:34:49
81阅读
gRPC是Google基于HTTP/2和protobuf推出的一款也是当下热门的开源RPC（Remote Procedure Call）框架。可在程序或者服务之间进行高性能低带宽的通信，并且支持身份认证、日志系统等等需要用到的功能。在微服务作为主流的时代，各个服务之间的通信也是一个亟需解决的问题。在ASP.NET Core 3.x下，gRPC也是微软传统RPC框架WCF的有效替代。使用gRPC，可
什么是gRPCgRPC 已经成为实现需要大规模快速运行的分布式软件系统的一项重要技术。简而言之，gRPC 是一个 API 框架，它允许一个程序在互联网上的一个位置传递数据到另一个位置的另一个程序中的独特函数进行处理。其他 API 框架(如 REST)通常使用基于文本的格式(如 JSON 或 XML)在客户机和服务器之间传递数据，而在 gRPC 下，数据是以二进制格式在客户机和服务器端目标函数之间传
转载
2024-05-09 14:03:43
74阅读
gRPC简述由来gRPC 一开始由 google 开发，是一款语言中立、平台中立、开源的远程过程调用(RPC)系统gRPC 是什么？在 gRPC 里客户端应用可以像调用本地对象一样直接调用另一台不同的机器上服务端应用的方法，使得您能够更容易地创建分布式应用和服务。
原创
2021-07-22 10:11:09
186阅读
先决条件GoProtocol buffer compiler, protoc, version 3 https://github.com/protocolbuffers/protobuf/releases/tag/v25.0Go plugins for protocol compiler`go install google.golang.org/protobuf/cmd/protoc-gen-go
原创
2023-11-05 10:38:26
108阅读
gRPC的特征：基于 HTTP/2， 继而 提供了连接多路复用、Body 和 Header 压缩等机制。可以节省带宽、降低TCP链接次数、节省CPU使用和延长电池寿命等。 支持主流开发语言（C, C++, Python, PHP, Ruby, NodeJS, C#, Objective-C、Golang、Java） IDL (Interface Definition Language) 层使用了
原创
2023-07-12 16:24:38
58阅读
安装 流模式 #安装 方法1： go get -u -v google.golang.org/grpc 方法2： git clone https://github.com/grpc/grpc-go.git $GOPATH/pkg/mod/google.golang.org/grpc git clon ...
转载
2021-09-10 21:46:00
198阅读
2评论
原文： https://docs.microsoft.com/en-us/aspnet/core/grpc/?view=aspnetcore-3.1 Introduction to gRPC on .NET Core gRPC is a language agnostic, high-perform
转载
2020-07-30 18:54:00
141阅读
2评论
