目录场景一：业务服务器场景二：缓存服务器一致性哈希算法MD5算法一致性哈希算法代码实现场景一：业务服务器负载的概念就是希望把不同区域的用户（客户端）分发到不同的服务器上，让每个服务器都尽量均衡的接受同等数量的客户端请求，把压力分散于不同的服务器中，所以前面就需要有一台反向代理服务器，也叫负载均衡器。像我们用的nginx、lvs都是非常强大的负载均衡器，有反向代理功能。负载均衡算法就属于一致性哈希算
转载
2024-02-08 06:28:37
32阅读
概念负载均衡SLB（Server Load Balancer）是一种对流量进行按需分发的服务，通过将流量分发到不同的后段服务器来扩展应用系统的吞吐能力，并且可以清楚系统中的单点故障，提升系统可用性 。负载均衡的三种类型根据不同场景，slb可分为： 1）专为面向7层（http/https）的应用型负载均衡ALB alb具备处理复杂业务路由能力，与云原生服务深度集成，是云厂商提供的云原生ingress
转载
2024-02-23 21:07:28
174阅读
最近在看etcd客户端相关内容，想弄明白客户端如何应对服务端集群某节点故障的，从官网的客户端设计得到了答案：--------------------------------------------------------
原创
2022-05-24 13:21:59
617阅读
文章目录一、什么是 Session 丢失二、Nginx 如何来解决这个问题2.1 Session 保持三、Session 保持的其他方案3.1 Session 复制3.1 Session 共享四、各个方案的适用场景结语负载均衡后添加机器后，发现数据库的压力迅速上升，越来越多的用户说刚登陆后没多久，操作着就退出了，接着登陆，又退出了。这些问题背后都是由于一个「Session 丢失」问题导致的。一、什
CHAPTER 5: DESIGN CONSISTENT HASHING为了实现水平扩展，有效且均匀地分发请求/数据是很重要的在服务器上。一致散列是实现这一目标的常用技术。但首先，让我们深入了解一下这个问题。重组问题如果您有n个缓存服务器，那么平衡负载的常用方法是使用以下散列方法: serverIndex = hash(key) % N，其中N为服务器池的大小。让我们用一个例子来说明它是如何工作的
1、认识NacosNacos是阿里巴巴的产品，现在是SpringCloud中的一个组件。相比Eureka功能更加丰富，在国内受欢迎程度较高。2、安装参照官网：https://nacos.io/zh-cn/docs/quick-start.html0.版本选择您可以在Nacos的release notes及博客中找到每个版本支持的功能的介绍，当前推荐的稳定版本为2.0.3。1.预备环境准备Nacos
转载
2024-05-29 01:20:47
351阅读
一、负载均衡1.应用场景： 假设有三台缓存服务器s0,s1,s2，同时有三万张图片需要缓存，最好图片可以均匀的缓存到服务器上，这样可以分担缓存的压力。2.解决方法 对缓存下的键进行hash计算，哈希后的值是个整数，再用缓存服务器的数量对这个值进行取模计算，余数决定数据应该缓存到哪台服务器上。 hash（名称）%机器数=余数3.缺陷 将缓存服务器增加至3-4台，由于服务器数量发生变化，导致不能正常访
转载
2024-04-20 20:43:57
46阅读
项目文档： 我们先把项目down下来，它的目录结构如下：我们先去掉其他组件，单来看下gRPC的调用流程，下图是官方文档中的调用流程图：首先客户端（gRPC stub）调用A方法，发起RPC调用；对请求信息使用Protobuf进行对象序列化压缩；然后在服务端（gRPC Sever）接收到请求后，解码请求体，进行业务处理逻辑并返回；对响应结果使用Protobuf进行对象序列化压缩；客户端接
转载
2024-03-07 22:52:40
31阅读
在 Kubernetes（K8S）中使用 Nginx 来实现负载均衡的 ip_hash 策略是一种常见的做法。ip_hash 策略会根据客户端的 IP 地址来分配请求到后端的应用实例，以保证同一个 IP 的请求会始终分配到同一个后端实例，适用于需要保持会话一致性的场景。
下面将详细介绍如何在 K8S 中配置 Nginx 负载均衡的 ip_hash 策略，同时附上相应的示例代码和注释。
###
原创
2024-05-16 11:18:41
209阅读
本文简单介绍一下，如何基于ECMP，使用Quagga+LVS+Keepalived构建多活负载均衡方案1. 背景介绍负载均衡，主要用于大规模分布式集群下，提供高性能服务。为了给负载均衡器提供高可用，一般利用主备或者主主模式实现。主备模式即只有主负载均衡器提供负载均衡功能，当主负载均衡器出现异常时，自动切换到备负载均衡器，继续提供负载均衡功能。主主模式（也称之为双活负载均衡），两个负载均衡器同时提供
今天去面搜狐，聊到了一个问题，现在的负载均衡主要采用取模的方式，如果有一个机器故障了，或者我想再添加一台机器怎么处理？回来后查到了一致性hash算法。自己看了一下资料：先说一下大概思想，一致性Hash主要是在分布式算法中用的比较多。1.我们现在常用的是线性hash，这样万一有一个机器坏掉了，就容易造成数据丢失。如果换成环形hash，一定范围内的hash映射的是环形的下一个节点，就不会对其它机器的数
转载
2024-03-29 19:19:28
50阅读
前言现在有一个场景：一个客户端去访问服务端，只能一直访问一台机器，因为有一些用户数据就存在该服务器上面，如果访问其他服务器的话，这个用户数据就丢了，如何用算法来解决这个问题？一致性哈希环算法base 这里的环结构是我们想象的、抽象出来的，最朴素的想法，就是给一个请求，用哈希函数等操作去计算出它对应到的服务器位置，然后分配即可。 客户端如何映射到哈希环上的节点呢?比如有一个userId =1去请求：
转载
2024-03-18 23:23:23
142阅读
正向代理： 正向代理类似于一个跳板机，代理访问外部资源，如当前计算机不能访问某一个目标网站，而有一台服务机器可以访问目标网站，此时要我们要访问目标服务器时，可以通过代理服务器，把我们无法获取的数据返回给我们。方向代理（Reverse Proxy） 反向代理方式是指以代理服务器来接受Internet的连接请求，然后将请求转发给内部网络的服务器上，，并将服务器上的响应结果返回给Internet上的连接
转载
2024-04-09 20:41:47
73阅读
第一天 PostgreSQL的安装, 架构基础介绍, 如何创建和访问数据库; SQL语言基础(创建表, 操作表数据, 表关联查询, 聚合查询); SQL高级应用(视图, 外键, 事务, 窗口函数, 继承); SQL语义结构介绍(关键字, 常量, 操作符, 特殊字符, 注释, 操作符的优先级); 值表达式介绍(列, 位置参数, 数组下标, field引用, 操作符调用, 函数调用, 聚
转载
2024-08-25 16:39:26
23阅读
集群部署切换命令行版本到v3：export ETCDCTL_API=3本地集群部署官方工具：goreman。提供基于Procfile配置文件的方式，部署简单。实际使用时，考虑服务的可用性，一般采用多机集群。本地集群可用于测试时快速搭建服务，具体操作参考官方文档，个人推荐测试时也是用多机集群部署方案。多机集群参考自官方文档。共有三种集群部署方案：Staticetcd DiscoveryDNS Dis
客户端通过etcdctl执行get命令etcdctl get name --endpoints localhost:12379,192.158.00.32:12379client端首先是client会解析这条命令，包括其中的get API方法，key值，请求server地址。解析完之后etcdctl会创建一个clientv3库对象，etcd clientv3会采用gRPC负载均衡机制来实现负载均衡
一致性哈希先构造一个长度为2^32的一致性Hash环，根据服务器节点地址(ip+port)的Hash值将服务器节点映射到这个Hash环上，然后根据用户请求的Key值(用户ID)计算得到其Hash值，接着在Hash环上按顺时针或逆时针查找距离这个Key值的Hash值最近的服务器节点，由该服务器节点处理此次用户请求。如图：一致性哈希是对普通哈希的改进，有效的解决了稳定性的问题。当服务器节点加入或退出时
负载均衡(参照网络)负载均衡建立在现有网络结构之上，它提供了一种廉价有效透明的方法扩展网络设备和服务器的带宽、增加吞吐量、加强网络数据处理能力、提高网络的灵活性和可用性。负载均衡（Load Balance）其意思就是分摊到多个操作单元上进行执行，例如Web服务器、FTP服务器、企业关键应用服务器和其它关键任务服务器等，从而共同完成工作任务。Nginx五种算法1.round robin（默认）轮询方
转载
2024-02-29 23:23:02
99阅读
nginx负载均衡策略：ip_hash、url_hash
前言：目前，许多的web应用，或者web接口，都会在服务器的入口处，使用一个服务器容器来监听端口，然后进行请求转发，例如nginxApache等。服务器容器对应整个web服务有着至关重要的作用，包括：可以很好的管理服务进程，进行代理，对请求的预处理，以及负载均衡。今天要讨论的重点为在服务器集群中，合理使用nginx的hash策略做更有意义
转载
2022-01-25 16:16:47
1424阅读
gRPC 是 Google 开源的非常优秀的 RPC 框架，在今天的文章中FinClip的工程师来跟大家聊聊如何降低后端重复请求的问题。概述随着微服务架构的日趋流行，传统的业务服务正在从大而全的单体结构解体转变成小而多的分散服务。在微服务架构中，每个后端服务的职责将被细分，整体架构由大量微小服务相互调用协作来运行。这样的架构可以带来很多好处，微服务的逻辑更加简单；不同的微服务方便选择适用的编程语言
转载
2024-02-12 14:44:14
157阅读
