1、负载均衡

  Ribbon 虽然不是显示的配置为一个子项目,但是无论是在 API 网关的转发请求,还是服务之间的调用 Feign ,都是通过 Ribbon 来做负载均衡的。

  负载均衡,主要是为了对系统的高可用、网络压力的缓解和处理能力扩容。

2、客户端负载均衡

  所有客户端节点都维护自己要访问的服务端清单,这些清单主要来源于注册中心(例如 Eureka Server),并且也是用心跳机制去维护服务端清单的健康性。

  微服务中使用负载均衡只需要两步:

  1)、服务提供者只需要启动多个服务实例,注册到一个注册中心,或者多个相关联的注册中心。

  2)、服务消费者直接通过调用,被 @LoadBalanced 注解修饰过的 RestTemplate 来实现面向服务的接口调用。

3、原理

  RestTemplate有四种不同的请求类型和多种参数类型的服务调用实现。

  GET(查) 、 POST(增) 、PUT(改) 、DELETE(删) 四种请求。

  常见的异服务调用: (仅举例 get 请求)

  restTemplate.getForEntity(url,User.class):传入url,拼接参数。返回的对象 getBody() 就能获取到异服务调用的结果集。

  restTemplate.getObejct():入参和返回值都类似 getForEntity() 方法,只是返回实例不需要再 getBody()。

  源码分析:

  @LoadBalanecd 注解是用来给 RestTemplate 做标记,以使用负载均衡的客户端来配置它。(LoadBalancerClient)

  在 LoadBalancerClient 接口中的参数的定义:

  ServiceInstance choose(String serviceId):根据传入的服务名 serviceId,从负载均衡器中挑选一个对应服务的实例。

  T execute(String serviceId,LoadBalancerRequest request) throws IOException:使用从负载均衡器中挑选出的服务实例来执行请求内容。

  URI reconstructURI(ServiceInstance instance,URI original):为系统构建(返回)一个合适的 host:port 形式的URI。

  Ribbon 实现负载均衡自动化配置,需要满足以下两个条件:

  @ConditionalOnClass(RestTemplate.class):RestTemplate 类必须存在于当前工程的环境中。

  @ConditionalOnBean(LoadBalancerClient.class):在 Spring 的 Bean 工程中必须有 LoadBalancerClient 的实现 Bean。

  通过 LoadBalancerInterceptor 拦截器将 RestTemplate 变成客户端负载均衡。

  实现原理:被@LoadBalanced 注解修饰的 RestTemplate 对象向外发起 HTTP 请求时,会被 LoadBalancerIntercepetor 类的 intercept 函数拦截。在使用RestTemplate 时采用了服务名作为host,所以直接从 HttpRequest 的URI对象中通过 getHost() 拿到服务名,调用 execute 函数去根据服务名来选择 实例 并发起实际的请求。(实例是IP地址)

4、负载均衡策略

  顶层为 IRule 规则接口,一个 AbstractLoadBalancerRule 继承了 IRule 接口,并且有一系列的实现规则。

  RandomRule:根据一个随机数,去获取可用实例列表,用随机数作为下标获取一个可用服务实例。

  RoundRobinRule:线性轮询方式依次选择每个服务实例。

  RetryRule:重试机制的实例选择功能。内部默认使用了 RoundRobinRule 实例。设定一个时间阈值,尝试时间超过阈值就返回 null。

  WeightedResponseTimeRule:对 RoundRobinRule 策略的扩展,根绝实例的运行情况,来计算权重来挑选实例,达到更优的分配效果。其中三个核心内容:

  1)、定时任务,默认30秒执行一次,为每个服务实例计算权重。

  2)、权重计算:计算每个实例实例平均响应时间,总平均响应时间,获取每个实例的权重区间。例如A、B、C、D 平均响应时间10,40,80,100,总230。计算A=230-10=[0,220],B=220+230-40=(220,410],C=(410,560],D=(560,690]。

  结论是平均响应时间越短,权重区间宽度越大,被选中的机会越大。

  3)、实例选择

  ZoneAvoidanceRule:选择区域策略,过滤实例,得到可用实例。(先过滤清单,再轮询选择)

  调用顺序(选择服务器逻辑): loadBalancerClient ---> ILoadBalancer(ZoneAwareLoadBalancer) 选择区域---> IRule (ZoneAvoidanceRule) 根据算法,选择具体服务实例。

  自己实现一个选择服务实例的负载方法:

spring cloud gateway 本地lb_权重

 

spring cloud gateway 本地lb_权重_02

 

5、配置详解

  与 Eureka 结合:Eureka 会为架构维护所有服务的实例清单。由于 Ribbon 默认实现了区域亲和策略,可以通过 Eureka 实例的元数据配置来实现区域化的实例配置方案。比如将不同机房的实例配置成不同的区域值,作为跨区域的容错机制实现。

  实现也很简单,在服务实例的元数据中增加 zone 参数来指定自己所在的区域,例如:

  eureka.instance.metadataMap.zone=chengdu. (配置文件)

  @Bean (main 方法里)

  @LoadBalanced

  RestTemplate restTemplate() {

    return new RestTemplate();

  }

  在调用类里注入 RestTemplate 类,并且

  restTemplate.getForEntity("URL",String.class).getBody();

6、重试机制

  Eureka 的服务治理机制强调了 CAP 原理的 AP,可用性和可靠性(C 一致性)。

  Eureka 为了实现更高的服务可用性,牺牲了一定的一致性。例如 Eureka 会因为超过85% 的实例丢失心跳而出发保护机制,注册中心会保留此时的所有节点。(极端情况接受故障也不丢掉“健康”实例)

  为了增强对服务故障实例的容错,所以加入了重试机制。通过简单的配置,那些通过 RestTemplate 实现的服务访问,就会自动根据配置来实现重试策略。

  

spring cloud gateway 本地lb_响应时间_03

 

  重试次数,就是访问到故障请求,再尝试访问同一个实例,如果不行,就换一个实例访问。

  这两个重试由最后两个参数决定。