Zuul 超时、重试、并发参数设置

时间:2024-11-15 16:54:31

一、 Zuul 服务网关

服务网关 = 路由转发 + 过滤器

1、路由转发:接收一切外界请求,转发到后端的微服务上去;

2、过滤器:在服务网关中可以完成一系列的横切功能,例如权限校验、限流以及监控等,这些都可以通过过滤器完成(其实路由转发也是通过过滤器实现的)。

Spring Cloud Zuul包含了对Hystrix和Ribbon的依赖,下面将一一介绍

二、ribbon 参数配置

提供客户端的负载均衡功能,spring cloud的负载均衡都用到这个库。例如:fegin

它提供了超时重试的功能,配置如下:

ribbon:
    ReadTimeout: 2000
    ConnectTimeout: 1000
    MaxAutoRetries: 1
    MaxAutoRetriesNextServer: 1

:该参数用来设置路由转发请求的时候,创建请求连接的超时时间。若出现路由请求连接超时,会自动进行重试路由请求,如果重试依然失败,Zuul会抛出异常。

:该参数用来设置路由转发请求的超时时间。它的处理与相似,若出现路由请求连接超时,会自动进行重试路由请求,如果重试依然失败,Zuul会抛出异常。

MaxAutoRetries:最大自动重试次数

MaxAutoRetriesNextServer:最大自动重试下一个服务的次数

总的超时时间 = (1 + MaxAutoRetries + MaxAutoRetriesNextServer) * ReadTimeout

如果超时了,但是熔断机制还没有超时,则zuul会异常

三、hystrix 参数配置

提供线程隔离和断路器的自我保护功能

断路器在超时会自动进行熔断,防止因某一服务的故障出现雪崩,可以设置熔断fallback

隔离策略

  • 线程隔离
  • 信号量隔离

隔离策略都是控制线程数量的,只不过是控制的方式不同。 hystrix默认的隔离策略是thread,但是在zuul中,默认的hystrix隔离策略是semaphore

隔离策略和并发设置

隔离策略是THREAD(线程):

设置线程池

: THREAD
: 10
: 10
: -1 # 如该值为-1,那么使用的是SynchronousQueue,否则使用的是LinkedBlockingQueue。注意,修改MQ的类型需要重启。例如从-1修改为100,需要重启,因为使用的Queue类型发生了变化

如果想对特定的HystrixThreadPoolKey 进行配置,则将default 改为 HystrixThreadPoolKey 即可。

隔离策略是SEMAPHORE(信号量)

: SEMAPHORE
: 10 # 默认值

如果想对指定的HystrixCommandKey 进行配置,则将default 改为HystrixCommandKey 即可。

超时设置:

用来设置threadsemaphore两种隔离策略的超时时间,默认值是1000。

hystrix:
  command:
    default:
      execution:
        timeout:
          enabled: true
        isolation:
          thread:
            timeoutInMilliseconds: 8000

不设置隔离策略,hystrix的超时也是生效的(我使用的是Hystrix1.4.2)

  • 建议设置这个参数,在Hystrix 1.4.0之前,semaphore-isolated隔离策略是不能超时的,从1.4.0开始semaphore-isolated也支持超时时间了。

  • 建议通过CommandKey设置不同微服务的超时时间,.[CommandKey].

这个超时时间要根据所对应的业务和服务器所能承受的负载来设置,要根据业务的平均响应时间设置,一般是大于平均响应时间的20%~100%,最好是根据压力测试结果来评估,这个值设置太大,会导致线程不够用而会导致太多的任务被fallback;设置太小,一些特殊的慢业务失败率提升,甚至会造成这个业务一直无法成功,在重试机制存在的情况下,反而会加重后端服务压力。

其他的设置:

#强制打开熔断器,如果打开这个开关,那么拒绝所有request
=false

四、 zuul 参数配置

超时设置

  • 如果Zuul使用服务发现,则需要使用功能区属性配置这些超时。
zuul:
  routes:
    users:
      path: /myusers/**
      serviceId: users
  • 如果通过指定URL配置了Zuul路由,则需要使用-timeout-millis-timeout-millis
 zuul:
  routes:
    users:
      path: /myusers/**
      url: /users_service

这些简单的URL路由不会被执行为HystrixCommand,也不能使用Ribbon对多个URL进行负载平衡。

隔离策略设置

隔离策略

  • 线程隔离
  • 信号量隔离
zuul:
 ribbonIsolationStrategy: THREAD

并发设置:

当Zuul的隔离策略为SEMAPHORE时:

设置默认最大信号量:

zuul:
  semaphore:
    max-semaphores: 100 # 默认值

设置指定服务的最大信号量:

zuul:
  eureka:
    <commandKey>:
      semaphore:
        max-semaphores: 100 # 默认值

当Zuul的隔离策略为THREAD时

可为Hystrix配置独立线程池,如果不设置独立线程池,那么HystrixThreadPoolKey 是 RibbonCommand

五、Hystrix仪表盘 不显示线程的解决办法

zuul集成hystrix默认使用的是信号量隔离,不是线程隔离。
-isolation-strategy=THREAD 修改为线程隔离方式

参考:
Spring Cloud系列(二十五) Zuul配置Hystrix和Ribbon(Finchley.RC2版本)
Spring Cloud各组件调优参数
Hystrix semaphore和thread隔离策略的区别及配置参考
zuul 参数调优

Ribbon重试机制与Hystrix熔断机制的配置问题
spring cloud zuul 配置请求并发

SpringCloud踩坑记录
spring cloud项目性能调优系列一:网关zuul(1)
zuul 并发下的重试配置
Zuul超时问题,微服务响应超时,zuul进行熔断