SpringCloud的入门学习之概念理解、Ribbon负载均衡入门

1、Ribbon负载均衡,Spring Cloud Ribbon是基于Netflix Ribbon实现的一套客户端、负载均衡的工具。

   答:简单的说,Ribbon是Netflix发布的开源项目,主要功能是提供客户端的软件负载均衡算法,将Netflix的中间层服务连接在一起。Ribbon客户端组件提供一系列完善的配置项如连接超时,重试等。简单的说,就是在配置文件中列出Load Balancer(简称LB,负载均衡)后面所有的机器,Ribbon会自动的帮助你基于某种规则(如简单轮询,随机连接等)去连接这些机器。我们也很容易使用Ribbon实现自定义的负载均衡算法。

2、Ribbon可以干什么呢?

  答:负载均衡Load Balancer,LB,即负载均衡(Load Balance),在微服务或分布式集群中经常用的一种应用。负载均衡简单的说就是将用户的请求平摊的分配到多个服务上,从而达到系统的HA。常见的负载均衡有软件Nginx,LVS,硬件 F5等。相应的在中间件,例如:dubbo和SpringCloud中均给我们提供了负载均衡,SpringCloud的负载均衡算法可以自定义。

3、负载均衡(Load Balance)的种类,如下所示。

  1)、集中式LB(偏向于硬件),即在服务的消费方和提供方之间使用独立的LB设施(可以是硬件,如F5, 也可以是软件,如nginx), 由该设施负责把访问请求通过某种策略转发至服务的提供方。
  2)、进程内LB(偏向于软件),将LB逻辑集成到消费方,消费方从服务注册中心获知有哪些地址可用,然后自己再从这些地址中选择出一个合适的服务器。Ribbon就属于进程内LB,它只是一个类库,集成于消费方进程,消费方通过它来获取到服务提供方的地址。

4、Ribbon负载均衡的初步使用。修改之前开发的消费端microservicecloud-consumer-dept-80。Ribbon的依赖包,需要和eureka进行整合。

 1 <project xmlns="http://maven.apache.org/POM/4.0.0"
 2     xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"
 3     xsi:schemaLocation="http://maven.apache.org/POM/4.0.0 
 4     http://maven.apache.org/xsd/maven-4.0.0.xsd">
 5     <modelVersion>4.0.0</modelVersion>
 6     <parent>
 7         <groupId>com.bie.springcloud</groupId>
 8         <artifactId>microservicecloud</artifactId>
 9         <version>0.0.1-SNAPSHOT</version>
10     </parent>
11     <artifactId>microservicecloud-consumer-dept-80</artifactId>
12 
13     <dependencies>
14         <!-- 自己定义的api -->
15         <dependency>
16             <groupId>com.bie.springcloud</groupId>
17             <artifactId>microservicecloud-api</artifactId>
18             <version>${project.version}</version>
19         </dependency>
20         <dependency>
21             <groupId>org.springframework.boot</groupId>
22             <artifactId>spring-boot-starter-web</artifactId>
23         </dependency>
24         <!-- 修改后立即生效,热部署 -->
25         <dependency>
26             <groupId>org.springframework</groupId>
27             <artifactId>springloaded</artifactId>
28         </dependency>
29         <dependency>
30             <groupId>org.springframework.boot</groupId>
31             <artifactId>spring-boot-devtools</artifactId>
32         </dependency>
33         <!-- 将微服务consumer客户端注册进eureka -->
34         <!-- eureka需要依赖如下两个依赖包 -->
35         <dependency>
36             <groupId>org.springframework.cloud</groupId>
37             <artifactId>spring-cloud-starter-eureka</artifactId>
38         </dependency>
39         <dependency>
40             <groupId>org.springframework.cloud</groupId>
41             <artifactId>spring-cloud-starter-config</artifactId>
42         </dependency>
43         <!-- Ribbon相关,需要和eureka进行整合 -->
44         <dependency>
45             <groupId>org.springframework.cloud</groupId>
46             <artifactId>spring-cloud-starter-ribbon</artifactId>
47         </dependency>
48 
49     </dependencies>
50 
51 </project>

修改配置文件application.yml。

1 server:
2   port: 80
3  
4 eureka:
5   client: # 客户端注册进eureka服务列表内
6     register-with-eureka: false # eureka客户端,自己不能注册
7     service-url:
8       defaultZone: http://eureka7001.com:7001/eureka/,http://eureka7002.com:7002/eureka/,http://eureka7003.com:7003/eureka/

RestTemplate提供了多种便捷访问远程Http服务的方法, 是一种简单便捷的访问restful服务模板类,是Spring提供的用于访问Rest服务的客户端模板工具集。@LoadBalanced注解是Ribbon的负载均衡配置。

 1 package com.bie.config;
 2 
 3 import org.springframework.cloud.client.loadbalancer.LoadBalanced;
 4 import org.springframework.context.annotation.Bean;
 5 import org.springframework.context.annotation.Configuration;
 6 import org.springframework.web.client.RestTemplate;
 7 
 8 /**
 9  * 
10  *
11  * @author biehl
12  * 
13  *         RestTemplate提供了多种便捷访问远程Http服务的方法, 是一种简单便捷的访问restful服务模板类,
14  *         是Spring提供的用于访问Rest服务的客户端模板工具集
15  * 
16  */
17 @Configuration
18 public class ConfigBean {
19 
20     @Bean
21     @LoadBalanced // @LoadBalanced是Ribbon的负载均衡配置。
22     // Spring Cloud Ribbon是基于Netflix Ribbon实现的一套客户端、负载均衡的工具。
23     public RestTemplate getRestTemplate() {
24         return new RestTemplate();
25     }
26 
27 }

修改客户端访问类。修改成微服务的名称,按照名称进行访问微服务。

 1 package com.bie.controller;
 2 
 3 import java.util.List;
 4 
 5 import org.springframework.beans.factory.annotation.Autowired;
 6 import org.springframework.web.bind.annotation.PathVariable;
 7 import org.springframework.web.bind.annotation.RequestBody;
 8 import org.springframework.web.bind.annotation.RequestMapping;
 9 import org.springframework.web.bind.annotation.RestController;
10 import org.springframework.web.client.RestTemplate;
11 
12 import com.bie.po.Dept;
13 
14 /**
15  * 
16  * RestTemplate提供了多种便捷访问远程Http服务的方法, 是一种简单便捷的访问RESTFul服务模板类,
17  * 是Spring提供的用于访问Rest服务的客户端模板工具集
18  *
19  * 使用restTemplate访问restful接口非常的简单粗暴无脑。 (url, requestMap,
20  * ResponseBean.class)这三个参数分别代表 REST请求地址、请求参数、HTTP响应转换被转换成的对象类型。
21  * 
22  * 
23  * @author biehl
24  *
25  */
26 @RestController
27 public class DeptControllerConsumer {
28 
29     // private static final String REST_URL_PREFIX = "http://localhost:8001";
30     // 修改客户端访问类。修改成微服务的名称,按照名称进行访问微服务.
31     private static final String REST_URL_PREFIX = "http://MICROSERVICECLOUD-PROVIDER-DEPT";
32 
33     @Autowired
34     private RestTemplate restTemplate;
35 
36     /**
37      * 
38      * @param dept
39      * @return
40      */
41     @RequestMapping(value = "/consumer/dept/add")
42     public boolean addDept(@RequestBody Dept dept) {
43 
44         return restTemplate.postForObject(REST_URL_PREFIX + "/dept/add", dept, Boolean.class);
45     }
46 
47     /**
48      * 注意,从路径中获取到参数值,使用注解@PathVariable
49      * 
50      * @param id
51      * @return
52      */
53     @RequestMapping(value = "/consumer/dept/get/{id}")
54     public Dept getById(@PathVariable(value = "id") Long id) {
55 
56         return restTemplate.getForObject(REST_URL_PREFIX + "/dept/get/" + id, Dept.class);
57     }
58 
59     /**
60      * 
61      * @return
62      */
63     @SuppressWarnings("unchecked")
64     @RequestMapping(value = "/consumer/dept/list")
65     public List<Dept> list() {
66 
67         return restTemplate.getForObject(REST_URL_PREFIX + "/dept/list", List.class);
68     }
69 
70     // 测试@EnableDiscoveryClient,消费端可以调用服务发现
71     @RequestMapping(value = "/consumer/dept/discovery")
72     public Object discovery() {
73         return restTemplate.getForObject(REST_URL_PREFIX + "/dept/discovery", Object.class);
74     }
75 
76 }

将consumer注册到Eureka Server注册中心。

 1 package com.bie;
 2 
 3 import org.springframework.boot.SpringApplication;
 4 import org.springframework.boot.autoconfigure.SpringBootApplication;
 5 import org.springframework.cloud.netflix.eureka.EnableEurekaClient;
 6 
 7 @SpringBootApplication
 8 @EnableEurekaClient // 将consumer注册到Eureka Server注册中心
 9 public class MicroServiceCloudConsumerApplication {
10 
11     public static void main(String[] args) {
12         SpringApplication.run(MicroServiceCloudConsumerApplication.class, args);
13     }
14 
15 }

将三个节点的Eureka Server启动以后,再启动你的服务提供者、服务消费者。Ribbon和Eureka整合以后服务调用者,调用服务提供者提供的服务不需要再关心地址和端口号了。效果如下所示:

5、Ribbon的负载均衡。Ribbon的架构使用说明,如下所示:

  1)、Ribbon在工作时分成两步。

    a、第一步先选择 EurekaServer ,它优先选择在同一个区域内负载较少的server。
    b、第二步再根据用户指定的策略,在从server取到的服务注册列表中选择一个地址。其中Ribbon提供了多种策略:比如轮询、随机和根据响应时间加权。

  2)、参考microservicecloud-provider-dept-8001,新建两个子模块工程,分别命名为microservicecloud-provider-dept-8002、microservicecloud-provider-dept-8003。然后参考cloudDB01新建两个数据库cloudDB02、cloudDB03。然后修改microservicecloud-provider-dept-8002、microservicecloud-provider-dept-8003子模块的配置文件application.yml。主要修改的是端口号,数据库链接,对外暴漏的统一的服务实例名称即spring.application.name这个名称要一致。

microservicecloud-provider-dept-8002子模块的配置文件application.yml,内容如下所示:

 1 server:
 2   port: 8002  
 3 
 4 mybatis:
 5   config-location: classpath:mybatis/mybatis.cfg.xml        # mybatis配置文件所在路径
 6   type-aliases-package: com.bie.po                          # 所有实体类别名类所在包
 7   mapper-locations:
 8   - classpath:mybatis/mapper/**/*.xml                       # mapper映射文件  
 9   
10 spring:
11   application:
12     name: microservicecloud-provider-dept                   # 微服务的名称,多节点名称要一致。
13   datasource:
14     type: com.alibaba.druid.pool.DruidDataSource            # 当前数据源操作类型
15     driver-class-name: org.gjt.mm.mysql.Driver              # mysql驱动包
16     url: jdbc:mysql://localhost:3306/cloudDB02              # 数据库名称
17     username: root
18     password: 123456
19     dbcp2:
20       min-idle: 5                                           # 数据库连接池的最小维持连接数
21       initial-size: 5                                       # 初始化连接数
22       max-total: 5                                          # 最大连接数
23       max-wait-millis: 200                                  # 等待连接获取的最大超时时间
24 
25 eureka:
26   client: # 客户端注册进eureka服务列表内
27     service-url:
28       # defaultZone: http://localhost:7001/eureka
29       defaultZone: http://eureka7001.com:7001/eureka/,http://eureka7002.com:7002/eureka/,http://eureka7003.com:7003/eureka/
30   instance: 
31     instance-id: microservicecloud-provider-dept8002 # 将eureka-server注册中心的服务,显示你想看的名称
32     prefer-ip-address: true # 访问路径可以显示IP地址    
33 
34      
35              
36 info: # 微服务info内容显示详细信息
37   app.name: microservicecloud-provider-dept # 应用名称
38   company.name: www.baidu.com # 公司地址
39   build.artifactId: $project.artifactId$  # 构建项目artifactId
40   build.version: $project.version$ # 构建项目版本号
41       

microservicecloud-provider-dept-8003子模块的配置文件application.yml,内容如下所示:

 1 server:
 2   port: 8003
 3 
 4 mybatis:
 5   config-location: classpath:mybatis/mybatis.cfg.xml        # mybatis配置文件所在路径
 6   type-aliases-package: com.bie.po                          # 所有实体类别名类所在包
 7   mapper-locations:
 8   - classpath:mybatis/mapper/**/*.xml                       # mapper映射文件  
 9   
10 spring:
11   application:
12     name: microservicecloud-provider-dept                   # 微服务的名称
13   datasource:
14     type: com.alibaba.druid.pool.DruidDataSource            # 当前数据源操作类型
15     driver-class-name: org.gjt.mm.mysql.Driver              # mysql驱动包
16     url: jdbc:mysql://localhost:3306/cloudDB03                # 数据库名称
17     username: root
18     password: 123456
19     dbcp2:
20       min-idle: 5                                           # 数据库连接池的最小维持连接数
21       initial-size: 5                                       # 初始化连接数
22       max-total: 5                                          # 最大连接数
23       max-wait-millis: 200                                  # 等待连接获取的最大超时时间
24 
25 eureka:
26   client: # 客户端注册进eureka服务列表内
27     service-url:
28       # defaultZone: http://localhost:7001/eureka
29       defaultZone: http://eureka7001.com:7001/eureka/,http://eureka7002.com:7002/eureka/,http://eureka7003.com:7003/eureka/
30   instance: 
31     instance-id: microservicecloud-provider-dept8003 # 将eureka-server注册中心的服务,显示你想看的名称
32     prefer-ip-address: true # 访问路径可以显示IP地址    
33 
34      
35              
36 info: # 微服务info内容显示详细信息
37   app.name: microservicecloud-provider-dept # 应用名称
38   company.name: www.baidu.com # 公司地址
39   build.artifactId: $project.artifactId$  # 构建项目artifactId
40   build.version: $project.version$ # 构建项目版本号
41       

  3)、最后启动3个节点的Eureka Server注册中心集群,启动3个节点的服务提供者,测试三个服务提供者都可以正常访问数据库。启动服务的消费者,客户端通过Ribbon完成负载均衡并访问三个节点的服务提供者,主要观察每次返回的结果,各不相同,完成负载均衡的效果。

启动3个节点的服务提供者,测试三个服务提供者都可以正常访问数据库。如下所示:

启动3个节点的Eureka Server注册中心集群,如下所示:

启动服务的消费者,客户端通过Ribbon完成负载均衡并访问三个节点的服务提供者,主要观察每次返回的结果,各不相同,完成负载均衡的效果。

  

  4)、总结,Ribbon其实就是一个软负载均衡的客户端组件,它可以和其他所请求的客户端结合使用,和Eureka结合只是其中的一个实例。

6、Ribbon的核心组件IRule,IRule根据特定算法中从服务列表中选取一个要访问的服务。七种默认算法如下所示:

  1)、RoundRobinRule轮询算法。一个节点一次。
  2)、RandomRule随机算法。随机选择一个节点。
  3)、AvaliabilityFilteringRule会先过滤掉由于多次访问故障而处于断路器跳闸状态的服务,还有并发的连接数量超过阀值的服务,然后对剩余的服务列表按照轮询策略进行访问。
  4)、WeightedResponseTimeRule根据平均响应时间计算所有服务的权重,响应时间越快服务权重越大被选中的概率越大。刚启动的时候如果统计信息不足,则使用  5)、RoundRobinRule策略,等统计信息足够。会切换到WeightedResponseTimeRule。
  6)、RetryRule先按照RoundRobinRule的策略的获取服务,如果获取服务失败,则在指定的时候内会重试,获取可用的服务。
  7)、BestAvaliableRule会先过滤掉由于多次访问故障而处于断路器跳闸状态的服务,然后选择一个并发量最小的服务。
  8)、ZoneAvoidanceRule默认规则,复合判断server所在区域的性能和server的可用性选择服务器。

在消费端,可以在初始化配置文件里面,将默认的轮询算法,修改为自己想使用的默认算法。

 1 package com.bie.config;
 2 
 3 import org.springframework.cloud.client.loadbalancer.LoadBalanced;
 4 import org.springframework.context.annotation.Bean;
 5 import org.springframework.context.annotation.Configuration;
 6 import org.springframework.web.client.RestTemplate;
 7 
 8 import com.netflix.loadbalancer.IRule;
 9 import com.netflix.loadbalancer.RetryRule;
10 
11 /**
12  * 
13  *
14  * @author biehl
15  * 
16  *         RestTemplate提供了多种便捷访问远程Http服务的方法, 是一种简单便捷的访问restful服务模板类,
17  *         是Spring提供的用于访问Rest服务的客户端模板工具集
18  * 
19  */
20 @Configuration
21 public class ConfigBean {
22 
23     @Bean
24     @LoadBalanced // @LoadBalanced是Ribbon的负载均衡配置。
25     // Spring Cloud Ribbon是基于Netflix Ribbon实现的一套客户端、负载均衡的工具。
26     public RestTemplate getRestTemplate() {
27         return new RestTemplate();
28     }
29 
30     // 默认是轮询算法,这里可以选择其他算法,方法如下所示:
31     public IRule iRule() {
32         // 使用随机算法替换默认的轮询算法。
33         // return new RandomRule();
34 
35         // 先按照RoundRobinRule的策略的获取服务,如果获取服务失败,则在指定的时候内会重试,获取可用的服务。
36         return new RetryRule();
37     }
38 
39 }

7、自定义Ribbo的负载均衡策略,不再使用七种默认的算法。使用自定义的算法。

  注意:官方文档明确给出了警告,这个自定义配置类不能放在@ComponentScan所扫描的当前包下以及子包下,否则我们自定义的这个配置类会被所有的Ribbon客户端所共享,也就是说我们达不到特殊定制的目的了。

开始修改主启动类,添加@RibbonClient注解,指定服务提供者的项目名称,以及提供自定义的算法策略,如下所示:

 1 package com.bie;
 2 
 3 import org.springframework.boot.SpringApplication;
 4 import org.springframework.boot.autoconfigure.SpringBootApplication;
 5 import org.springframework.cloud.netflix.eureka.EnableEurekaClient;
 6 import org.springframework.cloud.netflix.ribbon.RibbonClient;
 7 
 8 import com.iRule.RibbonSelfRule;
 9 
10 /**
11  * 官方文档明确给出了警告,这个自定义配置类不能放在@ComponentScan所扫描的当前包下以及子包下,
12  * 否则我们自定义的这个配置类会被所有的Ribbon客户端所共享,也就是说我们达不到特殊定制的目的了。
13  *
14  * @author biehl
15  *
16  */
17 @SpringBootApplication
18 @EnableEurekaClient // 将consumer注册到Eureka Server注册中心
19 @RibbonClient(name = "MICROSERVICECLOUD-PROVIDER-DEPT", configuration = RibbonSelfRule.class)
20 // 向启动类添加@RibbonClient。在启动该微服务的时候就能加载我们自定义的Ribbon配置类,从而使配置生效。
21 public class MicroServiceCloudConsumerApplication {
22 
23     public static void main(String[] args) {
24         SpringApplication.run(MicroServiceCloudConsumerApplication.class, args);
25     }
26 
27 }

可以先使用Ribbon提供的默认算法,测试通过这种方法,是否可以使用自定义算法策略。可以自己进行测试,这里省略。

 1 package com.iRule;
 2 
 3 import org.springframework.context.annotation.Bean;
 4 import org.springframework.context.annotation.Configuration;
 5 
 6 import com.netflix.loadbalancer.IRule;
 7 import com.netflix.loadbalancer.RandomRule;
 8 
 9 /**
10  * 
11  *
12  * @author biehl
13  * 
14  *         官方文档明确给出了警告,
15  * 
16  *         这个自定义配置类不能放在@ComponentScan所扫描的当前包下以及子包下,
17  * 
18  *         否则我们自定义的这个配置类会被所有的Ribbon客户端所共享,
19  * 
20  *         也就是说我们达不到特殊定制的目的了。
21  *
22  * 
23  */
24 @Configuration
25 public class RibbonSelfRule {
26 
27     @Bean
28     public IRule iRule() {
29         // Ribbon默认是轮询,这里自定义是随机。
30         return new RandomRule();
31     }
32 
33 }

 可以参考官网的案例,进行升级和改造,如下所示:

  1 package com.iRule;
  2 
  3 import java.util.List;
  4 import java.util.Random;
  5 
  6 import com.netflix.client.config.IClientConfig;
  7 import com.netflix.loadbalancer.AbstractLoadBalancerRule;
  8 import com.netflix.loadbalancer.ILoadBalancer;
  9 import com.netflix.loadbalancer.Server;
 10 
 11 /**
 12  * 
 13  *
 14  * @author biehl
 15  * 
 16  *         随机算法,从官方网址拷贝的。
 17  *
 18  */
 19 public class RandomRule_ZDY extends AbstractLoadBalancerRule {
 20 
 21     // 创建一个Random对象
 22     Random rand;
 23 
 24     public RandomRule_ZDY() {
 25         rand = new Random();
 26     }
 27 
 28     /**
 29      * Randomly choose from all living servers
 30      * 
 31      * 返回给具体服务的那一个服务器
 32      * 
 33      */
 34     // @edu.umd.cs.findbugs.annotations.SuppressWarnings(value =
 35     // "RCN_REDUNDANT_NULLCHECK_OF_NULL_VALUE")
 36     public Server choose(ILoadBalancer lb, Object key) {
 37         // 判断如果是null,就返回null
 38         if (lb == null) {
 39             return null;
 40         }
 41         // 定义服务器Server类
 42         Server server = null;
 43 
 44         // 循环判断server是否等于null,server初始值是null
 45         while (server == null) {
 46             // 判断线程是否中断,如果中断返回null
 47             if (Thread.interrupted()) {
 48                 return null;
 49             }
 50             // 获取到活的可达的服务器节点。活着的可以提供服务的服务器。
 51             List<Server> upList = lb.getReachableServers();
 52             // 获取到所有的服务器节点
 53             List<Server> allList = lb.getAllServers();
 54 
 55             // 获取到所有服务器节点的个数
 56             int serverCount = allList.size();
 57             // 如果获取到的所有服务器节点的个数等于0,就返回null
 58             if (serverCount == 0) {
 59                 /*
 60                  * No servers. End regardless of pass, because subsequent passes only get more
 61                  * restrictive.
 62                  */
 63                 return null;
 64             }
 65 
 66             // 如果获取到的所有服务器节点不为0,就随机获取一个索引。
 67             int index = rand.nextInt(serverCount);
 68             // 将获取到的index从活的可达的服务器中获取到这个服务器
 69             server = upList.get(index);
 70 
 71             // 如果获取到的这个服务器为null
 72             if (server == null) {
 73                 /*
 74                  * The only time this should happen is if the server list were somehow trimmed.
 75                  * This is a transient condition. Retry after yielding.
 76                  */
 77                 // 暂停当前正在执行的线程对象,并执行其他线程,就是进入就绪状态
 78                 Thread.yield();
 79                 continue;
 80             }
 81             
 82             // 如果是活的可以提供服务的,就返回该服务器。
 83             if (server.isAlive()) {
 84                 return (server);
 85             }
 86             
 87             // Shouldn't actually happen.. but must be transient or a bug.
 88             server = null;
 89             Thread.yield();
 90         }
 91 
 92         return server;
 93 
 94     }
 95 
 96     @Override
 97     public Server choose(Object key) {
 98         return choose(getLoadBalancer(), key);
 99     }
100 
101     @Override
102     public void initWithNiwsConfig(IClientConfig clientConfig) {
103         // TODO Auto-generated method stub
104 
105     }
106 }

 

 

作者:别先生

博客园:https://www.cnblogs.com/biehongli/

如果您想及时得到个人撰写文章以及著作的消息推送,可以扫描上方二维码,关注个人公众号哦。

 

posted on 2019-11-28 21:43  别先生  阅读(406)  评论(0编辑  收藏  举报