Loading

漏斗桶和令牌桶

 漏斗桶和令牌桶都属于服务端常用的限流手段

漏斗桶

如图:把请求比作水,漏斗有一个进水口 和 一个出水口,出水口以一定速率出水,并且有一个最大出水速率,当桶里有水并且一直在进水时,就会直接溢出(拒绝服务)

优点:能够强行限制数据的传输速度,因为流出速率为固定值,能够让自身的流量平稳的打到下游的接口上,所以对下游系统起到保护作用

缺点:没有有效的使用网络资源,因为流出速率为固定值,即使部分网络为空闲,也无法接收到请求,因此,漏桶算法对于突发特性的流量来说缺乏效率

比如某一个时刻有10个请求,漏斗桶的流出速率为2,漏斗容量为5,那么将会有5个请求被拒绝,漏斗中的5个按照2的速率处理。

public class FunnelBucketTest {

    //漏斗桶的容量
    private final int capacity = 5;

    //漏斗桶的流出速率
    private int rate;

    //剩余容量
    private int leaveCap = 0;

    //漏斗桶中请求的存储
    private LinkedList<SimulationRequest> requestList = new LinkedList<>();


    public FunnelBucketTest(final int rate) {
        this.rate = rate;

        //初始化时,leaveCap为桶的容量
        leaveCap = capacity;

        new Thread(new Runnable() {
            public void run() {
                while(true){
                    if (!requestList.isEmpty()){
                        SimulationRequest simulationRequest = requestList.removeFirst();
                        System.out.println("第"+simulationRequest.getI()+"个请求被处理");
                    }

                    //这里设置每秒处理几个
                    try {
                        Thread.sleep(1000/rate);
                    }catch (Exception e){
                        System.out.println("error");
                    }
                }
            }
        }).start();
    }

    public synchronized boolean tryAcqure(SimulationRequest request){
        if (leaveCap <=0){
            return false;
        } else {
            leaveCap--;
            requestList.add(request);
            return true;
        }
    }

    public static void main(String[] args) {
        FunnelBucketTest funnelBucketTest = new FunnelBucketTest(2);
        for (int i = 1 ; i <=10;i++){
            SimulationRequest simulationRequest = new SimulationRequest(i);
            if (funnelBucketTest.tryAcqure(simulationRequest)){
                System.out.println("第"+simulationRequest.getI()+"个请求成功执行");
            } else {
                System.out.println("第"+simulationRequest.getI()+"个请求被拒绝");
            }
        }
    }


    //模拟请求对象
    static class SimulationRequest{

        /**
         * 当前为第几个
         */
        private int i;

        public SimulationRequest(int i) {
            this.i = i;
        }

        public int getI() {
            return i;
        }

        public void setI(int i) {
            this.i = i;
        }
    }
}

 

令牌桶

 

 

令牌桶是系统以恒定的速率产生令牌,令牌桶有个容量,当令牌桶满了之后,再放入令牌会被丢弃;当处理一个请求时,会从令牌桶中取出一个令牌,如果拿到了令牌,那么请求会被处理,否则请求会被丢弃。

相比漏斗桶的优点

令牌桶同样可以做到限制流量;

令牌桶对突发流量,有比较好的处理,比如:还是同一时刻有10个请求,令牌桶的大小为5,同样也是拒绝5个请求,但是令牌桶可以瞬间放过5个请求,而漏斗桶却实际处理1个,所以单从瞬间的话,令牌桶处理了更多的请求。

令牌桶算法一般用于保护自身的系统,对调用者进行限流,保护自身的系统不被突发的流量打垮

模仿令牌桶:

public class TokenBucketTest {

    //令牌桶容量
    private final int capacity = 5;

    //令牌产生速率
    private int rate;

    //令牌的剩余数量
    private int leaveCap = 0;

    public TokenBucketTest(final int rate) {
        this.rate = rate;

        //设置令牌剩余数量为容量
        leaveCap = capacity;

        new Thread(new Runnable() {
            public void run() {
                while (true) {
                    leaveCap++;
                    if (leaveCap > capacity){
                        leaveCap = capacity;
                    }
                    //这里设置每秒增加几个令牌
                    try {
                        Thread.sleep(1000/rate);
                    }catch (Exception e){
                        System.out.println("error");
                    }
                }
            }
        }).start();
    }

    public synchronized boolean tryAcqure(FunnelBucketTest.SimulationRequest request){
        if (leaveCap <=0){
            return false;
        } else {
            leaveCap--;
            return true;
        }
    }

    public static void main(String[] args) {
        TokenBucketTest funnelBucketTest = new TokenBucketTest(2);
        for (int i = 1 ; i <=10;i++){
            FunnelBucketTest.SimulationRequest simulationRequest = new FunnelBucketTest.SimulationRequest(i);
            if (funnelBucketTest.tryAcqure(simulationRequest)){
                System.out.println("第"+simulationRequest.getI()+"个请求成功执行");
            } else {
                System.out.println("第"+simulationRequest.getI()+"个请求被拒绝");
            }
        }
    }
}

 

比较常用的令牌桶的实现方式:Ratelimiter,使用方式参考:http://ifeve.com/guava-ratelimiter/

参考:

秒杀系统的设计方案:https://blog.csdn.net/weixin_43188031/article/details/108304960

《消息队列高手课》

https://blog.csdn.net/Px01Ih8/article/details/108764655

 

posted @ 2021-01-10 21:32  冯廷鑫  阅读(1185)  评论(0编辑  收藏  举报