searchusermenu
  • 发布文章
  • 消息中心
点赞
收藏
评论
分享
原创

常见限流算法介绍及代码实现

2023-10-26 06:03:10
13
0
  • 引言

在高并发的系统中,为了保证系统的稳定运行,通常会对系统的访问进行限制,这就是所谓的限流。限流可以有效地防止系统过载,保证系统的稳定性和可用性。在众多的限流算法中,有几种算法经常使用,如:。本文将重点介绍这固定窗口、滑动窗口、漏桶算法和令牌桶算法四种算法,并给出相关的Java代码实现。

 

  • 固定窗口(计算法)的原理

固定窗口(计算器法)的核心思想是将时间划分为一系列的固定窗口,每个窗口内的流量进行计数,当流量超过设定的阈值时,就进行限流。这种方法的优点是实现简单,易于理解和实现,但是缺点是对时间的粒度控制不够精细,可能会出现流量突增的情况。

Java代码实现

import java.util.concurrent.ConcurrentHashMap;

import java.util.concurrent.atomic.AtomicInteger;

 

public class FixedWindowRateLimiter {

    private final int maxQps; // 最大请求数

    private final ConcurrentHashMap<String, AtomicInteger> counters = new ConcurrentHashMap<>(); // 计数器

    private final long interval; // 时间窗口长度

 

    public FixedWindowRateLimiter(int maxQps, long interval) {

        this.maxQps = maxQps;

        this.interval = interval;

    }

 

    public boolean tryAcquire() {

        long currentTime = System.currentTimeMillis();

        for (String key : counters.keySet()) {

            AtomicInteger counter = counters.get(key);

            if (counter.get() == 0) {

                continue;

            }

            long windowStart = currentTime - interval;

            if (counter.get() > maxQps && currentTime - counter.getAndSet(0) >= windowStart) {

                return false;

            }

        }

        return true;

    }

}

 

三、滑动窗口算法的原理

滑动窗口算法的核心思想是将时间划分为一系列的固定窗口,每个窗口内的流量进行计数,当流量超过设定的阈值时,就进行限流。与固定窗口算法不同,滑动窗口算法的窗口不是固定的,而是随着时间的推进而不断向前滑动。这样,即使有一个短暂的瞬时大流量,也不会导致限流,只有当流量持续超过阈值一段时间后,才会触发限流。

以下是滑动窗口算法的Java代码实现:

import java.util.concurrent.ConcurrentHashMap;

import java.util.concurrent.atomic.AtomicInteger;

 

public class SlidingWindowRateLimiter {

    private final int maxQps; // 最大请求数

    private final long interval; // 时间窗口长度

    private final ConcurrentHashMap<String, AtomicInteger> counters = new ConcurrentHashMap<>(); // 计数器

 

    public SlidingWindowRateLimiter(int maxQps, long interval) {

        this.maxQps = maxQps;

        this.interval = interval;

    }

 

    public boolean tryAcquire() {

        long currentTime = System.currentTimeMillis();

        for (String key : counters.keySet()) {

            AtomicInteger counter = counters.get(key);

            if (counter.get() == 0) {

                continue;

            }

            long windowStart = currentTime - interval;

            if (counter.get() > maxQps && currentTime - counter.getAndSet(0) >= windowStart) {

                return false;

            }

        }

        return true;

    }

}

 

四、漏桶算法的原理

漏桶算法的名字来源于其工作原理。漏桶算法假设有一个固定容量的桶,系统的流量就像是水一样流入桶中。如果桶满了,那么多余的水就会溢出。漏桶算法就是通过控制桶的大小来限制流量,从而达到限流的目的。

漏桶算法的主要特点是:流量是均匀的,但速率是受限的。漏桶算法不会因为突发的流量而立即触发限流,而是会平滑地处理流量,从而避免了瞬时的高流量对系统的冲击。

以下是漏桶算法的Java代码实现:

import java.util.concurrent.TimeUnit;

import com.google.common.util.concurrent.RateLimiter;

 

public class LeakyBucketRateLimiter {

    private final RateLimiter rateLimiter;

 

    public LeakyBucketRateLimiter(double permitsPerSecond) {

        this.rateLimiter = RateLimiter.create(permitsPerSecond);

    }

 

    public boolean tryAcquire() throws InterruptedException {

        return rateLimiter.tryAcquire(1, TimeUnit.SECONDS);

    }

}

   

在上述代码中,我们使用了Google Guava库中的RateLimiter类来实现漏桶算法。RateLimiter类提供了一个高效的令牌桶实现,可以用来限制对共享资源的访问速率。

五、令牌桶算法的原理

令牌桶算法的名字来源于其工作原理。令牌桶算法假设有一个固定容量的桶,系统的流量就像是水一样流入桶中。如果桶满了,那么多余的水就会溢出。令牌桶算法就是通过控制桶的大小和生成令牌的速度来限制流量,从而达到限流的目的。

令牌桶算法的主要特点是:流量是均匀的,但速率是受限的。令牌桶算法会按照设定的速度生成令牌,当有请求需要处理时,会从桶中取出一个令牌。如果桶中没有令牌,那么请求就会被阻塞或者拒绝。

以下是令牌桶算法的Java代码实现:

import java.util.concurrent.TimeUnit;

import com.google.common.util.concurrent.RateLimiter;

 

public class TokenBucketRateLimiter {

    private final RateLimiter rateLimiter;

 

    public TokenBucketRateLimiter(double permitsPerSecond) {

        this.rateLimiter = RateLimiter.create(permitsPerSecond);

    }

 

    public boolean tryAcquire() throws InterruptedException {

        return rateLimiter.tryAcquire(1, TimeUnit.SECONDS);

    }

}

 

六、四种算法的优缺点分析

算法

优点

缺点

总结

固定窗口

实现简单:固定窗口(计算器法)的实现非常简单,只需要一个计数器和一个时间窗口就可以实现。

易于理解和实现:固定窗口(计算器法)的原理非常直观,易于理解和实现。

资源消耗小:固定窗口(计算器法)只需要一个计数器和一个时间窗口,因此资源消耗非常小。

时间粒度控制不够精细:固定窗口(计算器法)的时间粒度是固定的,如果流量突增,可能会导致限流的效果不佳。

无法应对瞬时高流量:固定窗口(计算器法)只能应对持续的高流量,对于瞬时的高流量,固定窗口(计算器法)无法做出有效的应对。

无法应对周期性的流量波动:固定窗口(计算器法)只能应对持续的高流量,对于周期性的流量波动,固定窗口(计算器法)也无法做出有效的应对。

是一种实现简单,易于理解和实现的限流算法。但是,由于其时间粒度控制不够精细,无法应对瞬时高流量和周期性的流量波动,因此在实际应用中需要根据具体的场景和需求来选择适合的限流算法。

滑动窗口

灵活性好:滑动窗口算法的时间粒度是可变的,可以根据实际需求进行调整,因此具有很好的灵活性。

能够应对瞬时高流量:滑动窗口算法只有在流量持续超过阈值一段时间后,才会触发限流,因此能够有效地应对瞬时高流量。

资源消耗小:滑动窗口算法只需要一个计数器和一个时间窗口,因此资源消耗非常小。

实现复杂:滑动窗口算法需要维护一个时间窗口和一个计数器,因此实现相对复杂。

存在假阳性:由于滑动窗口算法的时间粒度是可变的,因此在时间窗口的边界处,可能会出现假阳性的情况。例如,当流量从阈值降到零后,再升到阈值的过程中,虽然流量没有超过阈值,但是由于时间窗口已经移动,因此可能会被误判为超过阈值。

存在假阴性:同样,由于滑动窗口算法的时间粒度是可变的,因此在时间窗口的边界处,也可能会出现假阴性的情况。例如,当流量持续超过阈值一段时间后,再降回阈值的过程中,虽然流量已经超过了阈值,但是由于时间窗口还没有移动,因此可能会被误判为没有超过阈值。

总的来说,滑动窗口算法是一种灵活性好,能够应对瞬时高流量的限流算法。但是,由于其实现复杂,存在假阳性和假阴性的情况,因此在实际应用中需要根据具体的场景和需求来选择适合的限流算法。

漏桶算法

平滑处理流量:漏桶算法可以平滑地处理流量,避免了瞬时的高流量对系统的冲击。

易于理解和实现:漏桶算法的原理简单,易于理解和实现。

可以应对突发的流量:漏桶算法不会因为突发的流量而立即触发限流,而是会平滑地处理流量。

不能精确控制:由于漏桶算法是通过控制桶的大小来限制流量,因此不能精确地控制流量。如果桶的大小设置得过大,可能会导致过多的流量通过;如果桶的大小设置得过小,可能会导致限流过于严格。

无法应对周期性的流量波动:漏桶算法只能平滑地处理流量,无法应对周期性的流量波动。如果系统的流量有周期性的波动,漏桶算法可能无法有效地进行限流。

漏桶算法是一种简单、易于理解和实现的限流算法,可以有效地防止系统过载,保证系统的稳定性和可用性。但是,由于其不能精确地控制流量和无法应对周期性的流量波动,因此在实际应用中需要根据具体的场景和需求来选择适合的限流算法。

令牌桶算法

平滑处理流量:令牌桶算法可以平滑地处理流量,避免了瞬时的高流量对系统的冲击。

可以应对突发的流量:令牌桶算法会按照设定的速度生成令牌,因此可以应对突发的流量。

可以应对周期性的流量波动:令牌桶算法可以通过调整生成令牌的速度来应对周期性的流量波动。

需要合理设置桶的大小和生成令牌的速度:如果桶的大小设置得过大,可能会导致过多的流量通过;如果生成令牌的速度设置得过小,可能会导致限流过于严格。如果生成令牌的速度设置得过大,可能会导致过多的令牌在桶中积累,从而浪费资源。

无法精确控制:由于令牌桶算法是通过控制桶的大小和生成令牌的速度来限制流量,因此无法精确地控制流量。

总的来说,令牌桶算法是一种能够平滑处理流量,可以应对突发的流量和周期性的流量波动的限流算法。但是,由于其需要合理设置桶的大小和生成令牌的速度,以及无法精确地控制流量,因此在实际应用中需要根据具体的场景和需求来选择适合的限流算法。

 

0条评论
0 / 1000
9****m
3文章数
0粉丝数
9****m
3 文章 | 0 粉丝
9****m
3文章数
0粉丝数
9****m
3 文章 | 0 粉丝
原创

常见限流算法介绍及代码实现

2023-10-26 06:03:10
13
0
  • 引言

在高并发的系统中,为了保证系统的稳定运行,通常会对系统的访问进行限制,这就是所谓的限流。限流可以有效地防止系统过载,保证系统的稳定性和可用性。在众多的限流算法中,有几种算法经常使用,如:。本文将重点介绍这固定窗口、滑动窗口、漏桶算法和令牌桶算法四种算法,并给出相关的Java代码实现。

 

  • 固定窗口(计算法)的原理

固定窗口(计算器法)的核心思想是将时间划分为一系列的固定窗口,每个窗口内的流量进行计数,当流量超过设定的阈值时,就进行限流。这种方法的优点是实现简单,易于理解和实现,但是缺点是对时间的粒度控制不够精细,可能会出现流量突增的情况。

Java代码实现

import java.util.concurrent.ConcurrentHashMap;

import java.util.concurrent.atomic.AtomicInteger;

 

public class FixedWindowRateLimiter {

    private final int maxQps; // 最大请求数

    private final ConcurrentHashMap<String, AtomicInteger> counters = new ConcurrentHashMap<>(); // 计数器

    private final long interval; // 时间窗口长度

 

    public FixedWindowRateLimiter(int maxQps, long interval) {

        this.maxQps = maxQps;

        this.interval = interval;

    }

 

    public boolean tryAcquire() {

        long currentTime = System.currentTimeMillis();

        for (String key : counters.keySet()) {

            AtomicInteger counter = counters.get(key);

            if (counter.get() == 0) {

                continue;

            }

            long windowStart = currentTime - interval;

            if (counter.get() > maxQps && currentTime - counter.getAndSet(0) >= windowStart) {

                return false;

            }

        }

        return true;

    }

}

 

三、滑动窗口算法的原理

滑动窗口算法的核心思想是将时间划分为一系列的固定窗口,每个窗口内的流量进行计数,当流量超过设定的阈值时,就进行限流。与固定窗口算法不同,滑动窗口算法的窗口不是固定的,而是随着时间的推进而不断向前滑动。这样,即使有一个短暂的瞬时大流量,也不会导致限流,只有当流量持续超过阈值一段时间后,才会触发限流。

以下是滑动窗口算法的Java代码实现:

import java.util.concurrent.ConcurrentHashMap;

import java.util.concurrent.atomic.AtomicInteger;

 

public class SlidingWindowRateLimiter {

    private final int maxQps; // 最大请求数

    private final long interval; // 时间窗口长度

    private final ConcurrentHashMap<String, AtomicInteger> counters = new ConcurrentHashMap<>(); // 计数器

 

    public SlidingWindowRateLimiter(int maxQps, long interval) {

        this.maxQps = maxQps;

        this.interval = interval;

    }

 

    public boolean tryAcquire() {

        long currentTime = System.currentTimeMillis();

        for (String key : counters.keySet()) {

            AtomicInteger counter = counters.get(key);

            if (counter.get() == 0) {

                continue;

            }

            long windowStart = currentTime - interval;

            if (counter.get() > maxQps && currentTime - counter.getAndSet(0) >= windowStart) {

                return false;

            }

        }

        return true;

    }

}

 

四、漏桶算法的原理

漏桶算法的名字来源于其工作原理。漏桶算法假设有一个固定容量的桶,系统的流量就像是水一样流入桶中。如果桶满了,那么多余的水就会溢出。漏桶算法就是通过控制桶的大小来限制流量,从而达到限流的目的。

漏桶算法的主要特点是:流量是均匀的,但速率是受限的。漏桶算法不会因为突发的流量而立即触发限流,而是会平滑地处理流量,从而避免了瞬时的高流量对系统的冲击。

以下是漏桶算法的Java代码实现:

import java.util.concurrent.TimeUnit;

import com.google.common.util.concurrent.RateLimiter;

 

public class LeakyBucketRateLimiter {

    private final RateLimiter rateLimiter;

 

    public LeakyBucketRateLimiter(double permitsPerSecond) {

        this.rateLimiter = RateLimiter.create(permitsPerSecond);

    }

 

    public boolean tryAcquire() throws InterruptedException {

        return rateLimiter.tryAcquire(1, TimeUnit.SECONDS);

    }

}

   

在上述代码中,我们使用了Google Guava库中的RateLimiter类来实现漏桶算法。RateLimiter类提供了一个高效的令牌桶实现,可以用来限制对共享资源的访问速率。

五、令牌桶算法的原理

令牌桶算法的名字来源于其工作原理。令牌桶算法假设有一个固定容量的桶,系统的流量就像是水一样流入桶中。如果桶满了,那么多余的水就会溢出。令牌桶算法就是通过控制桶的大小和生成令牌的速度来限制流量,从而达到限流的目的。

令牌桶算法的主要特点是:流量是均匀的,但速率是受限的。令牌桶算法会按照设定的速度生成令牌,当有请求需要处理时,会从桶中取出一个令牌。如果桶中没有令牌,那么请求就会被阻塞或者拒绝。

以下是令牌桶算法的Java代码实现:

import java.util.concurrent.TimeUnit;

import com.google.common.util.concurrent.RateLimiter;

 

public class TokenBucketRateLimiter {

    private final RateLimiter rateLimiter;

 

    public TokenBucketRateLimiter(double permitsPerSecond) {

        this.rateLimiter = RateLimiter.create(permitsPerSecond);

    }

 

    public boolean tryAcquire() throws InterruptedException {

        return rateLimiter.tryAcquire(1, TimeUnit.SECONDS);

    }

}

 

六、四种算法的优缺点分析

算法

优点

缺点

总结

固定窗口

实现简单:固定窗口(计算器法)的实现非常简单,只需要一个计数器和一个时间窗口就可以实现。

易于理解和实现:固定窗口(计算器法)的原理非常直观,易于理解和实现。

资源消耗小:固定窗口(计算器法)只需要一个计数器和一个时间窗口,因此资源消耗非常小。

时间粒度控制不够精细:固定窗口(计算器法)的时间粒度是固定的,如果流量突增,可能会导致限流的效果不佳。

无法应对瞬时高流量:固定窗口(计算器法)只能应对持续的高流量,对于瞬时的高流量,固定窗口(计算器法)无法做出有效的应对。

无法应对周期性的流量波动:固定窗口(计算器法)只能应对持续的高流量,对于周期性的流量波动,固定窗口(计算器法)也无法做出有效的应对。

是一种实现简单,易于理解和实现的限流算法。但是,由于其时间粒度控制不够精细,无法应对瞬时高流量和周期性的流量波动,因此在实际应用中需要根据具体的场景和需求来选择适合的限流算法。

滑动窗口

灵活性好:滑动窗口算法的时间粒度是可变的,可以根据实际需求进行调整,因此具有很好的灵活性。

能够应对瞬时高流量:滑动窗口算法只有在流量持续超过阈值一段时间后,才会触发限流,因此能够有效地应对瞬时高流量。

资源消耗小:滑动窗口算法只需要一个计数器和一个时间窗口,因此资源消耗非常小。

实现复杂:滑动窗口算法需要维护一个时间窗口和一个计数器,因此实现相对复杂。

存在假阳性:由于滑动窗口算法的时间粒度是可变的,因此在时间窗口的边界处,可能会出现假阳性的情况。例如,当流量从阈值降到零后,再升到阈值的过程中,虽然流量没有超过阈值,但是由于时间窗口已经移动,因此可能会被误判为超过阈值。

存在假阴性:同样,由于滑动窗口算法的时间粒度是可变的,因此在时间窗口的边界处,也可能会出现假阴性的情况。例如,当流量持续超过阈值一段时间后,再降回阈值的过程中,虽然流量已经超过了阈值,但是由于时间窗口还没有移动,因此可能会被误判为没有超过阈值。

总的来说,滑动窗口算法是一种灵活性好,能够应对瞬时高流量的限流算法。但是,由于其实现复杂,存在假阳性和假阴性的情况,因此在实际应用中需要根据具体的场景和需求来选择适合的限流算法。

漏桶算法

平滑处理流量:漏桶算法可以平滑地处理流量,避免了瞬时的高流量对系统的冲击。

易于理解和实现:漏桶算法的原理简单,易于理解和实现。

可以应对突发的流量:漏桶算法不会因为突发的流量而立即触发限流,而是会平滑地处理流量。

不能精确控制:由于漏桶算法是通过控制桶的大小来限制流量,因此不能精确地控制流量。如果桶的大小设置得过大,可能会导致过多的流量通过;如果桶的大小设置得过小,可能会导致限流过于严格。

无法应对周期性的流量波动:漏桶算法只能平滑地处理流量,无法应对周期性的流量波动。如果系统的流量有周期性的波动,漏桶算法可能无法有效地进行限流。

漏桶算法是一种简单、易于理解和实现的限流算法,可以有效地防止系统过载,保证系统的稳定性和可用性。但是,由于其不能精确地控制流量和无法应对周期性的流量波动,因此在实际应用中需要根据具体的场景和需求来选择适合的限流算法。

令牌桶算法

平滑处理流量:令牌桶算法可以平滑地处理流量,避免了瞬时的高流量对系统的冲击。

可以应对突发的流量:令牌桶算法会按照设定的速度生成令牌,因此可以应对突发的流量。

可以应对周期性的流量波动:令牌桶算法可以通过调整生成令牌的速度来应对周期性的流量波动。

需要合理设置桶的大小和生成令牌的速度:如果桶的大小设置得过大,可能会导致过多的流量通过;如果生成令牌的速度设置得过小,可能会导致限流过于严格。如果生成令牌的速度设置得过大,可能会导致过多的令牌在桶中积累,从而浪费资源。

无法精确控制:由于令牌桶算法是通过控制桶的大小和生成令牌的速度来限制流量,因此无法精确地控制流量。

总的来说,令牌桶算法是一种能够平滑处理流量,可以应对突发的流量和周期性的流量波动的限流算法。但是,由于其需要合理设置桶的大小和生成令牌的速度,以及无法精确地控制流量,因此在实际应用中需要根据具体的场景和需求来选择适合的限流算法。

 

文章来自个人专栏
3 文章 | 1 订阅
0条评论
0 / 1000
请输入你的评论
0
0