生产环境中秒杀接口并发量剧增与负载优化策略探讨

news2024/10/5 16:24:25


✨✨谢谢大家捧场,祝屏幕前的小伙伴们每天都有好运相伴左右,一定要天天开心哦!✨✨ 
🎈🎈作者主页: 喔的嘛呀🎈🎈

目录

引言

1. 实施限流措施

1.1 令牌桶算法:

1.2 漏桶算法:

1.3 使用限流框架:

2. 优化数据库操作

2.1. 索引优化

2.2. 批量操作减少交互次数:

2.3. 避免全表扫描:

2.4使用InnoDB引擎:

2.5优化事务范围:

3. 使用缓存技术

3.1. 选择合适的缓存系统:

3.2. 缓存热门商品信息:

3.3. 缓存热门商品列表:

3.4. 使用缓存刷新策略:

3.5. 使用缓存预热:

4. 异步处理订单

4.1. 选择合适的消息队列系统:

4.2. 订单生成异步化:

4.3. 异步处理订单消息监听:

4.4. 保证消息的可靠性:

4.5. 处理失败消息的重试和补偿:

5. 水平扩展

5.1. 负载均衡:

5.2. 横向添加服务器节点:

5.3. 数据库水平分片:

5.4. 服务的横向拆分:

5.5. 监控和自动化:

5.6. 弹性计算和容灾:

6、 灰度发布和回滚

7、总结



引言

在生产环境中,秒杀活动通常是一项高并发的任务,因为大量用户在同一时刻竞相购买限量商品。这种高并发可能导致服务器压力剧增,造成系统崩溃或响应缓慢。为了解决这一问题,我们可以采用一系列优化措施,下面详细介绍一下

1. 实施限流措施

实施限流措施是在高并发场景下保护系统稳定性的关键步骤。限流可以控制请求的并发访问量,避免系统因瞬时高并发而崩溃。以下是一些实施限流措施的方法:

1.1 令牌桶算法:

令牌桶算法是一种常用的限流算法,它基于令牌桶的概念,系统以固定的速率往令牌桶中放入令牌,而接口访问时需要获取令牌,没有令牌的请求将被拒绝。

public class TokenBucket {
    private int capacity; // 桶的容量
    private int tokens;   // 当前令牌数量
    private long lastRefillTime; // 上次令牌刷新时间

    public TokenBucket(int capacity, int tokensPerSecond) {
        this.capacity = capacity;
        this.tokens = capacity;
        this.lastRefillTime = System.currentTimeMillis();
        scheduleRefill(tokensPerSecond);
    }

    public synchronized boolean tryConsume() {
        refill();
        if (tokens > 0) {
            tokens--;
            return true;
        } else {
            return false;
        }
    }

    private void refill() {
        long now = System.currentTimeMillis();
        if (now > lastRefillTime) {
            long elapsedTime = now - lastRefillTime;
            int tokensToAdd = (int) (elapsedTime / 1000); // 每秒放入令牌
            tokens = Math.min(capacity, tokens + tokensToAdd);
            lastRefillTime = now;
        }
    }

    private void scheduleRefill(int tokensPerSecond) {
        ScheduledExecutorService scheduler = Executors.newScheduledThreadPool(1);
        scheduler.scheduleAtFixedRate(() -> refill(), 1, 1, TimeUnit.SECONDS);
    }
}

1.2 漏桶算法:

漏桶算法是另一种常用的限流算法,它模拟一个漏桶,请求以恒定的速度流入漏桶,漏桶以固定的速度漏水。如果桶满了,多余的请求将被丢弃或排队。

public class LeakyBucket {
    private int capacity; // 桶的容量
    private int water;    // 当前水量
    private long lastLeakTime; // 上次漏水时间

    public LeakyBucket(int capacity, int leaksPerSecond) {
        this.capacity = capacity;
        this.water = 0;
        this.lastLeakTime = System.currentTimeMillis();
        scheduleLeak(leaksPerSecond);
    }

    public synchronized boolean tryConsume() {
        leak();
        if (water > 0) {
            water--;
            return true;
        } else {
            return false;
        }
    }

    private void leak() {
        long now = System.currentTimeMillis();
        if (now > lastLeakTime) {
            long elapsedTime = now - lastLeakTime;
            int leaks = (int) (elapsedTime / 1000); // 每秒漏水
            water = Math.max(0, water - leaks);
            lastLeakTime = now;
        }
    }

    private void scheduleLeak(int leaksPerSecond) {
        ScheduledExecutorService scheduler = Executors.newScheduledThreadPool(1);
        scheduler.scheduleAtFixedRate(() -> leak(), 1, 1, TimeUnit.SECONDS);
    }
}

1.3 使用限流框架:

除了手动实现限流算法外,也可以使用一些成熟的限流框架,如Guava RateLimiter、Spring Cloud Gateway等,它们提供了简便的接口和配置,可以快速实施限流措施。

// 使用Guava RateLimiter
RateLimiter rateLimiter = RateLimiter.create(10.0); // 每秒放入10个令牌
if (rateLimiter.tryAcquire()) {
    // 执行业务逻辑
} else {
    // 请求被限流
}

限流的选择要根据系统的实际情况、业务需求和性能测试来确定。限流是保护系统稳定性的有效手段,但需要注意的是,过于严格的限流可能影响到用户体验,因此需要在系统性能和用户体验之间找到平衡。

2. 优化数据库操作

优化数据库操作是提高系统性能的重要一环,尤其在高并发的秒杀场景下,数据库操作的效率直接影响系统的响应速度。以下是一些优化数据库操作的方法:

2.1. 索引优化

确保数据库表的关键字段上建立了适当的索引,特别是在经常用于查询和更新的字段上。索引可以加速查询操作。

-- 为product表的id和stock字段创建索引
CREATE INDEX idx_product_id ON product(id);
CREATE INDEX idx_product_stock ON product(stock);

2.2. 批量操作减少交互次数:

减少与数据库的交互次数,使用批量操作来提高性能,特别是在更新库存等操作时。

// 批量更新库存
public class ProductService {
    public void updateProductStockBatch(List<Integer> productIds) {
        try (Connection connection = dataSource.getConnection();
             PreparedStatement statement = connection.prepareStatement("UPDATE product SET stock = stock - 1 WHERE id = ?")) {
            for (int productId : productIds) {
                statement.setInt(1, productId);
                statement.addBatch();
            }
            statement.executeBatch();
        } catch (SQLException e) {
            // 异常处理...
        }
    }
}

2.3. 避免全表扫描:

使用合适的查询条件和索引,避免全表扫描,提高查询效率。

// 使用索引进行查询和更新
public class ProductService {
    public Product getSeckillProductInfo(int productId) {
        String sql = "SELECT * FROM product WHERE id = ? FOR UPDATE";
        // 执行查询...
    }

    public boolean updateProductStock(int productId) {
        String sql = "UPDATE product SET stock = stock - 1 WHERE id = ?";
        // 执行更新...
    }
}

2.4使用InnoDB引擎:

InnoDB引擎支持行级锁和事务,适合高并发的秒杀场景。

-- 将商品表的引擎设置为InnoDB
ALTER TABLE product ENGINE=InnoDB;

2.5优化事务范围:

减小事务的范围,尽量在生成订单等操作之前提交事务,减少锁的持有时间。

// 代码示例(优化事务范围)
public class SeckillService {
    @Transactional
    public void handleSeckillRequest() {
        // 处理秒杀请求逻辑
        // ...

        // 生成订单数据
        OrderData orderData = generateOrderData();

        // 提交事务
        orderService.createOrder(orderData);
    }
}

以上是在数据库层面进行秒杀接口的深度优化的一些建议。这些建议包括索引优化、数据库引擎选择、事务控制、查询优化等方面(这只是数据库优化其中的几点),通过合理的配置和优化,可以提高系统的并发处理能力,确保秒杀活动的顺利进行。

3. 使用缓存技术

增加缓存层,将热门数据缓存起来,减轻数据库压力,提高读取速度。

3.1. 选择合适的缓存系统:

选择适合自己业务场景的缓存系统,常见的包括:

  • Redis: 支持多种数据结构,适用于缓存和计数器等场景。
  • Memcached: 简单高效,适用于简单的键值缓存。
  • Ehcache: Java本地缓存库,适用于单节点缓存。

3.2. 缓存热门商品信息:

将热门商品信息缓存在缓存中,避免每次请求都访问数据库。

// 商品信息缓存
public class ProductCache {
    private static final Cache<Integer, Product> productCache = Caffeine.newBuilder()
            .maximumSize(1000) // 缓存容量
            .expireAfterWrite(10, TimeUnit.MINUTES) // 缓存过期时间
            .build();

    public Product getSeckillProductInfo(int productId) {
        Product product = productCache.get(productId, key -> ProductDAO.get(productId));
        return product;
    }
}

3.3. 缓存热门商品列表:

缓存热门商品列表,避免频繁查询数据库。

// 热门商品列表缓存
public class PopularProductCache {
    private static final Cache<String, List<Product>> popularProductCache = Caffeine.newBuilder()
            .maximumSize(10) // 缓存容量
            .expireAfterWrite(5, TimeUnit.MINUTES) // 缓存过期时间
            .build();

    public List<Product> getPopularProducts() {
        return popularProductCache.get("popular", key -> ProductDAO.getPopularProducts());
    }
}

3.4. 使用缓存刷新策略:

设置合适的缓存刷新策略,确保缓存中的数据保持与数据库一致。

// 商品信息缓存刷新策略
public class ProductCache {
    private static final Cache<Integer, Product> productCache = Caffeine.newBuilder()
            .maximumSize(1000) // 缓存容量
            .expireAfterWrite(10, TimeUnit.MINUTES) // 缓存过期时间
            .refreshAfterWrite(1, TimeUnit.MINUTES) // 刷新间隔
            .build();

    public Product getSeckillProductInfo(int productId) {
        return productCache.get(productId, key -> refreshProductInfo(productId));
    }

    private Product refreshProductInfo(int productId) {
        // 从数据库中重新加载商品信息
        return ProductDAO.get(productId);
    }
}

3.5. 使用缓存预热:

在系统启动时,预先加载热门数据到缓存中,提高系统初始性能。

// 缓存预热
public class CacheWarmUp {
    @PostConstruct
    public void warmUpCache() {
        // 预先加载热门商品信息到缓存中
        List<Integer> popularProductIds = ProductDAO.getPopularProductIds();
        for (int productId : popularProductIds) {
            ProductCache.getSeckillProductInfo(productId);
        }
    }
}

以上是一些使用缓存技术的具体建议,通过合理选择缓存系统、缓存热门数据、设置刷新策略和预热缓存,可以显著提高系统的读取速度,降低对数据库的压力,特别在高并发的秒杀场景下,是确保系统稳定性和性能的重要手段。

4. 异步处理订单

在高并发的秒杀场景下,异步处理订单是一种有效的策略,可以降低同步处理的压力,提高系统的吞吐量。以下是一些关于如何异步处理订单的具体建议:

4.1. 选择合适的消息队列系统:

选择适合业务需求的消息队列系统,常见的包括:

  • RabbitMQ: 稳定可靠,支持多种消息模型。
  • Kafka: 高吞吐量,适用于分布式系统。
  • ActiveMQ: 开源的JMS消息队列,支持多种传输协议。

4.2. 订单生成异步化:

将订单生成过程异步化,将订单信息发送到消息队列,由后台异步处理。

// 订单生成异步化
public class OrderService {
    @Autowired
    private RabbitTemplate rabbitTemplate;

    public void createOrderAsync(OrderData orderData) {
        rabbitTemplate.convertAndSend("order-exchange", "order.create", orderData);
    }
}

4.3. 异步处理订单消息监听:

设置订单处理的消息监听器,监听消息队列中的订单消息,并进行处理。

// 异步处理订单消息监听
@Component
public class OrderMessageListener {

    @RabbitListener(queues = "order.create.queue")
    public void handleMessage(OrderData orderData) {
        // 处理订单逻辑
        // ...
    }
}

4.4. 保证消息的可靠性:

设置消息队列的确认机制,保证消息的可靠性投递。

// RabbitMQ消息确认机制配置
@Configuration
public class RabbitMQConfig {

    @Bean
    public RabbitTemplate rabbitTemplate(ConnectionFactory connectionFactory) {
        RabbitTemplate rabbitTemplate = new RabbitTemplate(connectionFactory);
        rabbitTemplate.setConfirmCallback((correlationData, ack, cause) -> {
            if (!ack) {
                // 消息发送失败的处理逻辑
            }
        });
        return rabbitTemplate;
    }
}

4.5. 处理失败消息的重试和补偿:

设置消息队列的重试机制和补偿机制,确保订单处理失败时能够及时重试或进行补偿。

// RabbitMQ消息重试和补偿配置
@Configuration
public class RabbitMQConfig {

    @Bean
    public SimpleRabbitListenerContainerFactory rabbitListenerContainerFactory(ConnectionFactory connectionFactory) {
        SimpleRabbitListenerContainerFactory factory = new SimpleRabbitListenerContainerFactory();
        factory.setConnectionFactory(connectionFactory);
        factory.setConcurrentConsumers(3); // 并发消费者数量
        factory.setMaxConcurrentConsumers(10); // 最大并发消费者数量
        factory.setAcknowledgeMode(AcknowledgeMode.MANUAL); // 手动确认模式
        factory.setDefaultRequeueRejected(false); // 不重新入队列
        factory.setErrorHandler(new ConditionalRejectingErrorHandler(new CustomFatalExceptionStrategy())); // 自定义异常处理策略
        factory.setRetryTemplate(new RetryTemplate()); // 重试模板
        return factory;
    }
}

通过异步处理订单,可以将订单生成和处理过程解耦,提高系统的吞吐量和性能。选择合适的消息队列系统、确保消息的可靠性、设置消息的监听器和确认机制,以及处理失败消息的重试和补偿,都是确保异步处理订单稳定可靠的关键步骤。

5. 水平扩展

 考虑对系统进行水平扩展,通过增加服务器节点来分担负载。

5.1. 负载均衡:

使用负载均衡器,将流量均匀分发到多个服务器节点上,避免单一节点负载过重。

  • 硬件负载均衡器: 使用专门的硬件设备,如F5、Citrix等。
  • 软件负载均衡器: 使用软件实现,如Nginx、HAProxy等。

5.2. 横向添加服务器节点:

逐步增加服务器节点,将请求分发到不同的节点上,实现水平扩展。

  • 云服务提供商: 使用云服务提供商的弹性伸缩功能,根据需求动态增加或减少节点。
  • 容器化: 使用容器化技术,如Docker、Kubernetes等,方便快速部署和扩展。

5.3. 数据库水平分片:

对于数据库,考虑水平分片,将数据分布在不同的数据库节点上,减轻数据库压力。

  • 分库分表: 将数据按照一定规则划分到不同的数据库或表中。
  • 数据库读写分离: 将读和写分布在不同的数据库节点上,提高数据库并发能力。

5.4. 服务的横向拆分:

将系统中的服务进行横向拆分,拆分成多个微服务,每个微服务可以独立部署和扩展。

  • 微服务架构: 使用微服务架构,如Spring Cloud、Dubbo等,将系统拆分成多个小服务。
  • API网关: 使用API网关来统一管理和分发请求到不同的微服务。

5.5. 监控和自动化:

确保系统的监控和自动化机制,及时发现节点故障和负载情况,自动进行水平扩展。

  • 监控工具: 使用监控工具,如Prometheus、Grafana等,实时监测系统的状态。
  • 自动化脚本: 编写自动化脚本,根据负载情况自动进行节点的增加或减少。

5.6. 弹性计算和容灾:

考虑系统的弹性计算和容灾能力,确保在节点故障时系统依然可用。

  • 弹性伸缩: 根据负载情况动态调整节点数量,确保系统弹性。
  • 容灾方案: 设计容灾方案,保证系统在某个节点或区域发生故障时能够继续提供服务。

通过以上水平扩展的方法,可以有效应对系统负载的增加,提高系统的可用性、性能和弹性。在实际应用中,根据具体业务需求和系统特点选择和实施这些扩展方法。

6、 灰度发布和回滚

在采取一些重要的优化或改动时,通过灰度发布逐步验证新的方案,并建立回滚机制,确保在出现问题时能够迅速回退。

7、总结

这些方案的选择取决于具体的业务场景、系统架构和实际问题的症结。通常需要进行系统性能测试,综合考虑系统的可伸缩性、容错性和稳定性,寻找出一个最适合当前情况的综合性解决方案。

祝屏幕前的帅哥美女们,每天都好运爆棚!笑口常开!

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.coloradmin.cn/o/1592385.html

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈,一经查实,立即删除!

相关文章

如何申请阿里云服务器学生优惠,入口在这呢!

阿里云学生服务器免费申请&#xff0c;之前是云翼计划学生服务器9元/月&#xff0c;现在是高校计划&#xff0c;学生服务器可以免费申请&#xff0c;先完成学生认证即可免费领取一台云服务器ECS&#xff0c;配置为2核2G、1M带宽、40G系统盘&#xff0c;在云服务器ECS实例过期之…

什么是队头阻塞以及如何解决

前言 通常我们提到队头阻塞&#xff0c;指的可能是TCP协议中的队头阻塞&#xff0c;但是HTTP1.1中也有一个类似TCP队头阻塞的问题&#xff0c;下面各自介绍一下。 TCP队头阻塞 队头阻塞&#xff08;head-of-line blocking&#xff09;发生在一个TCP分节丢失&#xff0c;导致…

ip地址切换器安卓版,保护隐私,自由上网

在移动互联网时代&#xff0c;随着智能手机和平板电脑的普及&#xff0c;移动设备的网络连接变得愈发重要。为了满足用户在不同网络环境下的需求&#xff0c;IP地址切换器安卓版应运而生。本文将以虎观代理为例&#xff0c;为您详细解析IP地址切换器安卓版的功能、应用以及其所…

26、链表-环形链表II

思路&#xff1a; 这道题就是判断链表中是否有环&#xff0c;首先使用集合肯定可以快速地解决&#xff0c;比如通过一个set集合遍历&#xff0c;如果遍历过程中有节点在set中已经存在那么说明存在环。返回这个节点即可 第二种方式就是通过快慢指针方式寻找环。如何做呢&#xf…

震惊!借助Coze白嫖GPT4-128k解决方案

震惊!某大佬借助Coze白嫖GPT4-128k解决方案 前言 此文章介绍如何免费使用GPT-4高级模型并拓展API功能 最近的 Coze 在国内开放了&#xff0c;可以免费使用大模型。但是和国外的有点区别&#xff0c;国外版本使用的chatgpt4&#xff0c;国内版本使用的是语雀大模型。 Coze是一…

《前端防坑》- JS基础 - 你觉得typeof nullValue === null 么?

问题 JS原始类型有6种Undefined, Null, Number, String, Boolean, Symbol共6种。 在对原始类型使用typeof进行判断时, typeof stringValue string typeof numberValue number 如果一个变量(nullValue)的值为null&#xff0c;那么typeof nullValue "?" const u …

图书推荐:用ChatGPT获取在线被动收入的8个方法

Universe S. The ChatGPT Money Mastery. Unlocking Online Income..for Dummies 2023 想要彻底革新您的收入模式吗&#xff1f;《用ChatGPT获取在线被动收入的8个方法》一书是您不可错过的指南。 在这个数字化飞速发展的时代&#xff0c;人工智能成为了开启成功之门的钥匙。…

2024年广东省网络系统管理样题第1套网络搭建部分

2024年广东省职业院校技能大赛样题1 信息安全管理与评估 网络系统管理 网络搭建与应用 云计算 软件测试 移动应用开发 任务书&#xff0c;赛题&#xff0c;解析等资料&#xff0c;知识点培训服务 添加博主wx&#xff1a;liuliu5488233 网络系统管理赛项 模块A&#xff1a;网络…

操作系统(第四周 第二堂)

目录 回顾 进程运行 进程的创建 进程的工作 举例 进程的删除 举例1&#xff08;走到return 0结束&#xff09; 举例2&#xff08;利用exit&#xff08;1&#xff09;结束&#xff09; 进程通信 共享内存 生产者算法 消费者算法 消息传递 定义 算法实现 总结 回顾…

数据结构--链式队列

一.链式队列的设计思想: 首先一定要理解设计的初衷,就是队头队尾的位置要满足怎么快怎么设计.那么分析如下: 最终我们敲定了入队,出队的时间复杂度都为O(1)的一种设计,也就是第四种设计;当然,头节点的数据域不使用,所以我们设计链式队列的头节点的时候删除数据域即可,链式队列…

了解虚拟路由器冗余协议(VRRP)

虚拟路由器冗余协议&#xff08;VRRP&#xff09;是一种被广泛使用的网络协议&#xff0c;旨在增强网络的可靠性和可用性。对于网络管理员和工程师来说&#xff0c;了解VRRP是确保网络能够实现无缝故障转移和保持不间断连接的关键。本文将深入探讨VRRP的基础知识&#xff0c;包…

ZooKeeper分布式服务与Kafka消息队列+ELKF整合方案

前言 ZooKeeper 是一个分布式的、开放源码的分布式应用程序协调服务&#xff0c;提供配置维护、命名服务、分布式同步、组服务等功能&#xff1b; Kafka 是一个开源的分布式流处理平台&#xff0c;它被设计用来处理实时数据流&#xff0c;包括发布和订阅消息系统、日志收集以…

leetcode经典困难题-接雨水

. - 力扣&#xff08;LeetCode&#xff09; 42. 接雨水 困难 相关标签 相关企业 给定 n 个非负整数表示每个宽度为 1 的柱子的高度图&#xff0c;计算按此排列的柱子&#xff0c;下雨之后能接多少雨水。 示例 1&#xff1a; 输入&#xff1a;height [0,1,0,2,1,0,1,3,2,1,…

单链表详解(无哨兵位),实现增删改查

1.顺序表对比单链表的缺点 中间或头部插入时&#xff0c;需要移动数据再插入&#xff0c;如果数据庞大会导致效率降低每次增容就需要申请空间&#xff0c;而且需要拷贝数据&#xff0c;释放旧空间增容造成浪费&#xff0c;因为一般都是以2倍增容 2.链表的基础知识 链表也是线…

【JavaSE进阶】00-基础语法(13-14章) 01-面向对象 02-数组 03-常用类 04-异常处理

13 第十三章 方法覆盖和多态(Polymorphism)★★★★★ 13.1 章节目标与知识框架 13.1.1 章节目标 理解在什么情况下我们需要进行方法覆盖&#xff1f;掌握在满足什么条件的时候构成方法覆盖&#xff1f;什么是多态&#xff0c;代码怎么写&#xff1f;向上转型和向下转型都是…

知云文献翻译8.2 下载地址及安装教程

知云文献翻译8.2是一款专业的文献翻译软件。它由知云公司开发&#xff0c;旨在帮助用户快速、准确地翻译各种文献和学术资料。 知云文献翻译8.2具备以下主要功能&#xff1a; 多语言翻译&#xff1a;支持多种常见的语言对&#xff0c;如中英、英中、中日、中韩等。用户可以选…

蓝桥杯DFS自练三题-串变换,玩具蛇,分糖果

题目一:串变换 代码解析: #include <iostream> using namespace std; struct Option{int select;int x;int y; }; string S,T; int N,K;//N是串的长度&#xff0c;K是操作指令的大小 Option opt[10];//存储所有的指令 bool vis[10];//标记数组&#xff0c;重要&#xff…

OpenHarmony南向开发案例:【智能门锁】

一. 简介 本demo是基于Openharmony 3.1 Beta本版开发&#xff0c;不仅可以接收数字管家应用下发的指令来控制门锁开启&#xff0c;而且还可以通过数字管家设置不同的开锁密码以及一次性密码&#xff0c;实现给临时用户一个临时密码&#xff0c;保证门户安全。当然除了开锁的功…

MySQL_00001_00000

数据准备 员工表&#xff1a;emp Oracle: create table emp ( empno number(4) not null, ename varchar2(10), job varchar2(9), mgr number(4), hiredate date, sal number(7, 2), comm number(7, 2), deptno number(2) ); insert into em…

远程桌面防火墙是什么?

远程桌面防火墙&#xff0c;是一种针对远程桌面应用的安全防护工具。它可以在保证远程桌面连接的便利性和高效性的对网络连接进行安全性的保护&#xff0c;防止未经授权的访问和潜在的安全风险。 远程桌面防火墙的主要功能是对远程桌面连接进行监控和管理。它通过识别和验证连接…