写点什么

高并发多方案秒杀架构

作者:MetaThoughts
  • 2021 年 12 月 10 日
  • 本文字数:2743 字

    阅读完需:约 9 分钟

源码地址:https://github.com/ThoughtsBeta/flash-sale

本源码原是小册的配套源码,旨在帮助小册读者从源码解构高并发设计的核心要义,现已开源。源码包含两个部分:核心应用网关应用。受限于版权要求,如需详尽的源码解读,请参阅小册《高并发秒杀设计精要与实现》。


源码核心特性


  • 基于 Spring Boot 和 Spring Cloud 的完整分布式架构应用实践;

  • 本地缓存与分布式缓存的设计技巧;

  • 同步下单和高并发库存扣减方式;

  • 异步队列下单和库存扣减;

  • 去中心化分库分表和分桶库存扣减;

  • 限流的原理和应用;

  • 黑白攻防和安全风控策略;

  • 领域驱动设计方法与实践;

  • 限流、降级与熔断落地与实践;

  • 容器化技术与 Swarm 集群部署;

  • Redis+Nacos+RocketMQ+ELK 等 10+中间件的应用与实践;

  • 应用动态配置方法和实践;

  • 分布式架构的度量与监控;

  • RESTful APIs 设计与体验。


链路视角下的整体架构


一、源码快速上手指南

为了方便读者快速上手源码,我们制作了视频指南,请移步B站查看


二、源码结构

三、技术选型概览

为了兼顾不同层次的读者,降低对技术理解的门槛和成本,在具体的技术选型上我们主要采用目前市面上主流的技术产品和方案:

四、如何启动并运行应用

对于 FlashSale 所使用到的中间件,我们提供了基于 Docker-compose 的完整方案,读者可以在 Docker 环境下一键安装。下载并打开源码之后,在项目的根目录下,你会看到enviroment目录。这个目录有四个相关的额文件和文件夹:



  • docker-compose.yml:【完整版】中间件部署脚本。相关中间件的安装脚本,你可以通过执行docker-compose -f docker-compose.yml up命令安装所依赖的全部中间件;

  • docker-compose-light.yml:【轻量版】中间件部署脚本(本地开发推荐),移除了非必要的中间件服务。相关中间件的安装脚本,你可以通过执行docker-compose -f docker-compose-light.yml up命令安装所依赖的全部中间件;

  • docker-cluster-middlewares.yml:【集群化】的中间件部署方案,适用于 Swarm 网络下的集群部署,具体部署方式可以参考第 15 章节;

  • docker-cluster-apps.yml:【集群化】的应用部署方案,适用于 Swarm 网络下的集群部署,具体部署方式可以参考第 15 章节;

  • config:相关中间件的配置文件所在位置,包括 Prometheus 和 MYSQL 等配置;

  • grafana-storage: grafana 存储的配置数据。之所以要把这个文件也提供出来,主要是因为 Grafana 的数据源和报表配置相对比较麻烦,自行配置可能需要倒腾好一阵子,我们提供出来便可以直接加载使用;

  • data:部分中间件的数据存储位置,包括 MYSQL 等。这个目录的数据是由中间件系统运行时产生,数据多且杂乱,我们并没有把它放在 git 中,因此你下载源码后不会看到它,但是运行时就会出现。那为什么要把它放在这个位置,而不是计算机系统的其他位置?这个主要是为了方便数据查看和管理,你可以随时清除所有数据重新来过,当然也可以把它放在任何地方。

第一步:启动中间件

  1. 下载源码后进入environment目录,执行docker-compose -f docker-compose-light.yml up 启动中间件;

  2. 如果你对 Docker 命令不熟悉,建议安装Docker Desktop简化容器管理,可以直观看到容器的启动状态和日志输出;

  3. 需要停止所有容器时,请执行docker-compose -f docker-compose-light.yml down

  4. 需要重新创建所有容器时,请执行docker-compose -f docker-compose-light.yml up --force-recreate.

关于数据库中库表的初始化

对于 FlashSale 所使用的业务表,我们已经将初始化脚本放在enviroment/config/mysql 中,docker-compose 在安装完 MYSQL 之后,便会执行数据表初始化动作,实现数据库的开箱即用


.├── config│   └── mysql│        └── init│           ├── flash_sale_init.sql // 默认主库初始化语句│           ├── flash_sale_init_sharding_0.sql // #0号数据库初始化语句│           ├── flash_sale_init_sharding_1.sql // #1号数据库初始化语句│           └── nacos_init.sql //Nacos持久化语句├── docker-cluster-apps.yml├── docker-cluster-middlewares.yml├── docker-compose-light.yml└── docker-compose.yml
复制代码


需要稍微注意的时,我们为 MYSQL 提供了两份初始化脚本:flash_sale_init.sqlnacos_init.yml,前者是业务表初始化脚本,后者是 Nacos 的初始化脚本,因为 FlashSale 需要借助 Nacos 所提供的动态配置功能,但是 Nacos 默认是内存存储,所以我们为它实现了基于 MYSQL 的持久化存储方案。

第二步:通过 IDE 启动应用运行

在启用应用前,请务必确保已成功执行第一步,并且各中间件容器启动成功。


  1. 下载源码后执行./mvnw clean install完成系统依赖包的安装;

  2. 选择start模块中的com.actionworks.flashsale.FlashSaleApplication作为程序入口运行。


特别提醒本地启动时请在 IDE 中指定 properties 为local.


在调试阶段,推荐使用这种方式。FlashSale 启动时,将会连接到前面所安装的中间件。


可选:通过 Docker 启动运行


除了在 IDE 启动 FlashSale 之外,通过 Docker 启动也是一种非常便捷的方案。


  1. 通过下面的命令构建 FlashSale 本地镜像:


docker build -t flash-sale-app . 
复制代码


构建完成后,通过docker images查看镜像是否已经存在。


  1. 将下面的配置添加到前面所说的docker-compose.yml中,在运行中间的时候,也将同时启动系统。当然,我们也可以通过独立的文件运行。需要注意的是,在通过 docker 运行时,FlashSale 将和中间件共处同一个网络中,我们为此创建了独立的配置文件,在运行时需要指定docker 配置。


services:  flash-sale-app:    image: flash-sale-app    container_name: flash-sale-app    environment:      - SPRING_PROFILES_ACTIVE=docker    ports:      - 8090:8090    networks:      - thoughts-beta-cluster-apps    restart: on-failure  flash-sale-gateway:    image: flash-sale-gateway    container_name: flash-sale-gateway    environment:      - SPRING_PROFILES_ACTIVE=docker    ports:      - 8080:8080    networks:      - thoughts-beta-cluster-apps    restart: on-failure
复制代码

五、 如何测试接口

在完成中间件的安装和初始化,并启动应用后,接下来我们可以试着测试接口,来判断中间件和应用是否已经就绪并工作正常。


同样的,我们不会让读者自己创建脚本和准备测试数据,毕竟这不符合我们读者至上开箱即用的原则。为此,在项目的根目录下,你会看到我们提供的postman目录,它是 Postman 的测试脚本,包含了接口定义和测试数据,你可以直接选择某个接口点击测试即可。


Postman 的脚本位置如下所示:


├── environment│   ├── config│   ├── data│   ├── docker-compose.yml│   └── grafana-storage└── postman    └── flash-sale-postman.json # 测试脚本
复制代码


关于作者


用户头像

MetaThoughts

关注

微信公众号:【技术八点半】 2018.05.13 加入

关注公众号【技术八点半】,及时获取文章更新。传递有品质的技术文章,记录平凡人的成长故事,偶尔也聊聊生活和理想。早晨8:30推送作者品质原创,晚上20:30推送行业深度好文。

评论

发布
暂无评论
高并发多方案秒杀架构