亚洲香蕉成人av网站在线观看_欧美精品成人91久久久久久久_久久久久久久久久久亚洲_热久久视久久精品18亚洲精品_国产精自产拍久久久久久_亚洲色图国产精品_91精品国产网站_中文字幕欧美日韩精品_国产精品久久久久久亚洲调教_国产精品久久一区_性夜试看影院91社区_97在线观看视频国产_68精品久久久久久欧美_欧美精品在线观看_国产精品一区二区久久精品_欧美老女人bb

首頁 > 服務器 > Web服務器 > 正文

Docker + Nodejs + Kafka + Redis + MySQL搭建簡單秒殺環境

2024-09-01 13:50:27
字體:
來源:轉載
供稿:網友

秒殺活動可以說在互聯網上隨處可見,從12306搶票,到聚劃算搶購,我們生活的方方面面都可以看到秒殺的身影。秒殺的架構設計也是對于一個架構師架構設計能力的一次考驗。本文的目的并不在于提供一個可以直接落地的設計方案,而是意在提供一個簡單的方法,一個思路,使大家能夠對于秒殺背后的一些設計有更感性的認識, 并且可以自己親自動手實踐一下。所有的配置及源碼都在本文最后的GitHub repository中可以找到。

首先,先簡單介紹下本文中會涉及到的一些組件,如下圖所示:

docker環境搭建,docker,開發環境搭建,搭建秒殺搭建

JMeter:用JMeter來模擬秒殺活動中大量并發的用戶請求

Seckill Service:基于Nodejs使用Express實現的秒殺service,圖中的步驟2,3,4都是在這個service中處理的

Redis:一個Redis的docker container,在其中保存一個名為counter的數據來表示當前剩余的庫存大小

Kafka: 一個Kafka的docker container,其實這里還有一個zookeeper的docker container,Kafka用zookeeper來存放一些元數據,在程序中并沒有涉及到,所以也就不單獨列出來說了。Seckill service在更新完Redis之后,會發送一條消息給Kafka表示一次成功的秒殺

Seckill Kafka Consumer: 基于Nodejs的Kafka consumer,會從Kafka中去獲取秒殺成功的消息,處理并且存儲到MySQL中

MySQL:一個MySQL的docker container,最終秒殺成功的請求都會對應著數據庫表中的一條記錄

環境搭建

1 . 安裝JMeter
從官網下載一個JMeter的binary包,執行bin目錄下的jmeter即可啟動,啟動后如下圖新建一個名為Seckill的Thread Group,并且設置在5s內發起2000次并發請求。

docker環境搭建,docker,開發環境搭建,搭建秒殺搭建

在這個Thread Group下新建一個Http Request的Sampler并命名為Seckill,按下圖配置host name,port number,http request method以及request path

docker環境搭建,docker,開發環境搭建,搭建秒殺搭建

2 . 安裝Redis,Kafka, Zookeeper和MySQL
為了方便搭建環境,這幾個組件會以docker container的形式啟動。在此之前需要去Docker官網下載并安裝Docker Engine,Docker Machine和Docker Compose。如果是在Windows或者Mac上,Docker官網提供Docker For Windows/Docker For Mac安裝程序,可以很方便的把這3個組件安裝好。

3 . 編寫Docker Compose文件
創建一個Seckill項目文件夾,新建一個docker-compose.yml文件,內容如下:

docker環境搭建,docker,開發環境搭建,搭建秒殺搭建

配置文件中一共配置了4個services對應4個docker container,分別是zookeeper,kafka,redis以及mysql。這里有兩個地方需要設置成你實際環境的值,一個是kafka配置下面的KAFKA_ADVERTISED_HOST_NAME字段,這個需要設置成本地機器的IP。另一個是MYSQL配置下面的MYSQL_ROOT_PASSWORD,你可以設置成你想要的任何值。

創建好這個文件之后,就可以去命令行項目根目錄中執行docker-compose up,docker engine就會把上面配置的這4個組件全部啟動起來。

注意:在啟動完之后,需要去Kafka容器中創建一個名為CAR_NUMBER的topic,去Redis容器中創建一個名為counter的計數器(設置值為100,代表庫存初始值為100),去MySQL容器中創建一個名為seckill的數據表(包含一個自增長的id自段和一個timestamp格式的date字段)。

代碼片段

1 . Seckill Service

docker環境搭建,docker,開發環境搭建,搭建秒殺搭建

docker環境搭建,docker,開發環境搭建,搭建秒殺搭建

第1-8行,引入了程序需要用到的對象,nodejs的mvc框架express, redis, kafka等

第10行,利用express提供的方法暴露出一個path為/seckill的POST方法

第12行,定義了一個方法,在54行會調用

第13-22行,新建了一個redis client并且監聽error事件

第23行,這行代碼非常關鍵,它的作用是讓redis cilent監視redis中的counter值,之后會啟動一個事務,如果在事務提交的時候發現有其它client修改了counter值的話,就會放棄這個事務。

第24行,通過redis client的異步方法獲取counter的值,因為redis的get操作是原子的,所以在這里不用擔心有并發讀寫的問題。

第25-28行,判斷返回的庫存值是否大于0,如果大于0,通過client.multi()啟動一個事務,通過decr()方法將counter值減1,最后通過exec()方法提交事務;如果小于0,則執行第47行,打印賣完了并且關閉redis client。

第29-46行,這里我們看一下multi.exec()中的這個回調方法。在前面我們已經使用watch對counter進行了監視。如果在事務提交過程中有其它client修改了counter值的話,回調方法中的replies參數就會是null,可以看到第29-31行,程序會打印“可能有沖突”并且再次調用fn方法重試。
如果replies的值不為null,就會使用kafka的producer發送一條message到CAR_NUMBER topic。

2 . seckill_kafka_consumer

docker環境搭建,docker,開發環境搭建,搭建秒殺搭建

這里的代碼就比較簡單了,會初始化一個kafka consumer監聽CAR_NUMBER topic,對于新獲取的消息會去MySQL的seckill表里插入一條記錄。

操作步驟

啟動docker container

啟動Seckill_Service

啟動seckill_kafka_consumer

啟動JMeter發送2000個并發請求

結果 JMeter request results docker環境搭建,docker,開發環境搭建,搭建秒殺搭建

Redis counter field

docker環境搭建,docker,開發環境搭建,搭建秒殺搭建

MySQL seckill table

docker環境搭建,docker,開發環境搭建,搭建秒殺搭建

可以看到,最后redis中的counter變成0,seckill數據表中會插入100條記錄,沒有發生超賣或者少賣的情況。當然在實際生產環境場景中,還有許多其它需要考慮的地方,希望此文可以起到一個拋磚引玉的作用,幫助大家更好的理解秒殺場景。

項目GitHub地址: MockSecKill


發表評論 共有條評論
用戶名: 密碼:
驗證碼: 匿名發表
亚洲香蕉成人av网站在线观看_欧美精品成人91久久久久久久_久久久久久久久久久亚洲_热久久视久久精品18亚洲精品_国产精自产拍久久久久久_亚洲色图国产精品_91精品国产网站_中文字幕欧美日韩精品_国产精品久久久久久亚洲调教_国产精品久久一区_性夜试看影院91社区_97在线观看视频国产_68精品久久久久久欧美_欧美精品在线观看_国产精品一区二区久久精品_欧美老女人bb
久久久久久久成人| 精品国产91久久久久久| 国产精品久久久久久网站| 国产亚洲精品美女久久久| 欧美精品久久久久久久久| 国产在线视频91| 97在线观看免费高清| 清纯唯美日韩制服另类| 亚洲www永久成人夜色| 亚洲高清色综合| 日韩在线免费高清视频| 色婷婷av一区二区三区久久| 57pao国产成人免费| 成人女保姆的销魂服务| 精品久久国产精品| 欧美国产高跟鞋裸体秀xxxhd| 欧美亚洲第一页| 性欧美视频videos6一9| 日韩在线不卡视频| 国产97在线亚洲| 久久久久久噜噜噜久久久精品| 亚洲va久久久噜噜噜久久天堂| 亚洲国产高清福利视频| 在线亚洲午夜片av大片| 国产精品久久久久久久久久久久| 久久久国产一区二区三区| 亚洲精品永久免费精品| 日韩影视在线观看| 久久精品久久精品亚洲人| 2019中文字幕在线免费观看| 久久综合伊人77777尤物| 国模精品视频一区二区| 91精品国产777在线观看| 国产精品网红福利| 国产在线拍偷自揄拍精品| xxxx欧美18另类的高清| 日本道色综合久久影院| xvideos亚洲| 亚洲第一视频在线观看| 中文字幕无线精品亚洲乱码一区| 亚洲专区在线视频| 亚洲精品自产拍| 久久中国妇女中文字幕| 亚洲免费伊人电影在线观看av| 日韩精品在线影院| 亚洲综合大片69999| 黑人巨大精品欧美一区免费视频| 久久免费精品日本久久中文字幕| 亚洲在线视频观看| 国产91色在线免费| 日韩在线播放av| 成人亚洲激情网| 国产精品久久久久一区二区| 国产手机视频精品| 亚洲激情在线观看| 韩国精品久久久999| 91美女片黄在线观看游戏| 国产小视频91| 日韩电影大全免费观看2023年上| 性欧美长视频免费观看不卡| 国产欧美日韩精品丝袜高跟鞋| 亚洲天堂网站在线观看视频| 91精品在线一区| 欧美性生交大片免费| 91精品视频在线播放| 欧美中文在线视频| 欧美在线视频网站| 国产精品99久久久久久人| 91精品国产色综合久久不卡98| 91麻豆国产精品| 中文日韩在线视频| 亚洲女人被黑人巨大进入| 欧美亚洲日本网站| 91免费看视频.| 亚洲综合自拍一区| 亚洲精品一区中文| 中文字幕日韩有码| 91久久国产精品91久久性色| 亚洲午夜激情免费视频| 国产成人拍精品视频午夜网站| 亚洲精品一区二区三区不| 欧美一级大片在线免费观看| 成人性生交大片免费看视频直播| 欧美激情在线观看视频| 国内精品国产三级国产在线专| 久久精品国产成人| 性欧美暴力猛交69hd| 热门国产精品亚洲第一区在线| 午夜精品福利视频| 久久精品99久久久香蕉| 日韩中文字在线| 日韩成人激情视频| 按摩亚洲人久久| 日韩免费av一区二区| 国产欧美va欧美va香蕉在| xxxxx91麻豆| 欧美天堂在线观看| 日韩不卡中文字幕| 亚洲国产欧美在线成人app| 亚洲精品免费一区二区三区| 欧美日韩亚洲系列| 精品中文字幕视频| xxxx欧美18另类的高清| 久久精品在线播放| 欧美成人全部免费| 国产一区二区美女视频| 亚洲bt欧美bt日本bt| 日韩精品中文字幕在线播放| 91网站在线免费观看| 都市激情亚洲色图| 欧美猛少妇色xxxxx| 91色琪琪电影亚洲精品久久| 欧美日韩中文在线观看| 亚洲视频免费一区| 国产成人91久久精品| 亚洲精品美女久久| 热草久综合在线| 国产精品三级久久久久久电影| 日韩精品欧美激情| 亚洲国产精品字幕| 亚洲专区中文字幕| 欧美精品性视频| xxxxx91麻豆| 九九九热精品免费视频观看网站| 亚洲欧洲高清在线| xxxxxxxxx欧美| 欧美日韩成人在线视频| 亚洲天堂成人在线| 亚洲人成电影在线播放| 2019精品视频| 不卡av电影在线观看| 青青久久aⅴ北条麻妃| 国产乱人伦真实精品视频| 欧美一区三区三区高中清蜜桃| 欧美激情乱人伦| 久久夜色精品国产亚洲aⅴ| 成人激情视频在线观看| 日韩一区av在线| 亚洲综合一区二区不卡| 国产成人精彩在线视频九色| 91sao在线观看国产| 精品国产一区二区三区久久久| 久久综合亚洲社区| 精品伊人久久97| 国产美女直播视频一区| 亚洲人成网站在线播| 伊人伊成久久人综合网小说| 欧美在线观看网站| 精品久久久久久久大神国产| 国产精品一区二区久久久久| 中文字幕少妇一区二区三区| 疯狂做受xxxx欧美肥白少妇| 久久九九热免费视频| 国产欧美精品一区二区三区介绍| 伊人激情综合网| 91久久在线播放| 亚洲国产精久久久久久久| 欧美日韩中国免费专区在线看| 日韩精品免费一线在线观看| 久久精品国产亚洲| 亚洲自拍欧美色图| 国产日韩av在线播放| 成人av.网址在线网站| 伊人久久男人天堂|