主頁 > 後端開發 > Redis+分布式+秒殺

Redis+分布式+秒殺

2023-05-30 07:43:44 後端開發

聊一下MySQL

關于mysql關系型資料庫的一些分析:

1、從性能上:如果我們碰到需要執行耗時特別久,并且執行結果不是很頻繁變動的SQL陳述句,我們就沒有必要每次都去查詢資料庫,因為每次操作資料庫都很耗時,

2、從并發上:在大并發的情況下(比如618秒殺活動,你敢讓千萬級的請求直接打到資料庫上嗎?)所有的請求直接訪問資料庫,資料庫就由可能造成宕機,

Redis

針對第一種情況,可以將不那么頻繁變換的結果放入基于快取的資料庫中,每次查詢就去快取中讀資料,這樣就提升了查詢效率,也減輕了資料庫的壓力,

針對第二種情況,可以讓這些高并發的請求從資料庫中分離出來,不去直接訪問資料庫,另外找一個適合高并發的來處理請求,

那就是Redis!!!

是什么?

  • 基于記憶體的K/V存盤中間件(關于K/V你還能想到誰?)
  • NoSQL(非關系型)資料庫

干啥用?

  • 快取

(將熱點資料放到記憶體中,設定記憶體的最大使用量以及淘汰策略來保證快取的命中率)

  • 設定定時過期資料
  • 分布式鎖

(在分布式場景下,無法使用單機環境下的鎖來對多個節點上的行程進行同步,可以使用 Redis 自帶的 SETNX 命令實作分布式鎖)

  • 抽獎功能
  • 實作排行榜
  • .......

面試題:1、redis常見的資料結構有哪些?

2、Redis持久化了解么?

秒殺場景

618預熱早已開啟,其中必不可少的秒殺是一個非常典型的活動場景,比如,在雙 11、618 等電商促銷活動中,都會有秒殺場景,秒殺場景的業務特點是限時限量,業務系統要處理瞬時的大量高并發請求,在秒殺活動中,大量用戶在同一時間視窗內搶購限量商品,這往往會給系統帶來極高的并發壓力,使用傳統的關系型資料庫來處理并發請求往往會導致性能瓶頸和系統崩潰,而Redis作為一種高性能的記憶體資料庫,能夠快速處理大量的讀寫請求,非常適合用于秒殺場景,

秒殺的特征一:瞬時并發訪問量非常高,一般資料庫只能支撐千級別的并發請求,而redis的并發處理能力能達到萬級別,甚至更高,在秒殺時,我們需要使用redis攔截大部分請求,避免大量請求直接發送給資料庫,造成資料庫宕機,

秒殺的特征二:讀多寫少,都是簡單的查詢操作,對于簡單的查詢操作并且結果相對固定我們可以先將其查詢出來放入redis中,減輕資料庫的壓力,秒殺活動中只有少部分用戶能成功下單,所以,商品庫存查詢操作(讀操作)要遠多于庫存扣減和下單操作(寫操作),

秒殺的特征三:實時性和回應時間要求, 秒殺活動通常是實時進行的,用戶希望盡快得知搶購結果,系統需要具備高性能和低延遲,及時回應用戶的請求,

三個階段

秒殺前

秒殺前,用戶會不斷的重繪商品詳情頁,那么就會導致對詳情頁的請求量急劇增加,這個階段的應對方案,一般是盡量把商品詳情頁的頁面元素靜態化,然后使用 CDN 或是瀏覽器把這些靜態化的元素快取起來,這樣一來,秒殺前的大量請求可以直接由 CDN 或是瀏覽器快取服務,不會到達服務器端了,

秒殺時

用戶點擊秒殺按鈕---->大量并發請求查詢庫存--->有庫存(下單){沒有則回傳,可能會點擊其他秒殺按鈕,繼續查詢庫存}--->庫存扣減---->生成實際訂單---->后續處理(物流、訂單支付等)

這個階段的操作是:庫存查驗、庫存扣減、訂單處理,而最大的并發力都在庫存查驗操作上,這個階段為了支撐大量高并發的庫存查驗請求,我們需要在這個環節使用 Redis 保存庫存量,這樣一來,請求可以直接從 Redis 中讀取庫存并進行查驗,

為什么訂單處理操作可以在資料庫中執行?而庫存扣減操作不能在資料庫中執行?

1、在資料庫中進行庫存扣減操作會帶來額外的開銷,我們已經事先在redis中保存好了庫存量,如果交給資料庫來處理扣減,那么就需要資料庫將最新的值再同步到redis中,這樣反而繁瑣也帶來了額外的開銷,

2、可能會出現超售的情況,資料庫的處理速度很慢,而秒殺又是一個快速高并發的場景,可能資料庫更新完一個庫值,秒殺就結束了,可能會導致用戶查詢到舊的庫存值,再進行下單,出現超售的情況,

所以需要在redis中把庫存扣減和庫存查驗兩個操作一氣呵成,實作原子操作,

秒殺后

用戶量減少,服務器完全可以獨立進行訂單處理等操作,

實作

我們可以使用Redis的原子操作和分布式鎖來支撐秒殺時的場景,(本文介紹分布式鎖)

簡單聊聊分布式

簡單理解:類比衛生間的隔間:

  1. 隔離性: 衛生間的隔間將每個使用者隔離開來,使每個人都能獨立使用空間,不會相互干擾,同樣,分布式系統中的各個節點也是相互隔離的,它們可以獨立運行,不會相互影響,
  2. 資源共享: 衛生間的隔間提供共享的基礎設施,如水源和排水管道等,類似地,分布式系統中的節點可以共享一些資源,如共享存盤、共享資料庫等,
  3. 容錯性: 如果一個衛生間隔間出現故障或需要維護,其他隔間仍然可以繼續使用,同樣,分布式系統中的節點之間可以具備容錯能力,如果某個節點發生故障,其他節點可以接替其作業,
  4. 擴展性: 如果需要更多的衛生間隔間,可以增加更多的隔間來滿足需求,同樣,分布式系統可以通過增加更多的節點來實作擴展性,以處理更大的負載和流量,

Redis分布式鎖(秒殺場景)

先讓客戶端向 Redis 申請分布式鎖,只有拿到鎖的客戶端才能執行庫存查驗和庫存扣減,這樣一來,大量的秒殺請求就會在爭奪分布式鎖時被過濾掉,而且,庫存查驗和扣減也不用使用原子操作了,因為多個并發客戶端只有一個客戶端能夠拿到鎖,已經保證了客戶端并發訪問的互斥性,大部分秒殺請求本身就會因為搶不到鎖而被攔截,

為啥要實作分布式鎖:

  • 在有限的資源情況下,控制同一時間(段)只有某些執行緒(用戶/服務器)能訪問到資源,(比如秒殺時)
  • 單個鎖只對單個jvm有限(好比用廁所只能用專屬于自己的哪個)

關鍵:怎么保證同一時間內只有一個服務器搶到鎖,

核心思想是:先來的人先把資料改成自己的標識(ip)后來的人發現標識已存在,就搶鎖失敗,繼續等待,等先來的人執行方法結束,把標識清空,其他的人繼續搶鎖,(類比搶廁所/上廁所 )

注意事項:

  • 要注意解鎖(你不可能一直占著廁所吧!!!),
  • 一定要注意加上過期時間(否則如果因為服務器掛掉,鎖就會一直存在了),

使用分布式鎖可能存在的問題

1、鎖提前過期:分布式鎖設定的時間提前過期,會導致其他方法加入一塊同時執行,(好比你拉*沒拉完,外面大哥把廁所門給撬開了)導致多個方法同時執行了,

2、還有可能導致連鎖效應(解鎖時不小心釋放掉別人的鎖)同樣導致多個方法同時執行,

3、解鎖的時候,判斷好了是自己的鎖,但是當要執行解鎖的時候,就在這個時刻,自己的鎖過期了(不需要刪了)有其他的方法見縫插針進來了,導致A刪了B的鎖,(就像是你用完廁所,你自己的門鎖時間過期開了,你手里還有把解鎖的“鑰匙”,結果你打開了旁邊大哥的門)這里其實是破壞了原子性,(需要保證A的操作是原子性的,不能有其他操作打斷,(也就是說A的上鎖和解鎖中間不能有其他的鎖操作)跟作業系統的PV操作好像),

4、鎖提前過期,任務還沒執行完,可以進行續期,(就像你上廁所,外面大哥等了你10min,結果你還沒完事,然后你跟大哥說再給我10min)進行續期,

關于redis在秒殺場景中的應用還有很多,這只是一丟丟~

場景題

1、如何防止超賣問題?

2、如何保證訂單的順序和可靠性?

3、如何解決重復下單的問題?

4、做了什么限流削峰的措施?

5、如果快取中的資料突然失效,導致請求全部打到了資料庫,怎么辦?

6、秒殺系統面臨的問題有哪些?

........

博客參考

實踐篇(11)Redis支撐秒殺場景的關鍵技術

知識星球

轉載請註明出處,本文鏈接:https://www.uj5u.com/houduan/553742.html

標籤:其他

上一篇:< Python全景系列-8 > Python超薄感知,超強保護:例外處理的絕佳實踐

下一篇:返回列表

標籤雲
其他(159934) Python(38185) JavaScript(25462) Java(18151) C(15233) 區塊鏈(8268) C#(7972) AI(7469) 爪哇(7425) MySQL(7215) html(6777) 基礎類(6313) sql(6102) 熊猫(6058) PHP(5873) 数组(5741) R(5409) Linux(5344) 反应(5209) 腳本語言(PerlPython)(5129) 非技術區(4971) Android(4578) 数据框(4311) css(4259) 节点.js(4032) C語言(3288) json(3245) 列表(3129) 扑(3119) C++語言(3117) 安卓(2998) 打字稿(2995) VBA(2789) Java相關(2746) 疑難問題(2699) 细绳(2522) 單片機工控(2479) iOS(2434) ASP.NET(2403) MongoDB(2323) 麻木的(2285) 正则表达式(2254) 字典(2211) 循环(2198) 迅速(2185) 擅长(2169) 镖(2155) .NET技术(1977) 功能(1967) Web開發(1951) HtmlCss(1949) C++(1926) python-3.x(1918) 弹簧靴(1913) xml(1889) PostgreSQL(1878) .NETCore(1862) 谷歌表格(1846) Unity3D(1843) for循环(1842)

熱門瀏覽
  • 【C++】Microsoft C++、C 和匯編程式檔案

    ......

    uj5u.com 2020-09-10 00:57:23 more
  • 例外宣告

    相比于斷言適用于排除邏輯上不可能存在的狀態,例外通常是用于邏輯上可能發生的錯誤。 例外宣告 Item 1:當函式不可能拋出例外或不能接受拋出例外時,使用noexcept 理由 如果不打算拋出例外的話,程式就會認為無法處理這種錯誤,并且應當盡早終止,如此可以有效地阻止例外的傳播與擴散。 示例 //不可 ......

    uj5u.com 2020-09-10 00:57:27 more
  • Codeforces 1400E Clear the Multiset(貪心 + 分治)

    鏈接:https://codeforces.com/problemset/problem/1400/E 來源:Codeforces 思路:給你一個陣列,現在你可以進行兩種操作,操作1:將一段沒有 0 的區間進行減一的操作,操作2:將 i 位置上的元素歸零。最終問:將這個陣列的全部元素歸零后操作的最少 ......

    uj5u.com 2020-09-10 00:57:30 more
  • UVA11610 【Reverse Prime】

    本人看到此題沒有翻譯,就附帶了一個自己的翻譯版本 思考 這一題,它的第一個要求是找出所有 $7$ 位反向質數及其質因數的個數。 我們應該需要質數篩篩選1~$10^{7}$的所有數,這里就不慢慢介紹了。但是,重讀題,我們突然發現反向質數都是 $7$ 位,而將它反過來后的數字卻是 $6$ 位數,這就說明 ......

    uj5u.com 2020-09-10 00:57:36 more
  • 統計區間素數數量

    1 #pragma GCC optimize(2) 2 #include <bits/stdc++.h> 3 using namespace std; 4 bool isprime[1000000010]; 5 vector<int> prime; 6 inline int getlist(int ......

    uj5u.com 2020-09-10 00:57:47 more
  • C/C++編程筆記:C++中的 const 變數詳解,教你正確認識const用法

    1、C中的const 1、區域const變數存放在堆疊區中,會分配記憶體(也就是說可以通過地址間接修改變數的值)。測驗代碼如下: 運行結果: 2、全域const變數存放在只讀資料段(不能通過地址修改,會發生寫入錯誤), 默認為外部聯編,可以給其他源檔案使用(需要用extern關鍵字修飾) 運行結果: ......

    uj5u.com 2020-09-10 00:58:04 more
  • 【C++犯錯記錄】VS2019 MFC添加資源不懂如何修改資源宏ID

    1. 首先在資源視圖中,添加資源 2. 點擊新添加的資源,復制自動生成的ID 3. 在解決方案資源管理器中找到Resource.h檔案,編輯,使用整個專案搜索和替換的方式快速替換 宏宣告 4. Ctrl+Shift+F 全域搜索,點擊查找全部,然后逐個替換 5. 為什么使用搜索替換而不使用屬性視窗直 ......

    uj5u.com 2020-09-10 00:59:11 more
  • 【C++犯錯記錄】VS2019 MFC不懂的批量添加資源

    1. 打開資源頭檔案Resource.h,在其中預先定義好宏 ID(不清楚其實ID值應該設定多少,可以先新建一個相同的資源項,再在這個資源的ID值的基礎上遞增即可) 2. 在資源視圖中選中專案資源,按F7編輯資源檔案,按 ID 型別 相對路徑的形式添加 資源。(別忘了先把檔案拷貝到專案中的res檔案 ......

    uj5u.com 2020-09-10 01:00:19 more
  • C/C++編程筆記:關于C++的參考型別,專供新手入門使用

    今天要講的是C++中我最喜歡的一個用法——參考,也叫別名。 參考就是給一個變數名取一個變數名,方便我們間接地使用這個變數。我們可以給一個變數創建N個參考,這N + 1個變數共享了同一塊記憶體區域。(參考型別的變數會占用記憶體空間,占用的記憶體空間的大小和指標型別的大小是相同的。雖然參考是一個物件的別名,但 ......

    uj5u.com 2020-09-10 01:00:22 more
  • 【C/C++編程筆記】從頭開始學習C ++:初學者完整指南

    眾所周知,C ++的學習曲線陡峭,但是花時間學習這種語言將為您的職業帶來奇跡,并使您與其他開發人員區分開。您會更輕松地學習新語言,形成真正的解決問題的技能,并在編程的基礎上打下堅實的基礎。 C ++將幫助您養成良好的編程習慣(即清晰一致的編碼風格,在撰寫代碼時注釋代碼,并限制類內部的可見性),并且由 ......

    uj5u.com 2020-09-10 01:00:41 more
最新发布
  • Redis+分布式+秒殺

    ## 聊一下MySQL 關于mysql關系型資料庫的一些分析: 1、從性能上:如果我們碰到需要執行耗時特別久,并且執行結果不是很頻繁變動的SQL陳述句,我們就沒有必要每次都去查詢資料庫,因為每次操作資料庫都很耗時。 2、從并發上:在大并發的情況下(比如618秒殺活動,你敢讓千萬級的請求直接打到資料庫上 ......

    uj5u.com 2023-05-30 07:43:44 more
  • < Python全景系列-8 > Python超薄感知,超強保護:例外處理的絕佳實

    歡迎來到系列第八篇,例外處理的深入探討。本文將分五部分展開。首先,我們將學習Python例外處理的基礎知識,理解`try/except`陳述句的用法。然后,我們將了解Python的常見例外型別并通過實體理解它們的作用。第三部分,我們將更深入地決議`try-except`塊,理解其作業原理及更加復雜的用... ......

    uj5u.com 2023-05-30 07:43:38 more
  • Pandas 加載資料的方法和技巧

    哈嘍大家好,我是咸魚 相信小伙伴們在學習 python 資料分析的程序中或多或少都會聽說或者使用過 pandas pandas 是 python 的一個拓展庫,常用于資料分析 今天咸魚將介紹幾個關于 pandas 匯入資料的方法和技巧 ## 從 URL 獲取 csv 資料 關于 pandas 匯入 ......

    uj5u.com 2023-05-30 07:43:31 more
  • Angular Highcharts教程_編程入門自學教程_菜鳥教程-免費教程分

    ## 教程簡介 Angular Highcharts是一個基于Angular的開源組件,可在Angular應用程式中提供優雅且功能豐富的高圖表可視化,并可與Angular組件無縫配合使用。 [Angular Highcharts入門教程](https://www.itbaoku.cn/tutoria ......

    uj5u.com 2023-05-30 07:43:26 more
  • 面試官:MySQL 自增主鍵一定是連續的嗎?大部分人都會答錯!

    ## 測驗環境: > MySQL版本:8.0 資料庫表:T (主鍵id,唯一索引c,普通欄位d) ![](http://img.javastack.cn/1685072039483867.png) 如果你的業務設計依賴于自增主鍵的連續性,這個設計假設自增主鍵是連續的。但實際上,這樣的假設是錯的,因為 ......

    uj5u.com 2023-05-30 07:43:14 more
  • VST實體(5)節點(NODE) 二、節點的遍歷

    二、節點的遍歷 每一個節點都有一個index值,用于描述其在相同level,相同父節點下的序號,但是,遍歷時并不能利用這個值,因為這個值是變化的,當進行排序,插入節點、洗掉節點等等操作時,這個index會發生改變。 同樣的,vst.AbsoluteIndex(node)回傳的是某一節點在VST中的絕 ......

    uj5u.com 2023-05-30 07:43:05 more
  • c語言,函式的址傳遞例子

    編碼如下:#include <stdio.h> void swap(int* x,int* y ){ int tmp; tmp=*x; *x=*y; *y=tmp ; }; int main(){ int a=4; int b=5; printf("befer\n"); printf("a=%d\n ......

    uj5u.com 2023-05-30 07:43:01 more
  • Python日期帶時區轉換工具類總結

    @[TOC] # 1.背景 最近專案是國際專案,所以需要經常需要用到UTC時間和local時間的轉換。 所以整理了一下時間戳工具類,方便使用。 這里主要用到的包就是datatime、time、pytz。 # 2. 遇到的坑 直接看測驗案例 ```python tzinfo=pytz.timezone ......

    uj5u.com 2023-05-30 07:42:57 more
  • 詳談Java中Properties配置類怎么用

    本文將為大家詳細講解Java中Properties配置類怎么用,這是我們進行開發時經常用到的知識點,也是大家在學習Java中很重要的一個知識點,更是我們在面試時有可能會問到的問題!文章較長,干貨滿滿,建議大家收藏慢慢學習。文末有本文重點總結,主頁有全系列文章分享。技術類問題,歡迎大家和我們一起交流討... ......

    uj5u.com 2023-05-30 07:42:53 more
  • Python工具箱系列(三十四)

    SQLAlchemy是著名的ORM(Object Relational Mapping-物件關系映射)框架。其主要作用是在編程中,把面向物件的概念跟資料庫中表的概念對應起來。對許多語言(例如JAVA/PYTHON)來說就是定義一個物件,并且這個物件對應著一張資料庫的表。而這個物件的實體,就對應著表中... ......

    uj5u.com 2023-05-30 07:42:45 more