濮阳杆衣贸易有限公司

主頁 > 知識庫 > 分析Mysql事務和數據的一致性處理問題

分析Mysql事務和數據的一致性處理問題

熱門標簽:銀川電銷外呼系統定制 西安400電話在哪里辦理 中科嘉智人工智能電銷機器人 上海智能外呼系統需要多少錢 哈爾濱crm外呼系統價格 做地圖標注都需要什么工具 電銷機器人好品牌門薩維l 甘孜電話機器人廠家 凱立德科技館地圖標注

這篇文章通過安全性,用法,并發(fā)處理等方便詳細分析了Mysql事務和數據的一致性處理問題,以下就是全部內容:

在工作中,我們經常會遇到這樣的問題,需要更新庫存,當我們查詢到可用的庫存準備修改時,這時,其他的用戶可能已經對這個庫存數據進行修改了,導致,我們查詢到的數據會有問題,下面我們就來看解決方法。

在MySQL的InnoDB中,預設的Tansaction isolation level 為REPEATABLE READ(可重讀)

如果SELECT 后面若要UPDATE 同一個表單,最好使用SELECT ... UPDATE。

舉個例子:

假設商品表單products 內有一個存放商品數量的quantity ,在訂單成立之前必須先確定quantity 商品數量是否足夠(quantity>0) ,然后才把數量更新為1。代碼如下:

SELECT quantity FROM products WHERE id=3; UPDATE products SET quantity = 1 WHERE id=3;

為什么不安全呢?

少量的狀況下或許不會有問題,但是大量的數據存取「鐵定」會出問題。如果我們需要在quantity>0 的情況下才能扣庫存,假設程序在第一行SELECT 讀到的quantity 是2 ,看起來數字沒有錯,但是當MySQL 正準備要UPDATE 的時候,可能已經有人把庫存扣成0 了,但是程序卻渾然不知,將錯就錯的UPDATE 下去了。因此必須透過的事務機制來確保讀取及提交的數據都是正確的。

于是我們在MySQL 就可以這樣測試,代碼如下:

SET AUTOCOMMIT=0; BEGIN WORK; SELECT quantity FROM products WHERE id=3 FOR UPDATE;

此時products 數據中id=3 的數據被鎖住(注3),其它事務必須等待此次事務 提交后才能執(zhí)行

SELECT * FROM products WHERE id=3 FOR UPDATE 

如此可以確保quantity 在別的事務讀到的數字是正確的。

UPDATE products SET quantity = '1' WHERE id=3 ; COMMIT WORK;

提交(Commit)寫入數據庫,products 解鎖。

注1: BEGIN/COMMIT 為事務的起始及結束點,可使用二個以上的MySQL Command 視窗來交互觀察鎖定的狀況。

注2: 在事務進行當中,只有SELECT ... FOR UPDATE 或LOCK IN SHARE MODE 同一筆數據時會等待其它事務結束后才執(zhí)行,一般SELECT ... 則不受此影響。

注3: 由于InnoDB 預設為Row-level Lock,數據列的鎖定可參考這篇。

注4: InnoDB 表單盡量不要使用LOCK TABLES 指令,若情非得已要使用,請先看官方對于InnoDB 使用LOCK TABLES 的說明,以免造成系統經常發(fā)生死鎖。

更高級用法

如果我們需要先查詢,后更新數據的話,最好可以這樣使用語句:

UPDATE products SET quantity = '1' WHERE id=3 AND quantity > 0;

這樣,可以不用添加事物就可處理。

mysql處理高并發(fā),防止庫存超賣

看到了一篇非常好的文章,特轉此學習。

今天王總又給我們上了一課,其實mysql處理高并發(fā),防止庫存超賣的問題,在去年的時候,王總已經提過;但是很可惜,即使當時大家都聽懂了,但是在現實開發(fā)中,還是沒這方面的意識。今天就我的一些理解,整理一下這個問題,并希望以后這樣的課程能多點。

先來就庫存超賣的問題作描述:一般電子商務網站都會遇到如團購、秒殺、特價之類的活動,而這樣的活動有一個共同的特點就是訪問量激增、上千甚至上萬人搶購一個商品。然而,作為活動商品,庫存肯定是很有限的,如何控制庫存不讓出現超買,以防止造成不必要的損失是眾多電子商務網站程序員頭疼的問題,這同時也是最基本的問題。

從技術方面剖析,很多人肯定會想到事務,但是事務是控制庫存超賣的必要條件,但不是充分必要條件。

舉例:

總庫存:4個商品

請求人:a、1個商品 b、2個商品 c、3個商品

程序如下:

beginTranse(開啟事務)
try{
 $result = $dbca->query('select amount from s_store where postID = 12345');
 if(result->amount > 0){
  //quantity為請求減掉的庫存數量
  $dbca->query('update s_store set amount = amount - quantity where postID = 12345');
 }
}catch($e Exception){
 rollBack(回滾)
}
commit(提交事務)

以上代碼就是我們平時控制庫存寫的代碼了,大多數人都會這么寫,看似問題不大,其實隱藏著巨大的漏洞。數據庫的訪問其實就是對磁盤文件的訪問,數據庫中的表其實就是保存在磁盤上的一個個文件,甚至一個文件包含了多張表。例如由于高并發(fā),當前有三個用戶a、b、c三個用戶進入到了這個事務中,這個時候會產生一個共享鎖,所以在select的時候,這三個用戶查到的庫存數量都是4個,同時還要注意,mysql innodb查到的結果是有版本控制的,再其他用戶更新沒有commit之前(也就是沒有產生新版本之前),當前用戶查到的結果依然是就版本;

然后是update,假如這三個用戶同時到達update這里,這個時候update更新語句會把并發(fā)串行化,也就是給同時到達這里的是三個用戶排個序,一個一個執(zhí)行,并生成排他鎖,在當前這個update語句commit之前,其他用戶等待執(zhí)行,commit后,生成新的版本;這樣執(zhí)行完后,庫存肯定為負數了。但是根據以上描述,我們修改一下代碼就不會出現超買現象了,代碼如下:

beginTranse(開啟事務)
try{
 //quantity為請求減掉的庫存數量
 $dbca->query('update s_store set amount = amount - quantity where postID = 12345');
 $result = $dbca->query('select amount from s_store where postID = 12345');
 if(result->amount  0){
  throw new Exception('庫存不足');
 }
}catch($e Exception){
 rollBack(回滾)
}
commit(提交事務)

另外,更簡潔的方法:

beginTranse(開啟事務)
try{
 //quantity為請求減掉的庫存數量
 $dbca->query('update s_store set amount = amount - quantity where amount>=quantity and postID = 12345');
}catch($e Exception){
 rollBack(回滾)
}
commit(提交事務)

1、在秒殺的情況下,肯定不能如此高頻率的去讀寫數據庫,會嚴重造成性能問題的。

必須使用緩存,將需要秒殺的商品放入緩存中,并使用鎖來處理其并發(fā)情況。當接到用戶秒殺提交訂單的情況下,先將商品數量遞減(加鎖/解鎖)后再進行其他方面的處理,處理失敗在將數據遞增1(加鎖/解鎖),否則表示交易成功。
當商品數量遞減到0時,表示商品秒殺完畢,拒絕其他用戶的請求。

2、這個肯定不能直接操作數據庫的,會掛的。直接讀庫寫庫對數據庫壓力太大,要用緩存。

把你要賣出的商品比如10個商品放到緩存中;然后在memcache里設置一個計數器來記錄請求數,這個請求書你可以以你要秒殺賣出的商品數為基數,比如你想賣出10個商品,只允許100個請求進來。那當計數器達到100的時候,后面進來的就顯示秒殺結束,這樣可以減輕你的服務器的壓力。然后根據這100個請求,先付款的先得后付款的提示商品以秒殺完。

3、首先,多用戶并發(fā)修改同一條記錄時,肯定是后提交的用戶將覆蓋掉前者提交的結果了。

這個直接可以使用加鎖機制去解決,樂觀鎖或者悲觀鎖。

樂觀鎖:,就是在數據庫設計一個版本號的字段,每次修改都使其+1,這樣在提交時比對提交前的版本號就知道是不是并發(fā)提交了,但是有個缺點就是只能是應用中控制,如果有跨應用修改同一條數據樂觀鎖就沒辦法了,這個時候可以考慮悲觀鎖。

悲觀鎖:,就是直接在數據庫層面將數據鎖死,類似于oralce中使用select xxxxx from xxxx where xx=xx for update,這樣其他線程將無法提交數據。

除了加鎖的方式也可以使用接收鎖定的方式,思路是在數據庫中設計一個狀態(tài)標識位,用戶在對數據進行修改前,將狀態(tài)標識位標識為正在編輯的狀態(tài),這樣其他用戶要編輯此條記錄時系統將發(fā)現有其他用戶正在編輯,則拒絕其編輯的請求,類似于你在操作系統中某文件正在執(zhí)行,然后你要修改該文件時,系統會提醒你該文件不可編輯或刪除。

4、不建議在數據庫層面加鎖,建議通過服務端的內存鎖(鎖主鍵)。當某個用戶要修改某個id的數據時,把要修改的id存入memcache,若其他用戶觸發(fā)修改此id的數據時,讀到memcache有這個id的值時,就阻止那個用戶修改。

5、實際應用中,并不是讓mysql去直面大并發(fā)讀寫,會借助“外力”,比如緩存、利用主從庫實現讀寫分離、分表、使用隊列寫入等方法來降低并發(fā)讀寫。

悲觀鎖和樂觀鎖

首先,多用戶并發(fā)修改同一條記錄時,肯定是后提交的用戶將覆蓋掉前者提交的結果了。這個直接可以使用加鎖機制去解決,樂觀鎖或者悲觀鎖。

悲觀鎖(Pessimistic Lock), 顧名思義,就是很悲觀,每次去拿數據的時候都認為別人會修改,所以每次在拿數據的時候都會上鎖,這樣別人想拿這個數據就會block直到它拿到鎖。傳統的關系型數據庫里邊就用到了很多這種鎖機制,比如行鎖,表鎖等,讀鎖,寫鎖等,都是在做操作之前先上鎖。

樂觀鎖(Optimistic Lock), 顧名思義,就是很樂觀,每次去拿數據的時候都認為別人不會修改,所以不會上鎖,但是在更新的時候會判斷一下在此期間別人有沒有去更新這個數據,可以使用版本號等機制。樂觀鎖適用于多讀的應用類型,這樣可以提高吞吐量,像數據庫如果提供類似于write_condition機制的其實都是提供的樂觀鎖。

兩種鎖各有優(yōu)缺點,不能單純的定義哪個好于哪個。樂觀鎖比較適合數據修改比較少,讀取比較頻繁的場景,即使出現了少量的沖突,這樣也省去了大量的鎖的開銷,故而提高了系統的吞吐量。但是如果經常發(fā)生沖突(寫數據比較多的情況下),上層應用不不斷的retry,這樣反而降低了性能,對于這種情況使用悲觀鎖就更合適。

實戰(zhàn)

對這個表的 amount 進行修改,開兩個命令行窗口

第一個窗口A;

SET AUTOCOMMIT=0; BEGIN WORK; SELECT * FROM order_tbl WHERE order_id='124' FOR UPDATE;

第二個窗口B:

# 更新訂單ID 124 的庫存數量
UPDATE `order_tbl` SET amount = 1 WHERE order_id = 124;

我們可以看到窗口A加了事物,鎖住了這條數據,窗口B執(zhí)行時會出現這樣的問題:

第一個窗口完整的提交事物:

SET AUTOCOMMIT=0; BEGIN WORK; SELECT * FROM order_tbl WHERE order_id='124' FOR UPDATE;
UPDATE `order_tbl` SET amount = 10 WHERE order_id = 124;
COMMIT WORK;

mysql處理高并發(fā),防止庫存超賣,以上就是本篇文章的全部內容,如果大家還有不明白的可以在下方留言討論。

您可能感興趣的文章:
  • 聊一聊Redis與MySQL雙寫一致性如何保證
  • 詳解redis緩存與數據庫一致性問題解決
  • mysql事務select for update及數據的一致性處理講解
  • 如何恢復MySQL主從數據一致性
  • MySQL備份與恢復之保證數據一致性(5)
  • mysql視圖之確保視圖的一致性(with check option)操作詳解
  • MySQL與Redis如何保證數據一致性詳解

標簽:那曲 濮陽 山南 浙江 安徽 四川 安康 平頂山

巨人網絡通訊聲明:本文標題《分析Mysql事務和數據的一致性處理問題》,本文關鍵詞  分析,Mysql,事務,和,數據,;如發(fā)現本文內容存在版權問題,煩請?zhí)峁┫嚓P信息告之我們,我們將及時溝通與處理。本站內容系統采集于網絡,涉及言論、版權與本站無關。
  • 相關文章
  • 下面列出與本文章《分析Mysql事務和數據的一致性處理問題》相關的同類信息!
  • 本頁收集關于分析Mysql事務和數據的一致性處理問題的相關信息資訊供網民參考!
  • 推薦文章
    青阳县| 林州市| 灌阳县| 黔南| 弋阳县| 德保县| 连城县| 天柱县| 康平县| 潞城市| 宜川县| 分宜县| 梨树县| 兴仁县| 台北县| 泰安市| 咸宁市| 宁河县| 冀州市| 沂水县| 新泰市| 柳江县| 巴青县| 上杭县| 临高县| 阜康市| 门头沟区| 怀仁县| 报价| 卢湾区| 永靖县| 丽江市| 三明市| 呼图壁县| 英德市| 修水县| 峨眉山市| 南京市| 永丰县| 革吉县| 镇康县|