濮阳杆衣贸易有限公司

主頁 > 知識庫 > Rails中使用MySQL分區(qū)表一個提升性能的方法

Rails中使用MySQL分區(qū)表一個提升性能的方法

熱門標簽:巫師3地圖標注魔力之所 AI電銷機器人 線路 外呼線路從哪里出來的 征服者企業(yè)地圖標注 柯城手機地圖如何做地圖標注 淮安自動外呼系統(tǒng)供應商 中牟外呼系統(tǒng)違法嗎 天津外呼系統(tǒng)怎么收費 漯河電銷

MySQL 的分區(qū)表是一種簡單有效的處理極大數據表的特性,通過它可以使應用程序幾乎很少改動就能達成對極大數據表的高效處理,但由于 Rails ActiveRecord 設計上一些慣例,可能導致一些數據處理不能利用分區(qū)表特性,反而變得很慢,在使用分區(qū)表過程中一定要多加注意。

下面以一個例子來說明。在 light 系統(tǒng)中,有一張數據表是 diet_items, 主要字段是 id, schedule_id, meal_order food_id, weight, calory 等等,它的每一條記錄表示為用戶生成每日的減肥計劃(減肥食譜 + 運動計劃)中的一條飲食項,平均一條的計劃有 10 多條數據,數據量非常大,預計每天生成數據會超過 100 萬條,所以對其做了分表處理,根據 schedule_id hash 分成 60 張表,也就是數據將動態(tài)分到 60 張表中。分表后 diet_items 的建表語句如下所示:

復制代碼 代碼如下:

CREATE TABLE `diet_items` (
  `id` int(11) NOT NULL AUTO_INCREMENT,
  `schedule_id` int(11) NOT NULL,
  `meals_order` int(11) NOT NULL,
  `food_id` int(11) DEFAULT NULL,
  ....
  KEY id (`id`),
  UNIQUE KEY `index_diet_items_on_schedule_id_and_id` (`schedule_id`,`id`)
)
PARTITION BY HASH (schedule_id)
PARTITIONS 60;

分表之后,所有查詢 diet_items 的地方都要求帶上 schedule_id,比如獲取某一個 schedule 的所有 diet_items,通過 schedule. diet_items,獲取某一個 id 的 diet_item 也是通過 schedule.diet_items.find(id) 進行。生成 diet_item 也沒有問題,因為生成 diet_item 都是通過 schedule.diet_items.build(data) 方式,在生成的時候都是帶了 schedule_id 的。

觀察 newrelic 日志,發(fā)現(xiàn) diet_item 的 update 和 destroy 相關的請求特別慢,仔細分析后,發(fā)現(xiàn)這兩種操作非常忙是由于 ActiveRecord 生成的 sql 并沒有帶 schedule_id 導致。 diet_item update 操作 ActiveRecord 生成的 sql 語句類似于 update diet_items set … where id = id>。 diet_item destroy 生成的語句類似于 delete diet_items where id = id> 因為沒有帶 schedule_id,導致這兩種語句都需要 mysql 掃描 60 張分區(qū)表才能夠完成一個語句執(zhí)行,非常慢!

知道原因之后就好辦了,把原來的 update 和 destroy 調用改為自定義版本的 update 和 destroy 調用就可以了。

diet_item.update(attributes) 改成 DietItem.where(id: diet_item.id, schedule_id: diet_item.schedule_id).update_all(attributes)

diet_item.destroy 改成 DietItem.where(id: diet_item.id, schedule_id: diet_item.schedule_id).delete_all

這樣生成的 sql 都帶上 schedule_id 條件,從而避免了掃描全部的分區(qū)表,性能提升立竿見影。

您可能感興趣的文章:
  • MySQL優(yōu)化之分區(qū)表
  • 詳解MySQL分區(qū)表
  • MySQL最佳實踐之分區(qū)表基本類型
  • MySQL分區(qū)表的正確使用方法
  • MySQL分區(qū)表的局限和限制詳解
  • PostgreSQL分區(qū)表(partitioning)應用實例詳解
  • Mysql分區(qū)表的管理與維護
  • PostgreSQL教程(三):表的繼承和分區(qū)表詳解
  • mysql使用教程之分區(qū)表的使用方法(刪除分區(qū)表)
  • 分區(qū)表場景下的 SQL 優(yōu)化

標簽:張家界 三沙 永州 遼寧 普洱 公主嶺 梧州 荊門

巨人網絡通訊聲明:本文標題《Rails中使用MySQL分區(qū)表一個提升性能的方法》,本文關鍵詞  Rails,中,使用,MySQL,分區(qū)表,;如發(fā)現(xiàn)本文內容存在版權問題,煩請?zhí)峁┫嚓P信息告之我們,我們將及時溝通與處理。本站內容系統(tǒng)采集于網絡,涉及言論、版權與本站無關。
  • 相關文章
  • 下面列出與本文章《Rails中使用MySQL分區(qū)表一個提升性能的方法》相關的同類信息!
  • 本頁收集關于Rails中使用MySQL分區(qū)表一個提升性能的方法的相關信息資訊供網民參考!
  • 推薦文章
    阳东县| 新绛县| 广南县| 湟中县| 杂多县| 营山县| 哈密市| 沾益县| 新昌县| 沧州市| 滦南县| 台山市| 正镶白旗| 潞西市| 化德县| 开江县| 兴城市| 浦县| 安多县| 博野县| 汝阳县| 云梦县| 南开区| 镇江市| 宝应县| 缙云县| 乌审旗| 衢州市| 醴陵市| 楚雄市| 法库县| 循化| 朝阳区| 蒲城县| 凤庆县| 和政县| 栾川县| 中西区| 高青县| 札达县| 科尔|