濮阳杆衣贸易有限公司

主頁 > 知識庫 > MySql主從復(fù)制實(shí)現(xiàn)原理及配置

MySql主從復(fù)制實(shí)現(xiàn)原理及配置

熱門標(biāo)簽:芒果電話機(jī)器人自動化 日照旅游地圖標(biāo)注 湖南人工外呼系統(tǒng)多少錢 石家莊電商外呼系統(tǒng) 南通自動外呼系統(tǒng)軟件 申請外呼電話線路 信陽穩(wěn)定外呼系統(tǒng)運(yùn)營商 廣東人工電話機(jī)器人 百度地圖圖標(biāo)標(biāo)注中心

數(shù)據(jù)庫讀寫分離對于大型系統(tǒng)或者訪問量很高的互聯(lián)網(wǎng)應(yīng)用來說,是必不可少的一個重要功能。對于MySQL來說,標(biāo)準(zhǔn)的讀寫分離是主從模式,一個寫節(jié)點(diǎn)Master后面跟著多個讀節(jié)點(diǎn),讀節(jié)點(diǎn)的數(shù)量取決于系統(tǒng)的壓力,通常是1-3個讀節(jié)點(diǎn)的配置。而一般的讀寫分離中間件,例如Mycat的讀寫分離和自動切換機(jī)制,需要mysql的主從復(fù)制機(jī)制配合。

主從配置需要注意的地方

1、主DB server和從DB server數(shù)據(jù)庫的版本一致

2、主DB server和從DB server數(shù)據(jù)庫數(shù)據(jù)名稱一致

3、主DB server開啟二進(jìn)制日志,主DB server和從DB server的server_id都必須唯一MySQL主服務(wù)器配置

第一步:修改my.conf文件:

在[mysqld]段下添加:

binlog-ignore-db=mysql

#啟用二進(jìn)制日志
log-bin=mysql-bin
//二進(jìn)制日志的格式,有三種:statement/row/mixed
binlog_format=row
#主服務(wù)器唯一ID,一般取IP最后一段
server-id=82

第二步:重啟mysql服務(wù)

service mysql restart

第三步:建立帳戶并授權(quán)slave

mysql>GRANT FILE ON *.* TO 'slave'@'%' IDENTIFIED BY 'slavepw';
mysql>GRANT REPLICATION SLAVE, REPLICATION CLIENT ON *.* to 'slave'@'%' identified by 'slavepw';

一般不用root帳號,“%”表示所有客戶端都可能連,只要帳號,密碼正確,此處可用具體客戶端IP代替,如192.168.145.226,加強(qiáng)安全。

刷新權(quán)限

mysql> FLUSH PRIVILEGES;

第四步:查詢master的狀態(tài)

mysql> show master status;
+------------------+----------+--------------+------------------+-------------------+
| File       | Position | Binlog_Do_DB | Binlog_Ignore_DB | Executed_Gtid_Set |
+------------------+----------+--------------+------------------+-------------------+
| mysql-bin.000001 |   881 |       | mysql      |          |
+------------------+----------+--------------+------------------+-------------------+
1 row in set (0.00 sec)

MySQL從服務(wù)器配置

第一步:修改my.conf文件

[mysqld]#從服務(wù)器唯一ID,一般取IP最后一段server-id=83

第二步:配置從服務(wù)器

mysql>change master to master_host='192.168.11.82',master_port=3306,master_user='slave',master_password='slavepw',master_log_file='mysql-bin.000001',master_log_pos=881;

注意語句中間不要斷開,master_port為mysql服務(wù)器端口號(無引號),master_user為執(zhí)行同步操作的數(shù)據(jù)庫賬戶,“881”無單引號(此處的881就是show master status 中看到的position的值,這里的mysql-bin.000001就是file對應(yīng)的值)。

第三步:啟動從服務(wù)器復(fù)制功能

mysql>start slave;

第四步:檢查從服務(wù)器復(fù)制功能狀態(tài):

mysql> show slave status;

Slave_IO_Running: Yes //此狀態(tài)必須YES

Slave_SQL_Running: Yes //此狀態(tài)必須YES

注:Slave_IO及Slave_SQL進(jìn)程必須正常運(yùn)行,即YES狀態(tài),否則都是錯誤的狀態(tài)(如:其中一個NO均屬錯誤)。

進(jìn)行驗(yàn)證

在主節(jié)點(diǎn)上創(chuàng)建表、插入數(shù)據(jù),發(fā)現(xiàn)從節(jié)點(diǎn)也創(chuàng)建表并插入數(shù)據(jù)。

MySQL 主從復(fù)制原理的是啥?

主庫將變更寫入 binlog 日志,然后從庫連接到主庫之后,從庫有一個 IO 線程,將主庫的 binlog 日志拷貝到自己本地,寫入一個 relay 中繼日志中。接著從庫中有一個 SQL 線程會從中繼日志讀取 binlog,然后執(zhí)行 binlog 日志中的內(nèi)容,也就是在自己本地再次執(zhí)行一遍 SQL,這樣就可以保證自己跟主庫的數(shù)據(jù)是一樣的。

這里有一個非常重要的一點(diǎn),就是從庫同步主庫數(shù)據(jù)的過程是串行化的,也就是說主庫上并行的操作,在從庫上會串行執(zhí)行。所以這就是一個非常重要的點(diǎn)了,由于從庫從主庫拷貝日志以及串行執(zhí)行 SQL 的特點(diǎn),在高并發(fā)場景下,從庫的數(shù)據(jù)一定會比主庫慢一些,是有延時的。所以經(jīng)常出現(xiàn),剛寫入主庫的數(shù)據(jù)可能是讀不到的,要過幾十毫秒,甚至幾百毫秒才能讀取到。

而且這里還有另外一個問題,就是如果主庫突然宕機(jī),然后恰好數(shù)據(jù)還沒同步到從庫,那么有些數(shù)據(jù)可能在從庫上是沒有的,有些數(shù)據(jù)可能就丟失了。

所以 MySQL 實(shí)際上在這一塊有兩個機(jī)制,一個是半同步復(fù)制,用來解決主庫數(shù)據(jù)丟失問題;一個是并行復(fù)制,用來解決主從同步延時問題。

這個所謂半同步復(fù)制,也叫semi-sync復(fù)制,指的就是主庫寫入 binlog 日志之后,就會將強(qiáng)制此時立即將數(shù)據(jù)同步到從庫,從庫將日志寫入自己本地的 relay log 之后,接著會返回一個 ack 給主庫,主庫接收到至少一個從庫的 ack 之后才會認(rèn)為寫操作完成了。

所謂并行復(fù)制,指的是從庫開啟多個線程,并行讀取 relay log 中不同庫的日志,然后并行重放不同庫的日志,這是庫級別的并行。

MySQL 主從同步延時問題

以前線上確實(shí)處理過因?yàn)橹鲝耐窖訒r問題而導(dǎo)致的線上的 bug,屬于小型的生產(chǎn)事故。

是這個么場景。有個同學(xué)是這樣寫代碼邏輯的。先插入一條數(shù)據(jù),再把它查出來,然后更新這條數(shù)據(jù)。在生產(chǎn)環(huán)境高峰期,寫并發(fā)達(dá)到了 2000/s,這個時候,主從復(fù)制延時大概是在小幾十毫秒。線上會發(fā)現(xiàn),每天總有那么一些數(shù)據(jù),我們期望更新一些重要的數(shù)據(jù)狀態(tài),但在高峰期時候卻沒更新。用戶跟客服反饋,而客服就會反饋給我們。

我們通過 MySQL 命令:

show status

查看Seconds_Behind_Master,可以看到從庫復(fù)制主庫的數(shù)據(jù)落后了幾 ms。

一般來說,如果主從延遲較為嚴(yán)重,有以下解決方案:

分庫,將一個主庫拆分為多個主庫,每個主庫的寫并發(fā)就減少了幾倍,此時主從延遲可以忽略不計(jì)。打開 MySQL 支持的并行復(fù)制,多個庫并行復(fù)制。如果說某個庫的寫入并發(fā)就是特別高,單庫寫并發(fā)達(dá)到了 2000/s,并行復(fù)制還是沒意義。重寫代碼,寫代碼的同學(xué),要慎重,插入數(shù)據(jù)時立馬查詢可能查不到。如果確實(shí)是存在必須先插入,立馬要求就查詢到,然后立馬就要反過來執(zhí)行一些操作,對這個查詢設(shè)置直連主庫。不推薦這種方法,你要是這么搞,讀寫分離的意義就喪失了。開啟并行復(fù)制

開啟多線程復(fù)制,默認(rèn)關(guān)鍵的參數(shù)有兩個:

mysql> show variables like 'slave_parallel_%';
+------------------------+----------+
| Variable_name     | Value  |
+------------------------+----------+
| slave_parallel_type  | DATABASE |
| slave_parallel_workers | 0    |
+------------------------+----------+
2 rows in set (0.00 sec)

slave-parallel-type 默認(rèn)值為database

slave-parallel-workers 默認(rèn)值為0

開啟:

mysql> stop slave sql_thread;

Query OK, 0 rows affected (0.05 sec)

mysql> set global slave_parallel_type='LOGICAL_CLOCK';

Query OK, 0 rows affected (0.00 sec)

mysql> set global slave_parallel_workers=4;

Query OK, 0 rows affected (0.00 sec)

mysql> start slave sql_thread;

Query OK, 0 rows affected (0.07 sec)

參考資料:

https://www.jianshu.com/p/3932551e0221

https://github.com/doocs/advanced-java/blob/master/docs/high-concurrency/mysql-read-write-separation.md

以上就是本文的全部內(nèi)容,希望對大家的學(xué)習(xí)有所幫助,也希望大家多多支持腳本之家。

您可能感興趣的文章:
  • MySQL中主從復(fù)制重復(fù)鍵問題修復(fù)方法
  • MySql主從復(fù)制機(jī)制全面解析
  • Mysql主從復(fù)制與讀寫分離圖文詳解
  • MYSQL數(shù)據(jù)庫GTID實(shí)現(xiàn)主從復(fù)制實(shí)現(xiàn)(超級方便)
  • MySQL主從復(fù)制原理以及需要注意的地方
  • mysql 主從復(fù)制如何跳過報(bào)錯
  • mysql主從復(fù)制配置過程
  • 全面解讀MySQL主從復(fù)制,從原理到安裝配置
  • 關(guān)于MySQL主從復(fù)制的幾種復(fù)制方式總結(jié)
  • MySQL主從復(fù)制斷開的常用修復(fù)方法

標(biāo)簽:阿里 公主嶺 呼和浩特 天津 合肥 沈陽 惠州 牡丹江

巨人網(wǎng)絡(luò)通訊聲明:本文標(biāo)題《MySql主從復(fù)制實(shí)現(xiàn)原理及配置》,本文關(guān)鍵詞  MySql,主從,復(fù)制,實(shí)現(xiàn),原理,;如發(fā)現(xiàn)本文內(nèi)容存在版權(quán)問題,煩請?zhí)峁┫嚓P(guān)信息告之我們,我們將及時溝通與處理。本站內(nèi)容系統(tǒng)采集于網(wǎng)絡(luò),涉及言論、版權(quán)與本站無關(guān)。
  • 相關(guān)文章
  • 下面列出與本文章《MySql主從復(fù)制實(shí)現(xiàn)原理及配置》相關(guān)的同類信息!
  • 本頁收集關(guān)于MySql主從復(fù)制實(shí)現(xiàn)原理及配置的相關(guān)信息資訊供網(wǎng)民參考!
  • 推薦文章
    怀宁县| 赤峰市| 紫金县| 宝丰县| 胶南市| 永平县| 娄底市| 仁怀市| 枣庄市| 佳木斯市| 庆云县| 漳浦县| 永登县| 兴仁县| 体育| 柳江县| 嘉兴市| 宁武县| 明水县| 赣榆县| 洮南市| 东丽区| 江安县| 高阳县| 南充市| 龙陵县| 柘城县| 陇川县| 安岳县| 宁德市| 新竹县| 盐山县| 嘉鱼县| 云林县| 连云港市| 开封县| 通州市| 皮山县| 阿坝县| 安多县| 洪泽县|