心得:InnoDB引擎數(shù)據(jù)庫主從復(fù)制同步心得
51CTO 發(fā)表于:12年12月07日 10:00 [轉(zhuǎn)載] 51CTO
1)MySQL的replication過程是一個(gè)異步同步的過程,并非完全的主從同步,所以同步的過程中是有延遲的,如果做了讀寫分離的業(yè)務(wù)的話,建議也要監(jiān)控此延遲時(shí)間;
2)MySQL的master與slave機(jī)器記得server-id要保持不一致,如果一樣的話,replication過程中會(huì)出現(xiàn)如下報(bào)錯(cuò):
Fatal error: The slave I/O thread stops because master and slavehave equal MySQL server ids; these ids must be different for replication to work(or the --replicate-same-server-id option must be used on slave but this doesnot always make sense; please check the manual before using it).
這個(gè)問題很好處理,即將slave機(jī)的server-id修改成跟master機(jī)器不一致即可。
3)我以前的一個(gè)誤區(qū)就是,slave機(jī)器是用自己的二進(jìn)制日志來完成replication過程的,其實(shí)不是這樣的,根據(jù)復(fù)制的工作原理:slave服務(wù)器是copy主服務(wù)器的二進(jìn)制日志到自己的中繼日志,即relay-log日志(即centos3-relay-bin.000002 這種名字的)中,然后再把更新應(yīng)用用到自己的數(shù)據(jù)庫上,所以slave機(jī)器是不需要開啟二進(jìn)制日志的,這樣過程一樣會(huì)成功的;除非是準(zhǔn)備做主主架構(gòu),這才需要slave機(jī)器開啟二進(jìn)制日志,這個(gè)問題一直在導(dǎo)著我,我以一直以為slave機(jī)器搭建replication環(huán)境時(shí)是一定要開啟二進(jìn)制的,
4)在master機(jī)器上授權(quán)時(shí),盡量只給某一個(gè)或某幾個(gè)固定機(jī)器權(quán)限,讓它們只有replication slav,replication client權(quán)限,盡量不要給grant權(quán)限;另外,雖然數(shù)據(jù)庫我們一般是通過內(nèi)網(wǎng)操作,但越是在在內(nèi)網(wǎng)對(duì)MySQL數(shù)據(jù)庫進(jìn)行授權(quán)操作,越是要注意安全;
5)replication搭建過程按照正常流程走的話,一般很容易實(shí)施成功,如果出錯(cuò)的話,多檢查下網(wǎng)絡(luò)環(huán)境、權(quán)限問題,一般來說整個(gè)搭建過程應(yīng)該還是會(huì)比較順利的。
在數(shù)據(jù)庫設(shè)計(jì)初期,我已經(jīng)將此電子商務(wù)的數(shù)據(jù)庫引擎定義為InnoDB,除了數(shù)據(jù)庫中原有的系統(tǒng)表之外,其它表全部由MyISAM轉(zhuǎn)成了InnoDB,原因有二:
1)電子商務(wù)業(yè)務(wù)會(huì)涉及到交易付款,在這種基本OLTP的應(yīng)用中,InnoDB應(yīng)該作為核心應(yīng)用表的首選存儲(chǔ)引擎;
2)DRBD系統(tǒng)重啟時(shí)的過程會(huì)比較緩慢,會(huì)頻繁的讀表,如果表引擎為MyISAM的話極有可能出現(xiàn)損壞情況,為了造成不必要的問題,我將數(shù)據(jù)庫的表引擎由MyISAM均轉(zhuǎn)成了InnoDB引擎的表。
DRBD+Heartbeat+MySQL參考以前的工作文檔,搭建的比較順利,就是在搭建replication環(huán)境時(shí)遇到了1062報(bào)錯(cuò),詳細(xì)過程如下:
初期參考MySQL手冊(cè)操作,取master機(jī)器的快照備份,用的是--single-transaction選項(xiàng),然后同步過程頻繁1062報(bào)錯(cuò),報(bào)錯(cuò)日志如下:
Last_SQL_Error: Error 'Duplicate entry 'd36ad91bff36308de540bbd9ae6f4279' for key 'PRIMARY'' on query. Default database: 'mypharma'. Query: 'INSERT INTO `lee_sessions` (`session_id`, `ip_address`, `user_agent`, `last_activity`, `user_data`) VALUES ('d36ad91bff36308de540bbd9ae6f4279', '180.153.201.218', 'Mozilla/4.0', 1353394206, '')'
后來改變思路,用--master-data選項(xiàng)來取主master快照備份,命令如下所示:
- mysqldump -uroot --quick --flush-logs --master-data=1 -p myproject > myproject.sql
--master-data的用法為:通過此參數(shù)來備份SQL文件時(shí)會(huì)建議一個(gè)slave replication,當(dāng)其值為1時(shí),SQL文件中會(huì)記錄change master語句;當(dāng)其值為2時(shí),change master會(huì)被寫成SQL注釋,--master-data在沒有使用--single-transaction選項(xiàng)的情況下會(huì)自動(dòng)使用lock- all-tables選項(xiàng)(即這二代選項(xiàng)不要搭配使用)。
如何查找SQL中的的LOG_FILE及LOG_POS呢?我們可以用如下命令(請(qǐng)注意change單詞要寫成大寫的),如下所示:
- [root@centos1 ~]# grep "CHANGE " myproject.sql
- CHANGE MASTER TO MASTER_LOG_FILE='mysql-bin.000008', MASTER_LOG_POS=106;
接下來的replication過程就不詳細(xì)說明了,同步完成后我們經(jīng)過相當(dāng)長(zhǎng)時(shí)間的觀察,再也沒1062報(bào)錯(cuò)了,如下所示:
- mysql> show slave status \G;
- *************************** 1. row ***************************
- Slave_IO_State: Waiting for master to send event
- Master_Host: 192.168.11.174
- Master_User: rep1
- Master_Port: 3306
- Connect_Retry: 60
- Master_Log_File: mysql-bin.000008
- Read_Master_Log_Pos: 27880
- Relay_Log_File: centos3-relay-bin.000002
- Relay_Log_Pos: 28025
- Relay_Master_Log_File: mysql-bin.000008
- Slave_IO_Running: Yes
- Slave_SQL_Running: Yes
- Replicate_Do_DB:
- Replicate_Ignore_DB:
- Replicate_Do_Table:
- Replicate_Ignore_Table:
- Replicate_Wild_Do_Table:
- Replicate_Wild_Ignore_Table:
- Last_Errno: 0
- Last_Error:
- Skip_Counter: 0
- Exec_Master_Log_Pos: 27880
- Relay_Log_Space: 28182
- Until_Condition: None
- Until_Log_File:
- Until_Log_Pos: 0
- Master_SSL_Allowed: No
- Master_SSL_CA_File:
- Master_SSL_CA_Path:
- Master_SSL_Cert:
- Master_SSL_Cipher:
- Master_SSL_Key:
- Seconds_Behind_Master: 0
- Master_SSL_Verify_Server_Cert: No
- Last_IO_Errno: 0
- Last_IO_Error:
- Last_SQL_Errno: 0
- Last_SQL_Error:
- 1 row in set (0.00 sec)
以前的項(xiàng)目也比較多的牽涉到InnoDB數(shù)據(jù)庫的備份及replication,較多的一個(gè)做法是停庫進(jìn)行replication,雖然也是解決問題的一種思路,但畢竟屬于停機(jī)維護(hù),在一些特殊應(yīng)用場(chǎng)景中是不允許的,我們應(yīng)該多嘗試采用mysqldump這種邏輯備份方式來取master主機(jī)快照。
目前在測(cè)試ext3和ext4文件系統(tǒng)對(duì)數(shù)據(jù)庫的影響,感覺MySQL性能優(yōu)化不大;反而,固態(tài)SSD硬盤對(duì)于提升磁盤I/O方面確實(shí)影響不少,這方面有研究的朋友也歡迎來信交流。
公司簡(jiǎn)介 | 媒體優(yōu)勢(shì) | 廣告服務(wù) | 客戶寄語 | DOIT歷程 | 誠(chéng)聘英才 | 聯(lián)系我們 | 會(huì)員注冊(cè) | 訂閱中心
Copyright © 2013 DOIT Media, All rights Reserved. 北京楚科信息技術(shù)有限公司 版權(quán)所有.