本文實例講述了MySQL主從復(fù)制與讀寫分離原理及用法。分享給大家供大家參考,具體如下:
主從復(fù)制
概念
影響MySQL-A數(shù)據(jù)庫的操作,在數(shù)據(jù)庫執(zhí)行后,都會寫入本地的日志系統(tǒng)A中。
假設(shè),實時的將變化了的日志系統(tǒng)中的數(shù)據(jù)庫事件操作,在MYSQL-A的3306端口,通過網(wǎng)絡(luò)發(fā)給MYSQL-B。
MYSQL-B收到后,寫入本地日志系統(tǒng)B,然后一條條的將數(shù)據(jù)庫事件在數(shù)據(jù)庫中完成。
那么,MYSQL-A的變化,MYSQL-B也會變化,這樣就是所謂的MYSQL的復(fù)制,即MYSQL replication。
在上面的模型中,MYSQL-A就是主服務(wù)器,即master,MYSQL-B就是從服務(wù)器,即slave。
日志系統(tǒng)A,其實它是MYSQL的日志類型中的二進(jìn)制日志,也就是專門用來保存修改數(shù)據(jù)庫表的所有動作,即bin log?!咀⒁釳YSQL會在執(zhí)行語句之后,釋放鎖之前,寫入二進(jìn)制日志,確保事務(wù)安全】
日志系統(tǒng)B,并不是二進(jìn)制日志,由于它是從MYSQL-A的二進(jìn)制日志復(fù)制過來的,并不是自己的數(shù)據(jù)庫變化產(chǎn)生的,有點接力的感覺,稱為中繼日志,即relay log。
可以發(fā)現(xiàn),通過上面的機制,可以保證MYSQL-A和MYSQL-B的數(shù)據(jù)庫數(shù)據(jù)一致,但是時間上肯定有延遲,即MYSQL-B的數(shù)據(jù)是滯后的。
【即便不考慮什么網(wǎng)絡(luò)的因素,MYSQL-A的數(shù)據(jù)庫操作是可以并發(fā)的執(zhí)行的,但是MYSQL-B只能從relay log中讀一條,執(zhí)行下。因此MYSQL-A的寫操作很頻繁,MYSQL-B很可能跟不上。】
解決問題
數(shù)據(jù)如何不被丟失
備份
讀寫分離
數(shù)據(jù)庫負(fù)載均衡
高可用
環(huán)境搭建
1.準(zhǔn)備環(huán)境
兩臺windows操作系統(tǒng) ip分別為: 172.27.185.1(主)、172.27.185.2(從)
2.連接到主服務(wù)(172.27.185.1)服務(wù)器上,給從節(jié)點分配賬號權(quán)限。
GRANT REPLICATION SLAVE ON . TO ‘root'@‘172.27.185.2' IDENTIFIED BY ‘root';
3.在主服務(wù)my.ini文件新增
server-id=200
log-bin=mysql-bin
relay-log=relay-bin
relay-log-index=relay-bin-index
重啟mysql服務(wù)
4.在從服務(wù)my.ini文件新增
server-id = 210
replicate-do-db =itmayiedu #需要同步數(shù)據(jù)庫
重啟mysql服務(wù)
5.從服務(wù)同步主數(shù)據(jù)庫
stop slave;
change
master to master_host='172.27.185.1',master_user='root',master_password='root';
start slave;
show slave status;
注意事項
①一定要在同一個局域網(wǎng)中
②使用360WiFi創(chuàng)建局域網(wǎng)
③最好把防火墻全部關(guān)閉掉
什么是讀寫分離
在數(shù)據(jù)庫集群架構(gòu)中,讓主庫負(fù)責(zé)處理事務(wù)性查詢,而從庫只負(fù)責(zé)處理select查詢,讓兩者分工明確達(dá)到提高數(shù)據(jù)庫整體讀寫性能。當(dāng)然,主數(shù)據(jù)庫另外一個功能就是負(fù)責(zé)將事務(wù)性查詢導(dǎo)致的數(shù)據(jù)變更同步到從庫中,也就是寫操作。
讀寫分離的好處
1)分?jǐn)偡?wù)器壓力,提高機器的系統(tǒng)處理效率
讀寫分離適用于讀遠(yuǎn)比寫的場景,如果有一臺服務(wù)器,當(dāng)select很多時,update和delete會被這些select訪問中的數(shù)據(jù)堵塞,等待select結(jié)束,并發(fā)性能并不高,而主從只負(fù)責(zé)各自的寫和讀,極大程度的緩解X鎖和S鎖爭用;
假如我們有1主3從,不考慮上述1中提到的從庫單方面設(shè)置,假設(shè)現(xiàn)在1分鐘內(nèi)有10條寫入,150條讀取。那么,1主3從相當(dāng)于共計40條寫入,而讀取總數(shù)沒變,因此平均下來每臺服務(wù)器承擔(dān)了10條寫入和50條讀取(主庫不承擔(dān)讀取操作)。因此,雖然寫入沒變,但是讀取大大分?jǐn)偭?,提高了系統(tǒng)性能。另外,當(dāng)讀取被分?jǐn)偤螅珠g接提高了寫入的性能。所以,總體性能提高了,說白了就是拿機器和帶寬換性能;
2)增加冗余,提高服務(wù)可用性,當(dāng)一臺數(shù)據(jù)庫服務(wù)器宕機后可以調(diào)整另外一臺從庫以最快速度恢復(fù)服務(wù)
主從復(fù)制原理
依賴于二進(jìn)制日志,binary-log.
二進(jìn)制日志中記錄引起數(shù)據(jù)庫發(fā)生改變的語句
Insert 、delete、update、create table
Scale-up與Scale-out區(qū)別
Scale Out是指Application可以在水平方向上擴展。一般對數(shù)據(jù)中心的應(yīng)用而言,Scale out指的是當(dāng)添加更多的機器時,應(yīng)用仍然可以很好的利用這些機器的資源來提升自己的效率從而達(dá)到很好的擴展性。
Scale Up是指Application可以在垂直方向上擴展。一般對單臺機器而言,Scale Up值得是當(dāng)某個計算節(jié)點(機器)添加更多的CPU Cores,存儲設(shè)備,使用更大的內(nèi)存時,應(yīng)用可以很充分的利用這些資源來提升自己的效率從而達(dá)到很好的擴展性。
MyCat
什么是 Mycat
是一個開源的分布式數(shù)據(jù)庫系統(tǒng),但是因為數(shù)據(jù)庫一般都有自己的數(shù)據(jù)庫引擎,而Mycat并沒有屬于自己的獨有數(shù)據(jù)庫引擎,所有嚴(yán)格意義上說并不能算是一個完整的數(shù)據(jù)庫系統(tǒng),只能說是一個在應(yīng)用和數(shù)據(jù)庫之間起橋梁作用的中間件。
在Mycat中間件出現(xiàn)之前,MySQL主從復(fù)制集群,如果要實現(xiàn)讀寫分離,一般是在程序段實現(xiàn),這樣就帶來了一個問題,即數(shù)據(jù)段和程序的耦合度太高,如果數(shù)據(jù)庫的地址發(fā)生了改變,那么我的程序也要進(jìn)行相應(yīng)的修改,如果數(shù)據(jù)庫不小心掛掉了,則同時也意味著程序的不可用,而對于很多應(yīng)用來說,并不能接受;
引入Mycat中間件能很好地對程序和數(shù)據(jù)庫進(jìn)行解耦,這樣,程序只需關(guān)注數(shù)據(jù)庫中間件的地址,而無需知曉底層數(shù)據(jù)庫是如何提供服務(wù)的,大量的通用數(shù)據(jù)聚合、事務(wù)、數(shù)據(jù)源切換等工作都由中間件來處理;
Mycat中間件的原理是對數(shù)據(jù)進(jìn)行分片處理,從原有的一個庫,被切分為多個分片數(shù)據(jù)庫,所有的分片數(shù)據(jù)庫集群構(gòu)成完成的數(shù)據(jù)庫存儲,有點類似磁盤陣列中的RAID0.
Mycat安裝
創(chuàng)建表結(jié)構(gòu)
CREATE DATABASE IF NOT EXISTS `weibo_simple`;
-- ------------------------------------
-- Table structure for `t_users` 用戶表
-- ------------------------------------
DROP TABLE IF EXISTS `t_users`;
CREATE TABLE `t_users` (
`user_id` varchar(64) NOT NULL COMMENT '注冊用戶ID',
`user_email` varchar(64) NOT NULL COMMENT '注冊用戶郵箱',
`user_password` varchar(64) NOT NULL COMMENT '注冊用戶密碼',
`user_nikename` varchar(64) NOT NULL COMMENT '注冊用戶昵稱',
`user_creatime` datetime NOT NULL COMMENT '注冊時間',
`user_status` tinyint(1) NOT NULL COMMENT '驗證狀態(tài) 1:已驗證 0:未驗證',
`user_deleteflag` tinyint(1) NOT NULL COMMENT '刪除標(biāo)記 1:已刪除 0:未刪除',
PRIMARY KEY (`user_id`)
) ENGINE=InnoDB DEFAULT CHARSET=utf8;
-- -------------------------------------
-- Table structure for `t_message`微博表
-- -------------------------------------
DROP TABLE IF EXISTS `t_message`;
CREATE TABLE `t_message` (
`messages_id` varchar(64) NOT NULL COMMENT '微博ID',
`user_id` varchar(64) NOT NULL COMMENT '發(fā)表用戶',
`messages_info` varchar(255) DEFAULT NULL COMMENT '微博內(nèi)容',
`messages_time` datetime DEFAULT NULL COMMENT '發(fā)布時間',
`messages_commentnum` int(12) DEFAULT NULL COMMENT '評論次數(shù)',
`message_deleteflag` tinyint(1) NOT NULL COMMENT '刪除標(biāo)記 1:已刪除 0:未刪除',
`message_viewnum` int(12) DEFAULT NULL COMMENT '被瀏覽量',
PRIMARY KEY (`messages_id`),
KEY `user_id` (`user_id`),
CONSTRAINT `t_message_ibfk_1` FOREIGN KEY (`user_id`) REFERENCES `t_users` (`user_id`)
) ENGINE=InnoDB DEFAULT CHARSET=utf8;
配置server.xml
!-- 添加user -->
user name="mycat">
property name="password">mycat/property>
property name="schemas">mycat/property>
/user>
!-- 添加user -->
user name="mycat_red">
property name="password">mycat_red/property>
property name="schemas">mycat/property>
property name="readOnly">true/property>
/user>
配置schema.xml
?xml version="1.0"?>
!DOCTYPE mycat:schema SYSTEM "schema.dtd">
mycat:schema xmlns:mycat="http://org.opencloudb/">
!-- 與server.xml中user的schemas名一致 -->
schema name="mycat" checkSQLschema="true" sqlMaxLimit="100">
table name="t_users" primaryKey="user_id" dataNode="dn1" rule="rule1"/>
table name="t_message" type="global" primaryKey="messages_id" dataNode="dn1" />
/schema>
dataNode name="dn1" dataHost="jdbchost" database="weibo_simple
" />
dataHost name="jdbchost" maxCon="1000" minCon="10" balance="1"
writeType="0" dbType="mysql" dbDriver="native" switchType="1"
slaveThreshold="100">
heartbeat>select user()/heartbeat>
writeHost host="hostMaster" url="172.27.185.1:3306" user="root" password="root">
/writeHost>
writeHost host="hostSlave" url="172.27.185.2:3306" user="root" password="root"/>
/dataHost>
/mycat:schema>
配置rule.xml文件
?xml version="1.0" encoding="UTF-8"?>
!-- - - Licensed under the Apache License, Version 2.0 (the "License");
- you may not use this file except in compliance with the License. - You
may obtain a copy of the License at - - http://www.apache.org/licenses/LICENSE-2.0
- - Unless required by applicable law or agreed to in writing, software -
distributed under the License is distributed on an "AS IS" BASIS, - WITHOUT
WARRANTIES OR CONDITIONS OF ANY KIND, either express or implied. - See the
License for the specific language governing permissions and - limitations
under the License. -->
!DOCTYPE mycat:rule SYSTEM "rule.dtd">
mycat:rule xmlns:mycat="http://org.opencloudb/">
tableRule name="rule1">
rule>
columns>user_id/columns>
algorithm>func1/algorithm>
/rule>
/tableRule>
function name="func1" class="org.opencloudb.route.function.AutoPartitionByLong">
property name="mapFile">autopartition-long.txt/property>
/function>
/mycat:rule>
為了更好地定位錯誤,修改log4j.xml
雙擊startup_nowrap.bat開始啟動
常見問題
SHOW MASTER STATUS 如果為,則在my.ini文件中添加一行
log-bin=mysql-bin
給賬號分配權(quán)限
grant all privileges on . to ‘root'@‘172.27.185.1' identified by ‘root';
更多關(guān)于MySQL相關(guān)內(nèi)容感興趣的讀者可查看本站專題:《MySQL查詢技巧大全》、《MySQL常用函數(shù)大匯總》、《MySQL日志操作技巧大全》、《MySQL事務(wù)操作技巧匯總》、《MySQL存儲過程技巧大全》及《MySQL數(shù)據(jù)庫鎖相關(guān)技巧匯總》
希望本文所述對大家MySQL數(shù)據(jù)庫計有所幫助。
您可能感興趣的文章:- 詳解MySQL實現(xiàn)主從復(fù)制過程
- Mysql主從同步的實現(xiàn)原理
- Mysql主從復(fù)制作用和工作原理詳解
- MySQL數(shù)據(jù)庫主從同步實戰(zhàn)過程詳解
- MySQL數(shù)據(jù)庫主從復(fù)制原理及作用分析