一 簡介
python-mysql-replication 是基于python實現的 MySQL復制協議工具,我們可以用它來解析binlog 獲取日志的insert,update,delete等事件 ,并基于此做其他業務需求。比如數據更改時失效緩存,監聽dml事件通知下游業務方做對應處理。
其項目信息
二 實踐
2.1 安裝配置
獲取源代碼
git clone http://www.github.com/noplay/python-mysql-replication
使用pip 安裝
pip install mysql-replication
權限: 可以直接使用復制賬號也可以使用其他賬號,但是該賬號必須 SELECT, REPLICATION SLAVE, REPLICATION CLIENT 權限
GRANT SELECT, REPLICATION SLAVE, REPLICATION CLIENT ON . TO 'replicator'@'%' IDENTIFIED BY 'xxxxx';
數據庫日志相關的參數設置如下:
log_bin=on ,binlog_format=row,binlog_row_image=FULL
2.2 核心類介紹
python-mysql-replication
的入口是類BinLogStreamReader(),我們在使用該工具時需要實例化一個BinLogStreamReader()對象 stream, BinLogStreamReader 通過 ReportSlave 向主庫注冊作為一個slave角色,用于接受MySQL的binlog廣播 。有興趣的可以研究其代碼具體實現。
該實例提供解析 binlog 各種事件的集合,每個事件也是一個對象。
初始化BinLogStreamReader()實例需要使用的參數如下:
2.3 如何使用呢?
最簡單的用法 腳本名 pyreplica.py
開啟兩個窗口,一個窗口執行,另外一個窗口操作mysql 寫入或者修改數據
python pyreplica.py
輸出如下:
2.3 拓展
基于該工具提供的日志事件解析我們可以做很多事情,比較有名的工具 binlog2sql 利用該工具解析binlog 做數據回滾 。
mysql-replication.py
執行腳本結果 如下圖
除了解析binlog,我們還可以用py
thon-mysql-replication
做數據全量加增量遷移。比如僅僅遷移某些大表而不是整個庫的時候,可以用到。有興趣的朋友可以想想大概的算法。
總結
以上所述是小編給大家介紹的基于python的mysql復制工具,希望對大家有所幫助,如果大家有任何疑問請給我留言,小編會及時回復大家的。在此也非常感謝大家對腳本之家網站的支持!
如果你覺得本文對你有幫助,歡迎轉載,煩請注明出處,謝謝!
更多文章、技術交流、商務合作、聯系博主
微信掃碼或搜索:z360901061

微信掃一掃加我為好友
QQ號聯系: 360901061
您的支持是博主寫作最大的動力,如果您喜歡我的文章,感覺我的文章對您有幫助,請用微信掃描下面二維碼支持博主2元、5元、10元、20元等您想捐的金額吧,狠狠點擊下面給點支持吧,站長非常感激您!手機微信長按不能支付解決辦法:請將微信支付二維碼保存到相冊,切換到微信,然后點擊微信右上角掃一掃功能,選擇支付二維碼完成支付。
【本文對您有幫助就好】元
