數(shù)據(jù)庫(kù)備份誰更快？mydumper VS mysqldump 實(shí)測(cè)對(duì)比

數(shù)據(jù)庫(kù)備份誰更快？mydumper VS mysqldump 實(shí)測(cè)對(duì)比

在日常運(yùn)維或者開發(fā)環(huán)境中，數(shù)據(jù)庫(kù)備份與恢復(fù)都是繞不開的話題。MySQL 官方自帶的mysqldump工具一直是很多人的首選，但隨著數(shù)據(jù)量的增長(zhǎng)，mysqldump在速度和效率上的短板越來越明顯。于是，社區(qū)里出現(xiàn)了性能更強(qiáng)的替代方案——mydumper/myloader。

今天星哥就帶大家做一個(gè)實(shí)測(cè)對(duì)比，看看mysqldump 和 mydumper 在備份、恢復(fù)上的速度差距，結(jié)果可能會(huì)讓你有點(diǎn)驚訝。

• ?備份工具：mydumpervsmysqldump

• ?恢復(fù)工具：myloadervsmysql

為了保證對(duì)比公平，我們?cè)谙嗤h(huán)境下進(jìn)行了測(cè)試：

• ?數(shù)據(jù)庫(kù)版本：MySQL 5.7

• ?數(shù)據(jù)量：數(shù)據(jù)庫(kù)約 24 萬行，總大小約 20GB

• ?硬件配置：8 核 CPU，32GB 內(nèi)存，SSD 硬盤

• ?工具版本：

• • ? mysqldump：MySQL 官方自帶版本

  • ? mydumper/myloader：v0.19.4

備份星哥玩云的的wordpress數(shù)據(jù)庫(kù)，DB總共有24萬條左右的數(shù)據(jù)

img mydumper 備份時(shí)間的命令

DB_user='root'  DB_host='X.X.X.X'  DB_port='3306' DB_passwd='12345678'   DB_name='dbname'   DB_backup_pwd='/data/backup/mysql/xgss_mydumper' 計(jì)算備份時(shí)間 start_time=$(date +%s) mydumper -u $DB_user -h $DB_host -p $DB_passwd  -P $DB_port -B $DB_name  -o $DB_backup_pwd end_time=$(date +%s) echo "備份耗時(shí)：$((end_time - start_time)) 秒"

備份耗時(shí)：509 秒

du -sh /data/backup/mysql/xgss_mydumper 256M    /data/backup/mysql/xgss_mydumper

將剛才備份的數(shù)據(jù)庫(kù)恢復(fù)到本機(jī)

start_time=$(date +%s) myloader -u root -p '123456' -h 127.0.0.1 -P 3306 -B www_xgss_net -d /data/backup/mysql/xgss_mydumper end_time=$(date +%s) echo "恢復(fù)耗時(shí)：$((end_time - start_time)) 秒"

實(shí)際顯示如下：

[root@node8 ~]# start_time=$(date +%s) [root@node8 ~]# myloader -u root  -h 127.0.0.1 -P 61922 -p '123456' -B www_xgss_net -d /data/backup/mysql/xgss_mydumper end_time=$(date +%s) echo "備份耗時(shí)：$((end_time - start_time)) 秒" [root@node8 ~]# end_time=$(date +%s) [root@node8 ~]# echo "備份耗時(shí)：$((end_time - start_time)) 秒" 備份耗時(shí)：3 秒

參數(shù)

作用

-u

/-p/-h/-P

數(shù)據(jù)庫(kù)連接信息

-B db01

恢復(fù)到的目標(biāo)數(shù)據(jù)庫(kù)（不存在會(huì)自動(dòng)創(chuàng)建）

備份目錄（mydumper 輸出目錄）

-t 6

恢復(fù)線程數(shù)（可根據(jù) CPU/IO 調(diào)整）

-o

覆蓋已存在的表（DROP 后重建）

-v 3

日志詳細(xì)級(jí)別（1~3）

恢復(fù)之后查看表

為什么行數(shù)會(huì)變多？看看什么原因

img mysqldump 備份時(shí)間的命令

DB_user='root'  DB_host='X.X.X.X'  DB_port='3306' DB_passwd='12345678'   DB_name='dbname'   DB_backup_pwd='/data/backup/mysql/xgss_mysqldump' mkdir -p $DB_backup_pwd start_time=$(date +%s) mysqldump -u $DB_user -h $DB_host -P $DB_port -p$DB_passwd  $DB_name > $DB_backup_pwd/$DB_name.sql end_time=$(date +%s) echo "備份耗時(shí)：$((end_time - start_time)) 秒"

備份耗時(shí)：445 秒

du -sh /data/backup/mysql/xgss_mysqldump 256M    /data/backup/mysql/xgss_mysqldump

恢復(fù)命令

start_time=$(date +%s) mysql -u root -h 127.0.0.1 -P 61922 -p'123456' www_xgss_net2 < /data/backup/mysql/xgss_mysqldump/xgss2.sql end_time=$(date +%s) echo "備份耗時(shí)：$((end_time - start_time)) 秒"

備份耗時(shí)：22 秒

備份前的數(shù)據(jù)量

mysql> SELECT SUM(table_rows) AS total_rows FROM information_schema.tables WHERE table_schema = 'www_xgss_net'; +------------+ | total_rows | +------------+ | 274473     | +------------+ 1 row in set (0.02 sec)

恢復(fù)之后的數(shù)據(jù)量

mysql> SELECT SUM(table_rows) AS total_rows FROM information_schema.tables WHERE table_schema = 'www_xgss_net'; +------------+ | total_rows | +------------+ | 304427     | +------------+ 1 row in set (0.02 sec) mysql> SELECT SUM(table_rows) AS total_rows FROM information_schema.tables WHERE table_schema = 'www_xgss_net2'; +------------+ | total_rows | +------------+ | 296875     | +------------+ 1 row in set (0.02 sec)

工具

時(shí)間

mysql數(shù)據(jù)量

mydumper

509秒

myloader

3秒

mysqldump

445秒

mysql

22秒

通過本次對(duì)比測(cè)試，我們可以得到一個(gè)直觀結(jié)論：

• ?mysqldump/mysql：適合小型數(shù)據(jù)庫(kù)、低頻備份場(chǎng)景，工具簡(jiǎn)單、穩(wěn)定，但在大數(shù)據(jù)量場(chǎng)景下效率較差。

• ?mydumper/myloader：在大規(guī)模數(shù)據(jù)庫(kù)備份/恢復(fù)中優(yōu)勢(shì)顯著，支持多線程并行，速度是 mysqldump/mysql 的 4~5 倍，非常適合線上高頻備份和數(shù)據(jù)遷移。