Redis數(shù)據(jù)導入導出以及數(shù)據(jù)遷移的4種方法詳解

1、aof 導入方式。

因為這種方式比較簡單，所以我就先介紹它。

分兩步來實現(xiàn)，第一步先讓源 Redis 生成 AOF 數(shù)據(jù)文件。

# 清空上文目標實例全部數(shù)據(jù)
redis-cli -h 目標RedisIP -a password flushall
# 源實例開啟 aof 功能，將在 dir 目錄下生成 appendonly.aof 文件
redis-cli -h 源RedisIP -a password config set appendonly yes

dir 目錄，可以通過 config get dir 目錄獲得。

config get dir
# 比如我的 Mac 上執(zhí)行上面的命令后，返回如下內(nèi)容
1) "dir"
2) "/usr/local/var/db/redis"

通過上面的命令，我們可以看到我本地的 dir 目錄是：/usr/local/var/db/redis。

現(xiàn)在我們來做第二步操作，讓目標 Redis 實例導入 aof 數(shù)據(jù)。

# 將 appendonly.aof 文件放在當前路徑下
redis-cli -h 目標RedisIp -a password --pipe  appendonly.aof
# 源實例關(guān)閉 aof 功能
redis-cli -h 源RedisIp -a password config set appendonly no

上面的第一個命令，執(zhí)行后，如果出現(xiàn)以下內(nèi)容，則表示導入 aof 數(shù)據(jù)成功。

All data transferred. Waiting for the last reply...
Last reply received from server.
errors: 0, replies: 5

我這里是測試，數(shù)據(jù)比較少，所以提示有 5 個導入成功了。

AOF 的缺點也很明顯，就是速度慢，并且如果內(nèi)容多的話，文件也比較大。而且開啟 AOF 后，QPS 會比 RDB 模式寫的 QPS 低。還有就是 AOF 是一個定時任務(wù)，可能會出現(xiàn)數(shù)據(jù)丟失的情況。

2、通過我的 xttblog_redis_mv.sh 腳本來實現(xiàn)。

我的腳本內(nèi)容如下：

#!/bin/bash

#redis 源ip
src_ip=192.168.1.4
#redis 源port
src_port=6379

#redis 目的ip
dest_ip=127.0.0.1
#redis 目的port
dest_port=6389

#要遷移的key前綴
key_prefix=

i=1

redis-cli -h $src_ip -p $src_port -a password keys "${key_prefix}*" | while read key
do
  redis-cli -h $dest_ip -p $dest_port -a password del $key
  redis-cli -h $src_ip -p $src_port -a password --raw dump $key | perl -pe 'chomp if eof' | redis-cli -h $dest_ip -p $dest_port -a password -x restore $key 0
  echo "$i migrate key $key"
  ((i++))
done

大家在使用的時候，只需要替換 IP 即可。

這個腳本同樣有一個問題就是使用了 keys *，然后一個一個遍歷，如果是生產(chǎn)環(huán)境，不建議這樣使用！當然我的腳本也是可以再進行優(yōu)化的！

3、使用 redis-dump 工具。

Redis-Dump 是一個用于 Redis 數(shù)據(jù)導入 / 導出的工具，是基于 Ruby 實現(xiàn)的,可以方便的進行 redis 的數(shù)據(jù)備份。這個工具需要先安裝，以我的 Mac 為例，安裝教程如下：

# 沒安裝 ruby 的話，先安裝 ruby
brew install ruby
# 移除 gem 自帶源
gem sources --remove https://rubygems.org/ 
# 添加淘寶源
gem sources -a https://ruby.taobao.org/ 
# 安裝 redis-dump
gem install redis-dump -V

目前我發(fā)現(xiàn)，淘寶的鏡像已經(jīng)出現(xiàn) bad response Not Found 404 了，被告知鏡像維護站點已遷往 Ruby China 鏡像。

# 替換鏡像地址
gem sources --add http://gems.ruby-china.org/ --remove http://rubygems.org/
# 確認鏡像地址是否替換成功
gem sources -l
# 替換成功后再安裝 redis-dump
gem install redis-dump -V

安裝完成后，就可以使用 redis-dump 工具進行數(shù)據(jù)的導入導出了！

# redis-dump 導出
redis-dump -u :password@源RedisIp:6379 > 源Redis數(shù)據(jù)文件.json
# redis-load 導入
cat 源Redis數(shù)據(jù)文件.json | redis-load -u :password@目標RedisIp:6379

cat 源Redis數(shù)據(jù)文件.json | redis-load -u :password@目標RedisIp:6379

Linux 系統(tǒng)或者 Window 系統(tǒng)也都類似，安裝 redis-dump 工具完成后直接使用 redis-dump 導出，redis-load 導入即可完成數(shù)據(jù)的備份與遷移。

redis-dump 工具很強大，建議大家到官網(wǎng)上多看看它的官方文檔。

4、rdb 文件遷移

redis-dump 麻煩就麻煩在需要進行安裝，如果我的 Redis 已經(jīng)有備份機制，比如有 rdb 文件，那么我們直接遷移 rdb 文件就可以達到同樣的目的。

首先，我們可以先關(guān)閉源 Redis 實例的 aof 功能。如果不關(guān)閉 aof，Redis 默認用 aof 文件來恢復數(shù)據(jù)。

# 源實例關(guān)閉 aof 功能
redis-cli -h 源RedisIp -a password config set appendonly no

然后使用 save 命令把數(shù)據(jù)固化到 rdb 文件中。

# 固化數(shù)據(jù)到 RDB 文件
save

save 完成后，還是通過 config get dir 命令獲得保存的 RDB 數(shù)據(jù)文件位置。

接下來，我們需要殺死 redis 進程。殺掉當前 redis 的進程，否則下一步的復制 rdb 文件，rdb 處于打開的狀態(tài)，復制的文件，會占用同樣的句柄。

kill -9 redis
# 或者
pkill -9 redis
# 或者手段關(guān)閉 Redis 服務(wù)

然后復制源 redis 的 rdb 文件到目標 Redis 的 dir 數(shù)據(jù)目錄，名字為你要遷移的 redis 的 rdb 文件名。

復制完成后，重啟目標 Redis 實例，數(shù)據(jù)就遷移完成了。 重啟完成后可以驗證一下數(shù)據(jù)是否成功的復制了。

更多關(guān)于Redis數(shù)據(jù)導入導出以及數(shù)據(jù)遷移的方法請查看下面的相關(guān)鏈接