linux redis导入数据,使用redis-dump-load工具导入导出redis数据

Redis-dump-load是基于python2.7，利用redis模块编写的一个导出/导入redis数据的一个python程序。

项目地址：https://github.com/p/redis-dump-load

需求环境

python 2.7(python 3.x)，pip2.7(pip 3.x)，redis模块

安装程序

Linux:

Shell

# pip install redis

# cd /usr/local

# git clone https://github.com/p/redis-dump-load.git

# cd redis-dump-load

# ./redisdl.py --help

1

2

3

4

5

# pip install redis

# cd /usr/local

# git clone https://github.com/p/redis-dump-load.git

# cd redis-dump-load

# ./redisdl.py --help

Windows:

从项目地址中下载解压，然后进入目录用cmd命令安装依赖包

TeX

pip install -r requirements-dev.txt

1

pipinstall-rrequirements-dev.txt

注：导出、导入命令Linux/Windows 是通用的，修改json文件路径就可以了。

导出数据

假设内网有redis:192.168.1.20:6379，现可利用redisdl.py程序导出该redis数据到本地的json文件：

Shell

# python redisdl.py -H 192.168.1.20 -p 6379 -d 0 -o /tmp/db0.json

# ll /tmp/db0.json

-rw-r--r--. 1 root root 411772591 Oct 17 09:15 /tmp/db0.json

1

2

3

# python redisdl.py -H 192.168.1.20 -p 6379 -d 0 -o /tmp/db0.json

# ll /tmp/db0.json

-rw-r--r--.1rootroot411772591Oct1709:15/tmp/db0.json

利用以上命令导出192.168.1.20:6379实例中的db0数据到本地/tmp/db0.json文件中，从info信息中可以看到db0一共有1758个key数据。

注：执行导出数据命令时，若出现类似decode(encoding)的字符类编码错误时，可将程序中‘decode(encoding)’改为如下：decode('utf-8','ignore')

导入数据

redis单实例

准备一个空的redis单实例：192.168.204.128:6379，把之前导出的/tmp/db0.json文件数据导入。

Shell

python redisdl.py -l -H 192.168.204.128 -p 6379 -d 0 /tmp/db0.json

1

pythonredisdl.py-l-H192.168.204.128-p6379-d0/tmp/db0.json

可以看到数据已导入，导入了1756个key，与上述看到1758个key相差了两个，大部分的key数据已导入到新的redis实例中，缺失的2个key应该是在导出数据后源redis新增的key数据。

redis_cluster

准备一个空的redis_cluster集群(192.168.1.20:8001/8002/8003)，并部署corvus(redis-porxy:192.168.1.20:12345)，可以利用corvus把之前到处/tmp/db0.json文件数据导入到集群中去。

集群信息：

Shell

/path/to/redis/redis-trib.rbcheck 192.168.1.20:8001

1

/path/to/redis/redis-trib.rbcheck192.168.1.20:8001

Shell

redis-cli -h 192.168.1.20 -p 12345 info

1

redis-cli-h192.168.1.20-p12345info

数据导入：

Shell

python redisdl.py -l -H 192.168.1.20 -p 12345 -d 0 /tmp/db0.json

1

pythonredisdl.py-l-H192.168.1.20-p12345-d0/tmp/db0.json

分别查看8001、8002、8003三个单独rediscluster实例，可以看到通过corvus导入的数据已经分摊到各redis实例中，分别为545、626、584个keys。总数据为1755(导入后一个key过期了)。

注：redisdl.py导入数据时，会去检查redis的版本，由于使用corvus时，检查出的版本为corvus版本，比redis3.0+的版本低，故执行时会报错，需手动更改redisdl.py脚本：

Shell

vi redisdl.py

version = [int(part) for part inself.info()['redis_version'].split('.')]

version = 3

1

2

3

viredisdl.py

version=[int(part)forpartinself.info()['redis_version'].split('.')]

version=3

文章转载并修改：