专栏名称: 漫话编程

漫画编程，让编程变得更有乐趣。

两个Redis集群如何平滑数据迁移

漫话编程 · 公众号 · · 2019-11-23 08:45

正文

来自：掘金（作者：冷冷gg）

原文链接：

https://juejin.im/post/5dc216dee51d4561f81ad1a7

问题

由于生产环境的各种原因，我们需要对现有服务器进行迁移，包括线上正在运行的 redis 集群环境如何去做?

涉及到数据源变动，原有数据如何平滑迁移到新实例，从而可以实现无缝迁移?

方案汇总

基于 redis 自身的RDB/AOF 备份机制

执行 save\bgsave 触发数据持久化 RDB文件
拷贝redis备份文件（dump.rdb）到目标机器
重启目标实例重新load RDB 文件

关于 save/bgsave 的区别

命令	save	bgsave
IO阻塞	同步	异步
复杂度	O(n)	O(n)
缺点	阻塞客户端	需要fork，消耗内存

基于 `redis-dump`导入导出 `json`备份

redis-dump 基于JSON 备份还原Redis的数据https://github.com/delano/redis-dump

# 导出命令
redis-dump –u 127.0.0.1:6379 > lengleng.json
# 导出指定数据库数据
redis-dump -u 127.0.0.1:6379 -d 15 > lengleng.json
# 如果redis设有密码
redis-dump –u :[email protected]:6379 > lengleng.json

# 导入命令
< lengleng.json redis-load
# 指定redis密码
< lengleng.json redis-load -u :[email protected]:6379

基于 `redis-shake` 实现 `redis-cluster` 迁移

redis-shake是阿里云Redis&MongoDB团队开源的用于redis数据同步的工具https://github.com/alibaba/RedisShake。

基于 Docker 创建两个集群

docker run --name redis-cluster1 -e CLUSTER_ANNOUNCE_IP=192.168.0.31 -p 8000-8005:7000-7005 -p 18000-18005:17000-17005  pig4cloud/redis-cluster:4.0

docker run --name redis-cluster2 -e CLUSTER_ANNOUNCE_IP=192.168.0.31 -p 8000-8005:7000-7005 -p 18000-18005:17000-17005  pig4cloud/redis-cluster:4.0

配置 redis-shake.conf

source.type: cluster
source.address: master@192.168.0.31:7000   #配置一个节点自动发现
target.type: cluster
target.address: master@192.168.0.31:8000   #配置一个节点自动发现

执行全量、增量同步

restful监控指标

# 用户可以通过restful监控指标查看内部运行状况，默认的restful端口是9320:

http://127.0.0.1:9320/metric

推荐文章

阿里开发者 · 恭贺新春！巳巳如意！

3 天前

阿里开发者 · AI年味：新春创意盛宴，作品秀出精彩！

3 天前

百度智能云 · 百度智能云携手15大国民品牌送祝福，快来解锁你的新年“搭子”

5 天前

百度智能云 · 成长在百度智能云上：北京体育大学&酷体体育科技，入选工信部典型案例！

6 天前

百度智能云 · 围观 |孟子义勇闯新赛道，“数字人飞帖”贺新春

6 天前

穷游网 · Hello World！穷游er短视频有奖大征集又~来~啦~

8 年前

牛熊交易室 · 香飘飘奶茶三冲IPO，3.6亿广告费卖了11亿杯却只赚回2.7亿

7 年前

中国黑客联盟 · 震惊！这家70个人的小公司让马云坐不住了！

7 年前

三国演义 · 中华礼仪用语！快失传了，赶紧告诉孩子吧！

7 年前

CP头像集 · 开始就是结束

7 年前

两个Redis集群如何平滑数据迁移

正文

方案汇总

基于 redis 自身的RDB/AOF 备份机制

基于 redis-dump导入导出 json备份

基于 redis-shake 实现 redis-cluster 迁移

基于 `redis-dump`导入导出 `json`备份

基于 `redis-shake` 实现 `redis-cluster` 迁移