redis数据迁移过程

开启aof

redis-cli -h old_instance_ip -p old_instance_port config set appendonly yes

通过下边的脚本将数据导入新的redis

导数据之前确认一下select的那些db

]# grep SELECT -A 3 appendonly.6379.aof 
SELECT
$1
9     #使用的db9
*3

#!/bin/bash
/usr/bin/tail -f -n 1000000000000 ./appendonly.6379.aof| awk ‘BEGIN{ll="";l="";} {if(ll=="SELECT\r" && $0 == "2\r" || $0 == "3\r" || $0 == "0\r") {$0="9\r"};print $0; ll=l;l=$0; system("");}‘| redis-cli -h redis_host -a secret --pipe

最后使用nohup执行脚本，脚本要根据实际情况更改awk中的db_number，执行后在老的redis中set一个值看看是否会同步到新的redis中

时间： 2024-08-01 15:12:53

redis数据迁移过程的相关文章

Redis数据存储解决方案

1.背景1.1 Redis简介官方网站:http://redis.io/,Redis是REmote DIctionary Server的缩写. Redis是一个开源的使用ANSI C语言编写.支持网络.可基于内存亦可持久化的日志型.Key-Value数据库,并提供多种语言的API.从2010年3月15日起,Redis的开发工作由VMware主持.它跟 memcached 类似,不过数据可以持久化,而且支持的数据类型很丰富.它在保持键值数据库简单快捷特点的同时,又吸收了部分关系数据库的优点.从而

redis数据备份恢复SAVE

#(1)redis数据备份SAVE(BGSAVE也可以备份,并且后台执行备份) 127.0.0.1:6379> SAVE OK #备份完成后会在安装目录下(默认/var/lib/redis/)创建dump.rdb文件 #获取redis的安装目录 127.0.0.1:6379> CONFIG GET dir 1) "dir" 2) "/var/lib/redis" ll /var/lib/redis/dump.rdb -r

百万级运维心得一：Mongodb和Redis数据不能放在同一个服务器

百万级运维经验一:Mongodb和Redis数据不能放在同一个服务器一开始时,为了省服务器,把Mongodb和Redis放在一个服务器上.网站每到高峰期都特别卡,还经常出现502.找了很久的原因,发现硬盘的写数据很大,IOPS也很高,排查了很多原因都没找到.然后再仔细研究监控,发现写硬盘的操作很有规律,每隔几分钟就有一次频繁的写硬盘,联想到Redis同步数据到硬盘的间隔就是几分钟,所以开始怀疑是Redis引起的.于是加了一台服务器,把Redis单独放在那里,发现网站瞬间快了,502问题也不再出

nodejs 通过 get获取数据修改redis数据

如下代码是没有报错的正确代码我通过https获取到数据想用redis set一个键值存储现在我掉入了回调陷阱res.on 里面接收到的数据是data 里面如果放入 client.on('connect',functi ...这个修改函数就会报错. 'use strict'; var redis = require('redis'), RDS_PORT = 6379, //端口号 RDS_HOST = '127.0.0.1', //服务器IP //RDS_PWD = 'porschev',

Redis数据迁移方案

场景 Redis实例A ---> Redis实例B,整库全量迁移方案一: mac环境 brew install npm npm install redis-dump -g 针对RedisA: redis-dump -h host1 -p 6379 -d 1 --json > mydb.json针对RedisB: cat mydb.json | redis-dump --convert | redis-cli 方案二:参考: http://www.zlovezl.cn/articles/mig

Redis 数据备份与恢复

Redis 数据备份与恢复参考资料:http://www.runoob.com/redis/redis-backup.htmlRedis SAVE 命令用于创建当前数据库的备份.语法redis Save 命令基本语法如下:redis 127.0.0.1:6379> SAVE 实例redis 127.0.0.1:6379> SAVE OK该命令将在 redis 安装目录中创建dump.rdb文件.恢复数据如果需要恢复数据,只需将备份文件 (dump.rdb) 移动到 redis 安装目录并启动服

redis 数据持久化

转:redis 数据持久化 1.快照(snapshots) 缺省情况情况下,Redis把数据快照存放在磁盘上的二进制文件中,文件名为dump.rdb.你可以配置Redis的持久化策略,例如数据集中每N秒钟有超过M次更新,就将数据写入磁盘:或者你可以手工调用命令SAVE或BGSAVE. 数据保存的目录: 工作原理 Redis forks. 子进程开始将数据写到临时RDB文件中. 当子进程完成写RDB文件,用新文件替换老文件. 这种方式可以使Redis使用copy-on-write技术. 2.APP

Redis数据持久化机制AOF原理分析二

Redis数据持久化机制AOF原理分析二分类: Redis 2014-01-12 15:36 737人阅读评论(0) 收藏举报 redis AOF rewrite 目录(?)[+] 本文所引用的源码全部来自Redis2.8.2版本. Redis AOF数据持久化机制的实现相关代码是redis.c, redis.h, aof.c, bio.c, rio.c, config.c 在阅读本文之前请先阅读Redis数据持久化机制AOF原理分析之配置详解文章,了解AOF相关参数的解析,文章链

Redis数据导入工具优化过程总结

Redis数据导入工具优化过程总结背景使用C++开发了一个Redis数据导入工具从oracle中将所有表数据导入到redis中: 不是单纯的数据导入,每条oracle中的原有记录,需要经过业务逻辑处理, 并添加索引(redis集合): 工具完成后,性能是个瓶颈: 优化效果使用了2个样本数据测试: 样本数据a表8763 条记录: b表940279 条记录: 优化前,a表耗时11.417s: 优化后,a表耗时1.883s: 用到的工具 gprof, pstrace,time 使用time工具