redis介绍及搭建

redis介绍

  Redis最适合所有数据in-momory的场景,虽然Redis也提供持久化功能,但实际更多的是一个disk-backed(以写入磁盘的方式进行同步,实现持久化)的功能,跟传统意义上的持久化有比较大的差别

如果简单地比较Redis与Memcached的区别,大多数都会得到以下观点:

1 、Redis不仅仅支持简单的k/v类型的数据,同时还提供list,set,zset,hash等数据结构的存储。
     2 、Redis支持数据的备份,即master-slave模式的数据备份。
     3 、Redis支持数据的持久化,可以将内存中的数据保持在磁盘中,重启的时候可以再次加载进行使用。

redis5的新特性

1.新的Stream数据类型。
2.新的Redis模块API:Timers and Cluster API。
3. RDB现在存储LFU和LRU信息。
4.集群管理器从Ruby(redis-trib.rb)移植到C代码。可以在redis-cli中。查看`redis-cli —cluster help`了解更多信息。
5.新sorted set命令:ZPOPMIN / MAX和阻塞变量。
6.主动碎片整理V2。
7.增强HyperLogLog实现。
8.更好的内存统计报告。
9.许多带有子命令的命令现在都有一个HELP子命令。
10.客户经常连接和断开连接时性能更好。
11.错误修复和改进。

单机版redis搭建

  一、安装编译环境

# redis使用c语言编写,所以需要gcc编译环境
# yum install -y gcc gcc-c++

  二、下载stable版,并上传

官网地址:http://download.redis.io/releases/redis-5.x.x.tar.gz

  三、创建安装目录并解压

# mkdir -p /data/softwares
# mkdir /data/module
# cd /data/softwares
# tar xfz redis-5.0.0.tar.gz -C /data/module

  四、编译安装

# cd ../module/redis-5.0.0/
# make

  五、为了方便管理,将Redis文件中的conf配置文件和常用命令移动到统一文件中

# mkdir etc bin
# mv redis.conf etc/
# cd src/
# cp mkreleasehdr.sh redis-benchmark redis-check-aof redis-check-rdb redis-sentinel redis-cli redis-server redis-trib.rb ../bin

  六、修改环境变量

# echo "export PATH=$PATH:/data/module/redis-5.0.0/bin" >> /etc/profile
# . /etc/profile

  七、 编辑 redis.conf配置文件,开启redis远程访问服务

# sed -ri.ori -e ‘[email protected](^daemonize )[email protected]\[email protected]‘ -e ‘[email protected](^bind 127.*)@#\[email protected]‘ -e ‘[email protected](^protected-mode ).*@\[email protected]‘ -e ‘[email protected]# (r.*)[email protected]\[email protected]‘ ../etc/redis.conf

服务启动

# redis-server etc/redis.conf
5106:C 31 Jan 2020 05:57:04.305 # oO0OoO0OoO0Oo Redis is starting oO0OoO0OoO0Oo
5106:C 31 Jan 2020 05:57:04.305 # Redis version=5.0.0, bits=64, commit=00000000, modified=0, pid=5106, just started

查看启动情况

# ss -lntp
State       Recv-Q Send-Q           Local Address:Port                          Peer Address:Port
LISTEN      0      128                          *:6379                                     *:*                   users:(("redis-server",pid=5107,fd=7))
LISTEN      0      128                          *:22                                       *:*                   users:(("sshd",pid=746,fd=3))
LISTEN      0      100                  127.0.0.1:25                                       *:*                   users:(("master",pid=828,fd=13))
LISTEN      0      128                         :::6379                                    :::*                   users:(("redis-server",pid=5107,fd=6))
LISTEN      0      128                         :::22                                      :::*                   users:(("sshd",pid=746,fd=4))
LISTEN      0      100                        ::1:25   

停止服务

# redis-cli -h localhost
localhost:6379> shutdown
(error) NOAUTH Authentication required.
localhost:6379> AUTH 123456

redis可执行文件作用

可执行文件名 命令作用
redis-cli redis命令行工具
redis-server redis服务启动命令 
redis-trib.rb redis集群管理工具(5.0以前是ruby,之后移植到了c) 
redis-benchmark 基准测试工具 
redis-check-rdb  RDB持久化文件检测工具和修复工具 
redis-check-aof  AOF持久化文件检测工具和修复工具 
redis-sentinel 启动redis-sentinel(哨兵)

redis命令

1、redis-cli命令

redis提供两种连接服务器方式:交互式和命令行方式

(1)交互式

redis-cli -h {host} -p {port} -a {password}
# redis-cli -h localhost -p 6379 -a 123456
localhost:6379> set ass oo
OK

(2)命令行

[[email protected] redis-5.0.0]# redis-cli -h localhost -p 6379 -a 123456 set foo bar
Warning: Using a password with ‘-a‘ or ‘-u‘ option on the command line interface may not be safe.
OK
[[email protected] redis-5.0.0]# redis-cli -h localhost -p 6379 -a 123456 get foo
Warning: Using a password with ‘-a‘ or ‘-u‘ option on the command line interface may not be safe.
"bar"

参数

-h <hostname>  指定服务端地址
-p <port>   指定服务连接端口
-a <password> 连接服务端时使用的密码

[[email protected] redis-5.0.0]# redis-cli -h localhost -p 6379 -a 123456
Warning: Using a password with ‘-a‘ or ‘-u‘ option on the command line interface may not be safe.
localhost:6379> set foo bar
OK

可以看到,当在命令行输入密码的时候会有安全警告信息,这会影响到脚本获取数据,这种警告不能通过head、tail、sed等文本处理工具去除,因为这个警告是标准错误,而不是标准输出(1),所以将标准错误定向到空即可

[[email protected] redis-5.0.0]# redis-cli -h localhost -p 6379 -a 123456 2>/dev/null
localhost:6379> 

-r <repeat>   将命令重复执行多次
-i <interval>   每隔几秒(如果想用ms,如10ms则写0.01)执行一次命令,必须与-r一起使用

[[email protected] redis-5.0.0]# redis-cli -h localhost -p 6379 -a 123456 -r 2 ping
Warning: Using a password with ‘-a‘ or ‘-u‘ option on the command line interface may not be safe.
PONG
PONG

-n <db>   指定连接的数据库

[[email protected] redis-5.0.0]# redis-cli -h localhost -p 6379 -n 3
localhost:6379[3]>    ##[3]当前所使用的数据库

-x    从标准输入读取数据作为该命令的最后一个参数

[[email protected] redis-5.0.0]# echo ‘bar‘|redis-cli -h localhost -p 6379 -a 123456 -x set foo
Warning: Using a password with ‘-a‘ or ‘-u‘ option on the command line interface may not be safe.
OK

-c    连接集群结点时使用,此选项可防止moved和ask异常

--scan和--pattern  相当于scan命令,扫描所有键 SCAN cursor [MATCH pattern] [COUNT count]

[[email protected] redis-5.0.0]# redis-cli -a 123456 --scan --pattern ‘*ass*‘
Warning: Using a password with ‘-a‘ or ‘-u‘ option on the command line interface may not be safe.
mypasswd

--raw 和 --no-raw

(1)不展示数据额外类型信息
# redis-cli -h localhost -p 6379 -a 123456 2>/dev/null set num1 1
OK

# redis-cli -h localhost -p 6379 -a 123456 2>/dev/null get num1
"3"

# redis-cli -h localhost -p 6379 -a 123456 --raw 2>/dev/null get num1
3

# redis-cli -h localhost -p 6379 -a 123456 2>/dev/null incr num1
(integer) 3

# redis-cli -h localhost -p 6379 -a 123456 2>/dev/null --raw decr num1
2

可以看到,当返回数据到tty的时候,不加--raw,会在数据前显示数据类型

当redis返回数据不是打印到标准输出,而是重定向到文件里,redis会自动开启--raw参数

# redis-cli -h localhost -p 6379 -a 123456 2>/dev/null incr num1 > /tmp/redis.txt

# cat /tmp/redis.txt
4

(2)显示中文
# redis-cli -h localhost -p 6379 -a 123456 2>/dev/null set hello "中国"
OK

# redis-cli -h localhost -p 6379 -a 123456 2>/dev/null get hello
"\xe4\xb8\xad\xe5\x9b\xbd"

# redis-cli -h localhost -p 6379 -a 123456 2>/dev/null --raw get hello
中国

当值含有中文的时候,如果不加--raw,返回的结果是Unicode编码

--stat  获取redis状态统计信息,比info更全

每隔10秒实时获取一次redis状态统计信息,其中:keys             表示数据库的键数量mem              表示服务内存使用量clients          连接当前节点的客户端数量requests         截止目前总的处理量connections      截止到目前的总连接数
# redis-cli -h localhost -p 6379 -i 10 -a 123456 2>/dev/null --stat
------- data ------ --------------------- load -------------------- - child -
keys       mem      clients blocked requests            connections
5          1.82M    1       0       3162 (+0)           47
5          1.82M    1       0       3163 (+1)           47
5          1.82M    1       0       3164 (+1)           47         

7、--slave

当当前客户端模拟成当前redis节点的从节点,可用来获取当前redis节点的更新操作。合理利用可用于记录当前连接redis节点的一些更新操作,这些更新可能是实开发业务时需要的数据。

8、--rdb

会请求redis实例生成并发送RDB持久化文件,保存在本地。可做定期备份。

# redis-cli  -a 123456 2>/dev/null --rdb a.txt

9、--pipe

将命令封装成redis通信协议定义的数据格式,批量发送给redis执行。

10、--bigkeys

统计bigkey的分布,使用scan命令对redis的键进行采样,从中找到内存占用比较大的键,这些键可能是系统的瓶颈。

该方法有两个缺点:

  • 1.线上使用:虽然scan命令通过游标遍历建空间并且在生产上可以通过对从服务执行该命令,但毕竟是一个线上操作
  • 2.set,zset,list以及hash类型只能获取有多少个元素。但其实元素多的不一定占用空间大

11、--eval

用于执行lua脚本

12、--latency

有三个选项,--latency、--latency-history、--latency-dist。它们可检测网络延迟,展现的形式不同。看不明白

13、--stat

可实时获取redis的重要统计信息。info命令虽然比较全,但这里可看到一些增加的数据,如requests(每秒请求数)

14、--raw 和 --no-raw

--no-raw 要求返回原始格式。--raw 显示格式化的效果。

第二部分

redis-cli 命令有很多。比如

连接操作相关的命令

  • 默认直接连接  远程连接-h 192.168.1.20 -p 6379
  • ping:测试连接是否存活如果正常会返回pong
  • echo:打印
  • select:切换到指定的数据库,数据库索引号 index 用数字值指定,以 0 作为起始索引值
  • quit:关闭连接(connection)
  • auth:简单密码认证

服务端相关命令

  • time:返回当前服务器时间
  • client list: 返回所有连接到服务器的客户端信息和统计数据  参见http://redisdoc.com/server/client_list.html
  • client kill ip:port:关闭地址为 ip:port 的客户端
  • save:将数据同步保存到磁盘
  • bgsave:将数据异步保存到磁盘
  • lastsave:返回上次成功将数据保存到磁盘的Unix时戳
  • shundown:将数据同步保存到磁盘,然后关闭服务
  • info:提供服务器的信息和统计
  • config resetstat:重置info命令中的某些统计数据
  • config get:获取配置文件信息
  • config set:动态地调整 Redis 服务器的配置(configuration)而无须重启,可以修改的配置参数可以使用命令 CONFIG GET * 来列出
  • config rewrite:Redis 服务器时所指定的 redis.conf 文件进行改写
  • monitor:实时转储收到的请求
  • slaveof:改变复制策略设置

发布订阅相关命令

  • psubscribe:订阅一个或多个符合给定模式的频道 例如psubscribe news.* tweet.*
  • publish:将信息 message 发送到指定的频道 channel 例如publish msg "good morning"
  • pubsub channels:列出当前的活跃频道 例如PUBSUB CHANNELS news.i*
  • pubsub numsub:返回给定频道的订阅者数量 例如PUBSUB NUMSUB news.it news.internet news.sport news.music
  • pubsub numpat:返回客户端订阅的所有模式的数量总和
  • punsubscribe:指示客户端退订所有给定模式。
  • subscribe:订阅给定的一个或多个频道的信息。例如 subscribe msg chat_room
  • unsubscribe:指示客户端退订给定的频道。

对KEY操作的命令

  • exists(key):确认一个key是否存在
  • del(key):删除一个key
  • type(key):返回值的类型
  • keys(pattern):返回满足给定pattern的所有key
  • randomkey:随机返回key空间的一个
  • keyrename(oldname, newname):重命名key
  • dbsize:返回当前数据库中key的数目
  • expire:设定一个key的活动时间(s)
  • ttl:获得一个key的活动时间
  • move(key, dbindex):移动当前数据库中的key到dbindex数据库
  • flushdb:删除当前选择数据库中的所有key
  • flushall:删除所有数据库中的所有key

对String操作的命令

  • set(key, value):给数据库中名称为key的string赋予值value
  • get(key):返回数据库中名称为key的string的value
  • getset(key, value):给名称为key的string赋予上一次的value
  • mget(key1, key2,…, key N):返回库中多个string的value
  • setnx(key, value):添加string,名称为key,值为value
  • setex(key, time, value):向库中添加string,设定过期时间time
  • mset(key N, value N):批量设置多个string的值
  • msetnx(key N, value N):如果所有名称为key i的string都不存在
  • incr(key):名称为key的string增1操作
  • incrby(key, integer):名称为key的string增加integer
  • decr(key):名称为key的string减1操作
  • decrby(key, integer):名称为key的string减少integer
  • append(key, value):名称为key的string的值附加value
  • substr(key, start, end):返回名称为key的string的value的子串

对List操作的命令

  • rpush(key, value):在名称为key的list尾添加一个值为value的元素
  • lpush(key, value):在名称为key的list头添加一个值为value的 元素
  • llen(key):返回名称为key的list的长度
  • lrange(key, start, end):返回名称为key的list中start至end之间的元素
  • ltrim(key, start, end):截取名称为key的list
  • lindex(key, index):返回名称为key的list中index位置的元素
  • lset(key, index, value):给名称为key的list中index位置的元素赋值
  • lrem(key, count, value):删除count个key的list中值为value的元素
  • lpop(key):返回并删除名称为key的list中的首元素
  • rpop(key):返回并删除名称为key的list中的尾元素
  • blpop(key1, key2,… key N, timeout):lpop命令的block版本。
  • brpop(key1, key2,… key N, timeout):rpop的block版本。
  • rpoplpush(srckey, dstkey):返回并删除名称为srckey的list的尾元素,并将该元素添加到名称为dstkey的list的头部

对Set操作的命令

  • sadd(key, member):向名称为key的set中添加元素member
  • srem(key, member) :删除名称为key的set中的元素member
  • spop(key) :随机返回并删除名称为key的set中一个元素
  • smove(srckey, dstkey, member) :移到集合元素
  • scard(key) :返回名称为key的set的基数
  • sismember(key, member) :member是否是名称为key的set的元素
  • sinter(key1, key2,…key N) :求交集
  • sinterstore(dstkey, (keys)) :求交集并将交集保存到dstkey的集合
  • sunion(key1, (keys)) :求并集
  • sunionstore(dstkey, (keys)) :求并集并将并集保存到dstkey的集合
  • sdiff(key1, (keys)) :求差集
  • sdiffstore(dstkey, (keys)) :求差集并将差集保存到dstkey的集合
  • smembers(key) :返回名称为key的set的所有元素
  • srandmember(key) :随机返回名称为key的set的一个元素

对Hash操作的命令

    • hset(key, field, value):向名称为key的hash中添加元素field
    • hget(key, field):返回名称为key的hash中field对应的value
    • hmget(key, (fields)):返回名称为key的hash中field i对应的value
    • hmset(key, (fields)):向名称为key的hash中添加元素field
    • hincrby(key, field, integer):将名称为key的hash中field的value增加integer
    • hexists(key, field):名称为key的hash中是否存在键为field的域
    • hdel(key, field):删除名称为key的hash中键为field的域
    • hlen(key):返回名称为key的hash中元素个数
    • hkeys(key):返回名称为key的hash中所有键
    • hvals(key):返回名称为key的hash中所有键对应的value
    • hgetall(key):返回名称为key的hash中所有的键(field)及其对应的value

 实例

query在线分析 

redis-cli MONITOR | head -n 5000 | ./redis-faina.py

监控正在请求执行的命令

在cli下执行monitor,生产环境慎用。

模拟oom

redis-cli debug oom

模拟宕机

redis-cli debug segfault

模拟hang

redis-cli -p 6379 DEBUG sleep 30

获取慢查询

SLOWLOG GET 10
结果为查询ID、发生时间、运行时长和原命令 默认10毫秒,默认只保留最后的128条。单线程的模型下,一个请求占掉10毫秒是件大事情,注意设置和显示的单位为微秒,注意这个时间是不包含网络延迟的。
slowlog get 获取慢查询日志
slowlog len 获取慢查询日志条数
slowlog reset 清空慢查询

配置:

config set slow-log-slower-than 20000

config set slow-max-len 1000

config rewrite

原文地址:https://www.cnblogs.com/zh-dream/p/12094075.html

时间: 2024-10-06 23:40:34

redis介绍及搭建的相关文章

1.22 redis集群介绍21.23/21.24 redis集群搭建配置21.25 redis集群

21.22 redis集群介绍多个redis节点网络互联,数据共享所有的节点都是一主一从(可以是多个从),其中从不提供服务,仅作为备用不支持同时处理多个键(如mset/mget),因为redis需要把键均匀分布在各个节点上,并发量很高的情况下同时创建键值会降低性能并导致不可预测的行为.支持在线增加.删除节点客户端可以连任何一个主节点进行读写 21.23/21.24 redis集群搭建配置场景设置:两台机器,分别开启三个Redis服务(端口)A机器上三个端口7000,7002,7004,全部为主B

redis集群介绍、redis集群搭建配置、redis集群操作

一:redis集群介绍 多个redis节点网络互联,数据共享所有的节点都是一主一从(可以是多个从),其中从不提供服务,仅作为备用不支持同时处理多个键(如mset/mget),因为redis需要把键均匀分布在各个节点上,并发量很高的情况下同时创建键值会降低性能并导致不可预测的行为.支持在线增加.删除节点客户端可以连任何一个主节点进行读写 二:redis集群搭建配置 场景设置:两台机器,分别开启三个Redis服务(端口)A机器上三个端口7000,7002,7004,全部为主B机器上三个端口7001,

Redis集群与分布式介绍以及搭建Redis-Cluster

1 Redis集群 1.1 什么是集群 集群就是很多服务器组成的一个网络.指的是将多台服务器集中在一起,实现同一业务. 1.2 为什么要集群 一台服务器不能满足开发需要的时候,需要多台服务器来支持.这个时候就需要做集群,但是集群往往伴随 着分布式. 1.3 集群的特性及能力 1.集群的两大关键特性: 可扩展性----集群的性能不限于单一的服务实体,新的服务实体可以动态地加入到集群,从而增强集群的性能.动态添加服务器高可用性----集群通过服务实体冗余使客户端免于轻易遇到out of servic

redis介绍、主从配置

NoSQL之redis介绍: remote rerictionry server 是一个基于key-value键值对的持久化数据库存储系统,redis和memcached缓存服务很像. 但是redis支持的数据存储类型更丰富,包括string.list.set.和zset等,这些数据类型都支持push/pop.add/remove 及取交集.并集和差集及更丰富的操作,而且这些操作都是原子性的.在此基础上,redis支持各种不同方式的排序. 与memcached缓存服务一样,为了保证效率,数据都是

redis集群搭建及注意事项

上一篇:redis的安装及注意事项 这里,在一个Linux虚拟机上搭建6个节点的redis伪集群,思路很简单,一台虚拟机上开启6个redis实例,每个redis实例有自己的端口.这样的话,相当于模拟出了6台机器了,然后在以这6个实例组建redis集群就可以了. 前提:redis已经安装,目录为/usr/local/redis-4.0.1 redis集群是用的ruby脚本,所以要想执行该脚本,需要ruby环境..对应redis的源码src目录下的redis-trib.rb,redis-trib.r

[转载] Redis集群搭建最佳实践

转载自http://blog.csdn.net/sweetvvck/article/details/38315149?utm_source=tuicool 要搭建Redis集群,首先得考虑下面的几个问题; Redis集群搭建的目的是什么?或者说为什么要搭建Redis集群? Redis集群搭建的目的其实也就是集群搭建的目的,所有的集群主要都是为了解决一个问题,横向扩展. 在集群的概念出现之前,我们使用的硬件资源都是纵向扩展的,但是纵向扩展很快就会达到一个极限,单台机器的Cpu的处理速度,内存大小,

redis+mysql架构搭建

redis+mysql框架搭建 redis是一个key-value存储系统.和memcached类似,不过redis支持的value类型更多,主要有:string(字符串).list(链表).set(集合).zset(有序集合)和hash(哈希类型).redis和memcached一样,为了保证效率,都是把数据缓存在内存中.区别是redis会周期性的把更新的数据写入磁盘或者把修改的操作写入追加的记录文件,并且在此基础上实现master-slave主从同步. 简单的比较redis和memcache

Redis集群搭建最佳实践

要搭建Redis集群,首先得考虑下面的几个问题; Redis集群搭建的目的是什么?或者说为什么要搭建Redis集群? Redis集群搭建的目的其实也就是集群搭建的目的,所有的集群主要都是为了解决一个问题,横向扩展. 在集群的概念出现之前,我们使用的硬件资源都是纵向扩展的,但是纵向扩展很快就会达到一个极限,单台机器的Cpu的处理速度,内存大 小,硬盘大小没办法一直满足需求,而且机器纵向扩展的成本是相当高的.集群的出现就是能够让多台机器像一台机器一样工作,实现了资源的横向扩展. Redis是内存型数

转:redis集群搭建及使用

转自:http://www.cnblogs.com/huangxincheng/p/5615037.html 现在项目上用redis的话,很少说不用集群的情况,毕竟如果生产上只有一台redis会有极大的风险,比如机器挂掉,或者内存爆掉,就比如我们生产环境 曾今也遭遇到这种情况,导致redis内存不够挂掉的情况,当然这些都是我们及其不能容忍的,第一个必须要做到高可靠,其次才是高性能,好了,下面我来 逐一搭建一下. 一:Redis集群搭建 1. 下载 首先去官网下载较新的3.2.0版本,下载方式还是