07_NoSQL数据库之Redis数据库:Redis的高级应用之事务处理、持久化操作、pub_sub、虚拟内存



  1. 事务处理

Redis对事务的支持目前还比较简单。Redis只能保证一个client发起的事务中的命令可以连续的执行,而中间不会插入其他client的命令。当一个client在一个连接中发出multi命令时,这个连接会进入一个事务上下文,该连接后续的命令不会立即执行,而是先放到一个队列中,当执行exec命令时,redis会顺序的执行队列中的所有命令。


127.0.0.1:6379> get age

(nil)

127.0.0.1:6379> multi

OK                     
//表示事务开始

127.0.0.1:6379> set age 10

QUEUED                 
//表示放入队列

127.0.0.1:6379> set age 20

QUEUED                 
//表示这两个都放入队列中了

127.0.0.1:6379> exec      
 //分别分别返回两条命令的结果

1) OK

2) OK

127.0.0.1:6379> get age

"20"

127.0.0.1:6379>

A:取消一个事务,使用discard


127.0.0.1:6379> get age

"20"

127.0.0.1:6379> multi

OK

127.0.0.1:6379> set age 30

QUEUED

127.0.0.1:6379> set age 40

QUEUED

127.0.0.1:6379> discard

OK

127.0.0.1:6379> get age

"20"

127.0.0.1:6379>

可以发现这次2个set
age命令都没被执行。Discard命令其实就是清空事务的命令队列并退出事务上下文,也就是我们常说的事务回滚。

B.乐观锁:大多数是基于数据版本(version)的记录机制实现的。即为数据增加一个版本标识,在基于数据库表的版本解决方案中,一般是通过数据库表添加一个“version”字段来实现读取出数据时,将此版本号一同读出,之后更新时,对此版本号加1。此时,将提交数据的版本号与数据库表对应记录的当前版本号进行比对,如果提交的数据版本号大于数据库当前版本号,则予以更新,否则认为是过期数据。

Redis乐观锁实例:假设一个age的key,我们开2个session来对age进行赋值操作,我们来看一下结果如何。

watch命令会监视给定的key,当exec时候如果监视的key从调用watch后发生过变化,则整个事务会失败。也可以调用watch多次监视多个key。这样就可以对指定的key加乐观锁了,注意watch的key是对整个连接有效的,事务也一样。如果连接断开,监视和事务都会被自动清除。当然了exec,discard,unwatch命令都会清除连接中的所有监视。


127.0.0.1:6379> get age

"20"

127.0.0.1:6379> get name

(nil)

127.0.0.1:6379> set name toto

OK

127.0.0.1:6379> multi

OK

127.0.0.1:6379> incr age

QUEUED

127.0.0.1:6379> incr name

QUEUED

127.0.0.1:6379> exec

1) (integer) 21             
//可以看到事务并没有回滚,执行了一条,后面一条失败

2) (error) ERR value is not an integer or out of range

127.0.0.1:6379> get age

"21"

127.0.0.1:6379> get name

"toto"

127.0.0.1:6379>

从这个例子中可以看到,age由于是个数字,那么它可以有自增运算,但是name是个字符串,无法对其进行自增运算,所以会报错,如果按传统关系型数据库的思路来讲,整个事务都会回滚,但是我们看到redis却是将可以执行的命令提交了,所以这个现象对于习惯关系型数据库操作的朋友来说是很别扭的,这一点也是redis今天需要改进的地方。

持久化机制

Redis是一个支持持久化的内存数据库,也就是说redis需要经常讲内存中的数据同步到硬盘来保证持久化。Redis支持两种持久化方式:

  1. snapshotting(快照)也是默认方式。(也就是说把数据做一个备份)
  2. append-only file(缩写aof)的方式。(将写和更改删除等操作放到文件中)。

快照是默认的持久化方式。这种方式是将内存中数据以快照的方式写入到二进制文件中。默认的文件名为dump.rdb。可以通过配置自动做快照持久化的方式。我们可以配置redis在n秒内如果超过m个key被修改就自动做快照。


save 900 1 #900秒内如果超过1个key被修改,则发起快照保存

save 300 10 #300秒内容如超过10个key被修改,则发起快照保存

save 60 10000

rdb所在位置:

默认开启的配置是:

aof方式:

由于快照方式是在一定间隔时间做一次的,所以如果redis意外down掉的话,就会丢失最后一次快照后的所有修改。

aof比快照方式更好的持久性,是由于在使用aof时,redis会将每一个收到的写命令都通过write函数追加到文件中,当redis重启时会通过重新执行文件中保存的写命令来在内存中重建整个数据库的内容。

当然由于os会在内核中缓存write做的修改,所以可能不是立即写到磁盘上。这样aof方式的持久化也还是有可能丢失部分修改。

可以通过配置文件告诉redis我们想要通过fsync函数强制os写入到磁盘的时机。


appendonly yes  
//启动aof持久化方式

# appendfsync always  
//收到写命令就立即写入磁盘,最慢,但是保证完全的持久化。(表示每次写都会往文件中写一次)

appendfsync everysec  
//每秒钟写入磁盘一次,在性能和持久化方面做了很好的折中。(表示每秒都会执行一次)

#appendfsync no      
//完全依赖os,性能最好,持久化没保证

要修改的配置文件是:vim /usr/local/redis/etc/redis.conf

appendonly的默认参数是no,我们可以给它改成yes

修改同步方式:

重新启动服务器:/usr/local/redis/bin/redis-server /usr/local/redis/etc/redis.conf

测试运行


[[email protected] ~]$ /usr/local/redis/bin/redis-cli

127.0.0.1:6379> set name toto1

(error) NOAUTH Authentication required.

127.0.0.1:6379> auth toto

OK

127.0.0.1:6379> set name toto1

OK

127.0.0.1:6379> exit

[[email protected] ~]$ ll

总用量 60

drwxrwxr-x. 2 toto toto 4096 10月 16 19:09
1016

-rw-r--r--. 1 toto toto  
57 2月 
15 15:59 appendonly.aof

-rw-rw-r--. 1 toto toto  
38 2月 
15 15:56 dump.rdb

drwxr-xr-x. 3 root root 4096 10月 13 16:34
mysql

drwxrwxr-x. 3 toto toto 4096 2月  
6 17:24 redis

drwxrwxr-x. 2 toto toto 4096 1月 
31 19:58 server

drwxrwxr-x. 3 toto toto 4096 10月 16 19:02
shell

drwxr-xr-x. 2 toto toto 4096 10月 16 08:58
公共的

drwxr-xr-x. 2 toto toto 4096 10月 16 08:58
模板

drwxr-xr-x. 2 toto toto 4096 10月 16 08:58
视频

drwxr-xr-x. 2 toto toto 4096 10月 16 08:58
图片

drwxr-xr-x. 2 toto toto 4096 10月 16 08:58
文档

drwxr-xr-x. 2 toto toto 4096 10月 16 08:58
下载

drwxr-xr-x. 2 toto toto 4096 10月 16 08:58
音乐

drwxr-xr-x. 2 toto toto 4096 10月 16 10:07
桌面


[[email protected] ~]$ ls

1016 
appendonly.aof  dump.rdb 
mysql  redis  server 
shell  公共的 
模板 
视频 
图片 
文档 
下载 
音乐 
桌面

[[email protected] ~]$
cat appendonly.aof

*2

$6

SELECT

$1

0

*3

$3

set

$4

name

$5

toto1

*3

$3

set

$4

name

$5

toto2

[[email protected] ~]$

由上可以知道aof文件中存的是写命令。

发布及订阅消息

发布订阅(pub/sub)是一种消息通信模式,主要的目的是解除消息发布者和消息订阅者之间的耦合,Redis作为一个pub/sub的server,在订阅者和发布者之间起到了消息路由的功能。订阅者可以通过subscribe和psubscribe命令向redis
server订阅自己感兴趣的消息类型,redis将信息类型称为通道(channel).当发布者通过publish命令向redis
server发送特定类型的信息时,订阅信息类型的全部client都会收到此消息。

实验步骤:

打开三个客户端:

分别使用:/usr/local/redis/bin/redis-cli -a toto登录客户端

在第一个客户端输入:subscribe tv1  
通过这种方式监听tv1频道

在第二个客户端输入:subscribe tv1 tv2
通过这种方式监听tv1,tv2频道

在第三个客户端通过public命令发布消息,输入:以下命令:

这样,在第一个客户端和第二个客户端中会监听到第三个客户端发布的消息,最后的输出如下:

客户端一的消息如下:

客户端二的消息如下:

应用:做消息系统和聊天系统

虚拟内存的使用:

Redis的虚拟内存与操作系统的虚拟内存内存不是一回事儿,但是思路和目的都是相同的。就是暂时把不经常访问的数据从内存交换到磁盘中,从而腾出宝贵的内存空间用于其他需要访问的数据。尤其是对于redis这样的内存数据库,内存总是不够用的。除了可以将数据分割到多个redis
server外。另外能够提高数据库容量的办法就是使用虚拟内存把那些不经常访问的数据交换到磁盘上。

下面是虚拟内存的配置情况:

vm-enabled yes           
     #开启vm功能

vm-swap-file /tmp/redis.swap    
#交换出来的value保存的文件路径

vm-max-memory 1000000       
#redis使用的最大内存上限

vm-page-size 32               
#每个页面的大小32字节

vm-pages 134217728           
#最多使用多少页面

vm-max-threads 4              
#用于执行value对象换入的工作线程数量

注意:自己在2.配置的时候上面的参数不可以配置。

时间: 2024-08-02 21:44:44

07_NoSQL数据库之Redis数据库:Redis的高级应用之事务处理、持久化操作、pub_sub、虚拟内存的相关文章

06_NoSQL数据库之Redis数据库:Redis的高级应用之登录授权和主从复制

 Redis高级实用特征 安全性(登录授权和登录后使用auth授权) 设置客户端连接后进行任何其他指定前需要使用的密码. 警告:因为redis速度相当快,所以在一台比较好的服务器下,一个外部的用户可以在一秒中进行150k次的密码尝试,这意味着你需要指定非常非常强大的密码来防止暴力破解. 修改密码只需要在我们的配置文件中修改下面参数: #requirepass foobared Requirepass beijing     (红色的就是指定的要配置的密码) 上面的一句表示的是设置连接的口令是

Redis数据库笔记

1.redis是什么?  redis(REmote DIctionary Server)是一种使用C语言开发的NOSQL,即非关系数据库:Redis是一个操作数据结构的语言工具是一种内存数据库或者数据结构服务器,将数据直接保存在内存中,但又提供了持久化支持:是一种键值对数据库,保存的是键值对数据,相当于保存了一个变量及变量的值;以字典结构存储数据,并允许其他应用通过TCP协议读写字典中的内容:是Memcached缓存服务器的替代者.2.redis可以用来做什么?  数据库.队列.缓存系统,新浪微

超强、超详细Redis数据库入门教程

这篇文章主要介绍了超强.超详细Redis入门教程,本文详细介绍了Redis数据库各个方面的知识,需要的朋友可以参考下 [本教程目录] 1.redis是什么2.redis的作者何许人也3.谁在使用redis4.学会安装redis5.学会启动redis6.使用redis客户端7.redis数据结构 – 简介8.redis数据结构 – strings9.redis数据结构 – lists10.redis数据结构 – 集合11.redis数据结构 – 有序集合12.redis数据结构 – 哈希13.聊聊

Redis数据库

Redis是一个开源的使用ANSI C语言编写.支持网络.可基于内存亦可持久化的日志型.Key-Value数据库,并提供多种语言的API.从2010年3月15日起,Redis的开发工作由VMware主持.从2013年5月开始,Redis的开发由Pivotal赞助. 定义 redis是一个key-value存储系统.和Memcached类似,它支持存储的value类型相对更多,包括string(字符串).list(链表).set(集合).zset(sorted set --有序集合)和hash(哈

.NET 下第一次接触Redis数据库

关于Redis 1.简介 Redis是著名的NOSQL(Not Only SQL)数据库,是键值对结构.(我只用过键值对结构的) 他为存储键值对做了优化,在大型网站中应用广泛.Redis提供了数据的自动过期处理,而且支持集群. 适合临时存储数据,和存储一些离散的数据. 2.用途 Redis可以存储一些临时数据.可以存储一些,某一时刻有意义,但是又不值得存入数据库的数据. 同时,对于数据统计来说,用户的一次点击,一次登录,都是有意义的.但是这些大量的离散的,单个拿出来毫无意义的数据,显然不适合存储

Redis数据库学习

Redis概述 Redis是一个开源的,先进的key-value存储. 它通常被称为数据结构服务器,因为键可以包含字符串,哈希,链表,集合和有序集合 Redis简介 Redis 是完全开源免费的,遵守BSD协议,是一个高性能的key-value数据库. Redis 与其他 key - value 缓存产品有以下三个特点: Redis支持数据的持久化,可以将内存中的数据保存在磁盘中,重启的时候可以再次加载进行使用. Redis不仅仅支持简单的key-value类型的数据,同时还提供list,set

linux⑧ mysql数据库,redis 数据库

目录 一. mysql 数据库 二.redis 数据库 三.redis 发布/订阅 四. redis 数据持久化 五. redis 主从同步 六.redis-cluster  集群搭建 一. mysql 数据库 1.安装方式 ①yum安装 ②源代码编译安装 ③rpm包安装 yum安装的前提条件,是准备好yum源,可以选择163源,清华源,阿里云源,等等等 1.安装mariadb的yum源有俩,一个是阿里云的yum源,可能版本较低,并且软件包很小,功能很少 yum install mariadb-

【转】redis数据库入门教程(全面详细)

[本教程目录] 1.redis是什么2.redis的作者何许人也3.谁在使用redis4.学会安装redis5.学会启动redis6.使用redis客户端7.redis数据结构 – 简介8.redis数据结构 – strings9.redis数据结构 – lists10.redis数据结构 – 集合11.redis数据结构 – 有序集合12.redis数据结构 – 哈希13.聊聊redis持久化 – 两种方式14.聊聊redis持久化 – RDB15.聊聊redis持久化 – AOF16.聊聊r

centos6.5 64 源码安装redis服务,建立可远程连接的redis数据库

安装环境:centos6.5 64位 使用的包:redis-2.8.19.tar.gz  tcl8.6.3-src.tar.gz 包的下载链接:http://downloads.sourceforge.net/tcl/tcl8.6.3-src.tar.gz http://download.redis.io/releases/redis-2.8.19.tar.gz 本次安装的目录/home/hadoop/redis为任意目录 代码实现: 1,安装需要的支持环境 su root cd /home/h