分布式缓存使用介绍MemCache

参考网址：http://www.jb51.net/article/66525.htm

概述

　　memcache是一套开放源的分布式高速缓存系统。由服务端和客户端组成，以守护程序(监听)方式运行于一个或多个服务器中，随时会接收客户 端的连接和操作。memcache主要把数据对象缓存到内存中，通过在内存里维护一个统一的巨大的hash表。简单的说就是将数据调用到内存中，然后从内 存中读取，从而大大提高读取速度。memcache基于一个存储键/值对的hashmap进行存储对象到内存中。memcache是用C写的，但是客户端 可以用任何语言来编写，并通过memcached协议与守护进程通信。

　　特性：　　
•在 Memcached中可以保存的item数据量是没有限制的，只要内存足够 。
•Memcached单进程在32位系统中最大使用内存为2G，若在64位系统则没有限制,这是由于32位系统限制单进程最多可使用2G内存,要使用更多内存，可以分多个端口开启多个Memcached进程 。
•最大30天的数据过期时间,设置为永久的也会在这个时间过期，常量REALTIME_MAXDELTA
•单个item最大数据是1MB，超过1MB数据不予存储，常量POWER_BLOCK 1048576进行控制

Windows下安装Memcache

　　了解memcache一些基本信息后，在来尝试在windows下安装memcache服务端。
1.首先下载memcache安装文件：【安装包】。安装包里面会有x64和x86两个文件夹，根据操作系统选择一个打开会找到memcached.exe。这个文件不能直接双击运行安装，需要通过cmd进行安装。
2.安装步骤如图所示：

步骤:

1.窗口+R：输入cmd
2.进行G盘： 输入 G:
3.进行Memcached for window 32/64的安装目录：输入 cd CK\memcached_en32or64\x64
4.安装memcached:输入 memcached -d install
5.启动服务：输入 memcached -d start

启动服务后在Windows进程中可以看到memcached.exe.

memcached -d start|stop|shutdown|restart|uninstall|install 启动|停止|关闭|重启|卸载|安装。

安装步骤不是很复杂。第一：找到文件(memcached.exe)路径。第二： memcached -d install 就OK..

基本默认参数说明：

-p 监听的端口
-l 连接的IP地址, 默认是本机
-d start 启动memcached服务
-d restart 重起memcached服务
-d stop|shutdown 关闭正在运行的memcached服务
-d install 安装memcached服务
-d uninstall 卸载memcached服务
-u 以的身份运行 (仅在以root运行的时候有效)
-m 最大内存使用，单位MB。默认64MB
-M 内存耗尽时返回错误，而不是删除项
-c 最大同时连接数，默认是1024
-f 块大小增长因子，默认是1.25
-n 最小分配空间，key+value+flags默认是48
-h 显示帮助

服务器操作完成后，我们可以在本机telnet
到服务测试一个下。（如果提示telnet命令不存在，需要去控件面板开启windows的tel服务功能，
win7的开启tel功能操作步骤是：【控制面板】->【程序和功能】->【打开或关闭window功能】，然后找到并勾选tel相关即可。
其他window系统步骤类似。）

测试telnet是否正常运行 telnet 172.21.0.192 11211

进入后先按ctrl+]启动回示功能，否则无法看到输入信息。回示功能启动成功后如下图：

然后按回车输入参数stats:

安装和测试工作已完成..

实例代码

有很多C#版本的Memcached客户端程序。在这里我们使用的是Memcached.ClientLibrary.dll客户端调用方法，调用需要二个DLL:

Memcached.ClientLibrary.dll (Memcached客户端类库)

log4net.dll　(log4net是为Memcached提供日志记录) DLL下载地址：【点击下载】

在项目中引用这个二个dll,引用log4net.dll后还需进行一系列配置工作。在上篇博客中有对log4net的配置介绍。

【Log4Net 日志配置[附带源码]】

注意：Memcached.ClientLibrary.dll和log4net.dll有版本对应关系。

2.如果使用WinForm或控制台应用程序把log4net的配置文件独立出现,和写在App.config里面需要小小设置一下。

如图：Log4Net.config属性“复制到输出目录”：“始终复制”。不然在bin目录下找不到对应配置信息会产生报错。

memcache基于一个存储键/值对的hashmap进行存储对象到内存中。所以我们可以理解为主要在操作hashmap的键值对。

以下是一些简单操作[增，删，改，查，设置过期时间]：

?


1

2

3

4

5

6

7

8

9

10

11

12

13

14

15

16

17

18

19

20

21

22

23

24

25

26

27

28

29

30

31

32

33

34

35

36

37

38

39

40

41

42

43

44

45

46

47

48

49

50

51

//参数设置

string SockIOPoolName = "Test_SockIOPoolName";

string[] MemcacheServiceList = { "172.21.0.192:11211" };

//设置连接池

SockIOPool SPool = SockIOPool.GetInstance(SockIOPoolName);

SPool.SetServers(MemcacheServiceList);

SPool.Initialize();

//实例化Client

MemcachedClient MClient = new MemcachedClient();

MClient.PoolName = SockIOPoolName;

Console.WriteLine("1.创建memcache缓存Hello World");

MClient.Add("Key1001", "Hello World");

Console.WriteLine("2.查询缓存信息{0}", MClient.Get("Key1001"));

Console.WriteLine("3.修改memcache缓存Hello World");

MClient.Set("Key1001", "Hello World - 修改版");

Console.WriteLine("4.查询缓存信息{0}", MClient.Get("Key1001"));

if (MClient.KeyExists("Key1001"))

{

 Console.WriteLine("5.删除memcache缓存");

 MClient.Delete("Key1001");

}

if (MClient.KeyExists("Key1001"))

 Console.WriteLine(MClient.Get("Key1001"));

else

 Console.WriteLine("6.删除已删除");

Student stud = new Student() { id = "10001", name = "张三" };

MClient.Add("student", stud);

Student Get_stud = MClient.Get("student") as Student;

Console.WriteLine("6.缓存实体对象：{0} {1}", Get_stud.id, Get_stud.name);

MClient.Add("Key1002", "我已设置过期时间1分钟", DateTime.Now.AddMinutes(1));

while (true)

{

 if (MClient.KeyExists("Key1002"))

 {

 Console.WriteLine("key:Key1002 Value:{0},当前时间：{1}", MClient.Get("Key1002"), DateTime.Now);

 Thread.Sleep(20000);

 }

 else

 {

 Console.WriteLine("key:Key1002 我已过期,当前时间：{0}", DateTime.Now);

 break;

 }

}

输出结果：

Memcached缓存过期机制：

惰性删除：它并没有提供监控数据过期的机制，而是惰性的，当查询到某个key数据时，如果过期那么直接抛弃。

比如键key1002在2015-04-09 13：54 ：18
我设置他的值为:”我已设置过期时间1分钟“。他的过期时间为1分钟。等到2015-04-09 13：55
：18时数据应该过期，但在内存中还是会保存这条数据，而是等客户端来请求这条数据时判断数据是否过期。过期就直接删除返回空。如果内存满了
memcached会把最长时间未使用到期的缓存记录给删除，腾出空间继续使用。

Memcached分布存储

下面假设memcached服务器有node1～node3三台，应用程序要保存键名为“tokyo”、“kanagawa”、“chiba”、“saitama”、“gunma”的数据。

首先向memcached中添加“tokyo”。将“tokyo”传给客户端程序库后，客户端实现的算法就会根据“键”来决定保存数据的memcached服务器。服务器选定后，即命令它保存“tokyo”及其值。

同样，“kanagawa”、“chiba”、“saitama”、“gunma”都是先选择服务器再保存。接下来获取保存的数据。获取时也要将要
获取的键“tokyo”传递给函数库。函数库通过与数据保存时相同的算法，根据“键”选择服务器。使用的算法相同，就能选中与保存时相同的服务器，然后发
送get命令。只要数据没有因为某些原因被删除，就能获得保存的值。

这样，将不同的键保存到不同的服务器上，就实现了memcached的分布式。memcached服务器增多后，键就会分散，即使一台memcached服务器发生故障无法连接，也不会影响其他的缓存，系统依然能继续运行。 （参考：memcached全面剖析）

?


1

2

3

4

5

6

7

8

9

10

11

12

13

14

15

16

17

18

19

20

21

22

23

24

25

26

27

28

29

30

31

32

33

34

35

//参数

string[] MemcacheServiceList = { "172.21.0.192:11211", "172.21.0.28:11211", "172.21.13.246:11211" };

//设置连接池

SockIOPool SPool = SockIOPool.GetInstance();

SPool.SetServers(MemcacheServiceList);

SPool.Initialize();

MemcachedClient MClient = new MemcachedClient();

MClient.FlushAll();

int count = 5;

var time = Stopwatch.StartNew();

for (int i = 0; i < count; i++)

{

 MClient.Add(i.ToString(), "value" + i);

}

Console.WriteLine("memcached缓存创建成功。耗时:{0}",time.ElapsedTicks);

time = Stopwatch.StartNew();

for (int i = 0; i < count; i++)

{

 if (MClient.KeyExists(i.ToString()))

 {

 Console.WriteLine("key:{0}.value:{1}", i, MClient.Get(i.ToString()));

 }

 else

 {

 Console.WriteLine("--------未能查询到数据key:{0}--------",i);

 }

}

Console.WriteLine("memcached缓存数据查询完成。耗时:{0}", time.ElapsedTicks);

SPool.Shutdown();
时间： 2024-10-10 18:26:01

分布式缓存使用介绍MemCache的相关文章

分布式缓存--MVC+EF+Memcache

一.从单机到分布式 现在三台机器组成一个Web的应用集群,其中一台机器用户登录,然后其他另外两台机器如何共享登录状态? 解决方案: 1.AspNet进程外的Session . 2.用数据库存数等钱登录状态. 3.Memcache. 二.为什么用Memcache? 1.解决高并发访问数据库带来的死锁 2.多用户端共享缓存 三.Memcache原理 其实memcache是一种windows服务,客户端发来的请求,都会被Socket服务器端接受到.存数使用键值对存储的.客户端进行存储的时候,就是找最接

分布式缓存之 memcache 实现分布式缓存

最近想搞点分布式,但是不知道整点什么,来点简单的吧. 今天讲下memcache的分布式缓存 首先下载memcache的服务器端 百度下可以找到 然后执行安装和开启(关闭服务器)命令(还有其他的命令 可以百度下) memecached -d instal memcached -d start(stop) 然后我们用vs建个console项目 用nuget 下载memcache的c#调用驱动 当然有一些驱动,我选择的是EnyimMemcached github开源地址为:https://github

[.NET领域驱动设计实战系列]专题八：DDD案例：网上书店分布式消息队列和分布式缓存的实现

一.引言 在上一专题中,商家发货和用户确认收货功能引入了消息队列来实现的,引入消息队列的好处可以保证消息的顺序处理,并且具有良好的可扩展性.但是上一专题消息队列是基于内存中队列对象来实现,这样实现有一个弊端,就是一旦服务重启或出现故障时,此时消息队列中的消息会丢失,并且也记录不了日志.所以就会出现,商家发货成功后,用户并没有收到邮件通知,并且也没有日志让我们发现是否发送了邮件通知.为了解决这个问题,就需要引入一种可恢复的消息队列.目前有很多开源的消息队列都支持可恢复的,例如TibcoEms.ne

CYQ.Data V5 分布式自动化缓存设计介绍（二）

前言: 最近一段时间,开始了<IT连>创业,所以精力和写的文章多数是在分享创业的过程. 而关于本人三大框架CYQ.Data.Aries.Taurus.MVC的相关文章,基本都很少写了. 但框架的维护升级,还是时不时的在进行中的,这点从开源的Github上的代码提交时间上就可以看出来了. 毕竟<IT连>的后台WebAPI,用的是Taurus.MVC,后台系统管理用的是Aries. 不过今天,就不写创业相关的文章了,先分享篇技术类的文章. CYQ.Data 分布式自动缓存 之前写过一篇

php5.4之分布式缓存memcache（windows7下安装配置）

一.安装memcache memcached在windows7上的安装问题 现在安装包:http://www.jb51.net/softs/44843.html   memcache的安装包 错误: 通过cmd命令行进入到D:\webEve\memcached(下载后的解压目录) 运行 memcached.exe -d install 报错" failed to install service or service already installed" 解决方法: www.2cto.c

memcache 分布式缓存

转载地址:http://www.cnblogs.com/phpstudy2015-6/p/6713164.html 作者:那一叶随风 1.memcached分布式简介 memcached虽然称为"分布式"缓存服务器,但服务器端并没有"分布式"功能.Memcache集群主机不能够相互通信传输数据,它的"分布式"是基于客户端的程序逻辑算法进一步实现的. 请看下面简图: 根据上图我们简述分析分布式memcached的set与get的过程 set过程:

83-高性能,分布式缓存memcache简析

一. memcached简介 memcached is a high-performance, distributed memory object caching system, generic in nature, but intended for use in      speeding up dynamic web applications by alleviating database load. (由 LiveJournal旗下的Danga Interactive研发) #高性能,分布

CYQ.Data V5 分布式缓存MemCached应用开发介绍

前言 今天大伙还在热议关于.NET Core的东西,我只想说一句:在.NET 跨平台叫了这么多年间,其实人们期待的是一个知名的跨平台案例,而不是一堆能跨平台的消息. 好,回头说说框架: 在框架完成数据库读写分离的功能后,开始回想起2年前所构思的:关于框架集成分布式缓存MemCached的实现. 之前一直没动手,是因为思路比较飘,秉承着框架应该简单干净轻量引用无依赖和使用不复杂的思维: 看着MemCached的服务端协议,整天思考着自己用Socket写一个客户端. 后来可能是没激情,迟迟没动手.

Nginx+Memcache+一致性hash算法 实现页面分布式缓存（转）

网站响应速度优化包括集群架构中很多方面的瓶颈因素,这里所说的将页面静态化.实现分布式高速缓存就是其中的一个很好的解决方案... 1)先来看看Nginx负载均衡 Nginx负载均衡依赖自带的 ngx_http_upstream_module . ngx_http_memcached_module两大功能模块,其中一致性hash算法Nginx本身是不支持的,可以借助第三方模块: ngx_http_upstream_consistent_hash 或者直接使用淘宝的Tengine: http://te