laravel项目利用twemproxy部署redis集群的完整步骤

Twemproxy是一个代理服务器,可以通过它减少Memcached或Redis服务器所打开的连接数。下面这篇文章主要给大家介绍了关于laravel项目利用twemproxy部署redis集群的相关资料,文中通过示例代码介绍的非常详细,需要的朋友可以参考下
前言
twemproxy是twitter开发的一个redis代理proxy,Twemproxy可以把多台redis server当作一台使用,开发人员通过twemproxy访问这些redis servers 的时候不用关心到底去哪一台redis server读取k-v数据或者把k-v数据更新到数据集中,也解决了多台服务器中redis共享的问题。如果借助于redis的master-slave replication,能保证在任何一台redis不能工作情况下,仍然能够保证能够存在一个整个的数据集。
Twemproxy有何用途呢?它可以:
通过代理的方式减少缓存服务器的连接数
自动在多台缓存服务器间共享数据
通过不同的策略与散列函数支持一致性散列
通过配置的方式禁用失败的结点
运行在多个实例上,客户端可以连接到首个可用的代理服务器
支持请求的流式与批处理,因而能够降低来回的消耗

下面介绍一下twemproxy的安装和配置:
1、安装twemproxy前需要先安装m4、autoconf、automake、libtool、gcc,不然会报各种错
安装m4
wget http://mirrors.kernel.org/gnu/m4/m4-1.4.13.tar.gz
&& tar -xzvf m4-1.4.13.tar.gz
&& cd m4-1.4.13
&& ./configure –prefix=/usr/local
make && make install
安装autoconf、automake、libtool、gcc
yum -y install autoconf automake libtool gcc
2、安装twemproxy
git clone https://github.com/twitter/twemproxy.git

autoreconf -fvi #生成configure文件

.configure

make && make install
3、编辑配置文件
vim conf/nutcracker.yml
alpha:

 listen: 127.0.0.1:22121 #监听端口

 hash: fnv1a_64  #key值hash算法,默认fnv1a_64

 distribution: ketama  #分布算法 

#ketama一致性hash算法;modula非常简单,就是根据key值的hash值取模;random随机分布

 auto_eject_hosts: true  #摘除后端故障节点 

 redis: true   #是否是redis缓存,默认是false

 timeout: 400   #代理与后端超时时间,毫秒

 server_retry_timeout: 200000 #摘除故障节点后重新连接的时间,毫秒

 server_failure_limit: 1  #故障多少次摘除

 servers:

 - 172.16.175.145:6379:1 

 - 172.16.175.122:6379:1
4、更改redis配置文件
redis监听的ip和端口要与twemproxy对应(因为我只是在其中的一台机器上装了twemproxy,如果两台都装的话可以不用改)
分别更改两台服务器redis.conf中的bind选项,将127.0.0.1改为本例中的172.16.175.145和172.16.175.122

5、开启twemproxy

nutcracker -t -c /twemproxy/conf/nutcracker.yml
#测试配置文件 如果不加-c 默认是检测conf/nutcracker.yml

nutcracker -d -c /twemproxy/conf/nutcracker.yml -p -o /data/logs/twemproxy/redisproxy.log
#启动并将日志记录到/data/logs/twemproxy/redisproxy.log

6、将项目中的redis连接改为twemproxy的ip和端口

我项目使用的是laravel,只需将.env中的REDIS_HOST和REDIS_PORT设置上面的为127.0.0.1和22121
注意,还需要将config文件夹下的database.php中的redis配置里的 ‘database‘ => 0注释掉,predis 对这个配置默认执行 select 操作,会导致连接错误。
做一下redis的读写测试,不出意外的话,twemproxy就可以正常使用啦!

原文地址:https://www.cnblogs.com/sgm4231/p/9862515.html

时间: 2024-08-07 04:10:16

laravel项目利用twemproxy部署redis集群的完整步骤的相关文章

Redis集群搭建完整流程演示

Redis集群搭建完整流程演示 前言 ? 前面讲述了有关redis的编译安装流程以及其配置优化的部分内容,本文旨在本地模拟redis服务器集群搭建的流程演示. Redis集群的作用是什么? ? 在实验部署开始前,我们需要明白为什么需要搭建Redis集群,其解决了什么样的问题?又有哪些优势.我们可以从单一的Redis服务器来探究这个问题. 单一Redis服务器存在的问题 ? 如果部署过MySQL主从复制读写分离以及MHA高可用的话,这里就非常容易想到单一Redis服务器所存在的问题,主要有以下几点

基于Twemproxy的Redis集群方案

概述 由于单台redis服务器的内存管理能力有限,使用过大内存redis服务器的性能急剧下降,且服务器发生故障将直接影响大面积业务.为了获取更好的缓存性能及扩展型,我们将需要搭建redis集群来满足需求.因redis 3.0 beta支持的集群功能不适合生产环境的使用,所以我们采用twitter正在使用的twemproxy来搭建redis缓存服务器集群,目前用户包括Pinterest.Tumblr.Twitter.Vine.Kiip.Wuaki.tv.Wanelo.Kontera.Wikimed

基于 twemproxy 搭建 redis 集群

概述 由于单台redis服务器的内存管理能力有限,使用过大内存redis服务器的性能急剧下降,且服务器发生故障将直接影响大面积业务.为了获取更好的缓存性能及扩展型,我们将需要搭建redis集群来满足需求.因redis 3.0 beta支持的集群功能不适合生产环境的使用,所以我们采用twitter正在使用的twemproxy来搭建redis缓存服务器集群,目前用户包括Pinterest.Tumblr.Twitter.Vine.Kiip.Wuaki.tv.Wanelo.Kontera.Wikimed

Centos7 上部署 redis集群

一.安装前看下redis5.0版本的新特性 先看一下 Redis 5 带来的更新内容: 新的流数据类型(Stream data type) https://redis.io/topics/streams-intro2.新的 Redis 模块 API:定时器.集群和字典 API(Timers, Cluster and Dictionary APIs) RDB 现在可存储 LFU 和 LRU 信息4.redis-cli 中的集群管理器从 Ruby (redis-trib.rb) 移植到了 C 语言代

利用shipyard部署swarm集群及管理容器

shipyard是一个web管理容器的工具 服务器列表: 10.0.22.232    swarm-manage 10.0.22.244    swarm-node-1 10.0.22.245    swarm-node-2 部署swarm集群: swarm-manage #curl -s https://shipyard-project.com/deploy | bash -s Digest: sha256:8a60ad2ee9bd1e4e3d2e50b4c61ed510a158c8ca632

部署redis集群

0.创建redis用户 并设置密码(可选操作) sudo useradd -g dream361 -s /bin/bash -d /home/redis -m redis echo 'redis' | sudo passwd redis --stdin 1.使用yum 安装 必须的软件包 sudo yum install wget ruby -y  # 下载包含gcc 编译工具的开发包 sudo yum groupinstall 'Development Tools' -y  2. 登录 rub

redis 集群安装详细步骤

Redis集群部署文档(centos6系统) (要让集群正常工作至少需要3个主节点,在这里我们要创建6个redis节点,其中三个为主节点,三个为从节点,对应的redis节点的ip和端口对应关系如下) 127.0.0.1:7000 127.0.0.1:7001 127.0.0.1:7002 127.0.0.1:7003 127.0.0.1:7004 127.0.0.1:7005 1:下载redis.官网下载3.0.0版本,之前2.几的版本不支持集群模式 下载地址:https://github.co

Twemproxy 测试Redis集群架构

Twemproxy 测试架构 twemproxy- nutcracker: ip:10.207.101.101 ip:10.207.101.102 VIP:10.207.101.100 HA- keepalived ip:10.207.101.101 ip:10.207.101.102 VIP:10.207.101.100 Redis IP: 10.207.101.101 Port:6001/6002/6003 IP: 10.207.101.102 Port:6001/6002/6003 1.t

如何在Windows上部署Redis集群和SpringBoot进行整合

一.安装Redis的Windows版本并进行配置 (1)下载链接 https://github.com/microsoftarchive/redis/releases (2)将下载后的Redis复制成6份(3主3从集群.官方推荐最低的配置了) 文件名自定义,这里我改成和端口名一样 点进去每个文件夹,修改每个Redis的 redis.windows.conf 配置文件, 1 port 6380 # 6380,6381,6382,6383,6384,6385 2 cluster-enabled ye