centos7下Zookeeper+sheepdog集群搭建

zookeeper

安装命令

  1. yum install zookeeper -y            (版本:zookeeper.x86_64      3.4.6-1)
  2. yum install zookeeper-lib -y  

(版本:zookeeper-lib.x86_64   3.4.6-1)

配置文件:/etc/zookeeper/zoo.cfg

作如下修改:

  1. maxClientCnxns=50
  2. tickTime=2000
  3. initLimit=10
  4. syncLimit=5
  5. dataDir=/var/lib/zookeeper/data        //保证目录存在,否则启动出错。
  6. dataLogDir=/var/lib/zookeeper/dateLogDir  
  7. clientPort=2181
  8. autopurge.purgeInterval=3
  9. autopurge.SnapRetainCount=3
  10. server.1=节点1存储网IP:2888:3888      //1,2,3对于在myid中写入
  11. server.2=节点2存储网IP:2888:3888
  12. server.3=节点3存储网IP :2888:3888

java环境变量:vim /etc/zookeeper /java.env

作如下修改:

  1. # zk buffer size 64M
  2. export JVMFLAGS="-Djute.maxbuffer=0x3FFFFC0 $JVMFLAGS"
  3. # java heap size 16GB
  4. export JVMFLAGS="-Xms16g -Xmx16g $JVMFLAGS"     //注意两个16G要改

注:设置为内存的1/4,测试域设置为16G

java环境变量设置:/etc/zookeeper/zookeeper-env.sh

做如下修改:

export JAVA_HOME=/usr

myid文件:创建  vim  /var/lib/zookeeper/data/myid

内容如下:

根据/etc/zookeeper/zoo.cfg中server.X设置,一般值为1或者2或者3。

设置dateLogDir:创建 mkdir /var/lib/zookeeper/dateLogDir

(可以不用)

#现行方案中,单独挂载一个SATA硬盘。(部署环境中选择zk节点上的/dev/sdl)

#mkfs.ext4 -T largefile /dev/***  (选择一块独立磁盘)

#mkdir /var/lib/zookeeper/dateLogDir

#mount /dev/*** /var/lib/zookeeper/dateLogDir

#blkid /dev/***  获取UUID

#设置/etc/fstab,用vim /etc/fstab在最后添加如下行

#UUID=046498f8-a077-40b9-af84-7f8e9eed9afd /var/lib/zookeeper/dateLogDir ext4 defaults 0 0

配置启动脚本:/etc/init.d/zookeeper

注释掉:#source /etc/rc.d/init.d/functions

修改#daemon -user zookeeper zkServer.sh start为zkServer.sh start

修改#daemon -user zookeeper zkServer.sh stop为zkServer.sh stop

修改

checkstatus() {

status –p $PIDFILE ${JAVA_HOME} /bin/java

RETVAL=$?

}

status() {

zkServer.sh status

RETVAL=$?

return $RETVAL

}

并修改service status的函数入口:

status)

status

;;

检查zk状态命令

  1. # service zookeeper start
  2. # service zookeeper status
  3. # yum install nmap-ncat -y
  4. #echo stat|nc localhost 2181

sheepdog

安装缺失包

  1. yum install automake.noarch -y    (版本:automake.noarch            1.13.4-3.el7)
  2. yum install libtool -y              (版本:libtool.x86_64               2.4.2-21.el7_2)
  3. yum install userspace-rcu -y       (版本:userspace-rcu.x86_64       0.7.9-1.el7)
  4. yum install userspace-rcu-devel -y  (版本:userspace-rcu-devel.x86_64  0.7.9-1.el7)
  5. yum install yasm -y               (版本:yasm.x86_64               1.2.0-4.el7)

将sheepdog的压缩包拷贝到任意目录下解压,编译命令

  1. cd sheepdog
  2. ./autogen.sh
  3. ./configure --enable-zookeeper --disable-corosync
  4. make
  5. make install

配置pc_san_conf.ini

  1. groupadd ebsadmin
  2. useradd -g ebsadmin ebsadmin
  3. mkdir /home/ebsadmin/serNode
  4. chown ebsadmin:ebsadmin serNode -R
  5. vim serNode/pc_san_conf.ini

注:看挂载了几个盘,根据挂载的盘,来写下面的文件

文件内容如下:

  1. [RAID]
  2. storage.path =/shd/meta,/shd/obj1,/shd/obj2,/shd/obj3,/shd/obj4,/shd/obj5,/shd/obj6,/shd/obj7,/shd/obj8,/shd/obj9,/shd/obj10,/shd/obj11,/shd/obj12
  3. level =0
  4. [SHEEPDOG]
  5. shdcmds =/shd/meta,/shd/obj1,/shd/obj2,/shd/obj3,/shd/obj4,/shd/obj5,/shd/obj6,/shd/obj7,/shd/obj8,/shd/obj9,/shd/obj10,/shd/obj11,/shd/obj12 -p 7000-c zookeeper:172.18.12.144:2181,172.18.12.53:2181,172.18.12.17:2181-ldir=/var/log  -z 1-i host=172.18.12.5,port=7001-y 172.16.172.5--nosync

启动配置/home/ebsadmin/serNode/sheepdog

创建sheepdog文件:[[email protected] serNode]# touch sheepdog

文件内容如下:

  1. ulimit -n 409600
  2. cmds=`grep "shdcmds"/home/ebsadmin/serNode/pc_san_conf.ini`&& SHEEP_OPTS=${cmds#shdcmds =}
  3. /usr/sbin/sheep --pidfile /var/run/sheep.pid $(if[-z "$SHEEP_OPTS"]; then echo "--cluster local --log dst=syslog --upgrade /var/lib/sheepdog";else echo $SHEEP_OPTS; fi)

修改文件权限chmod +x /home/ebsadmin/serNode/sheepdog

启动配置/usr/lib/systemd/system/sheepdog.service

文件内容如下:

  1. [Unit]
  2. Description=Sheepdog QEMU/KVM BlockStorage
  3. After=network.target
  4. Wants=syslog.target
  5. [Service]
  6. EnvironmentFile=-/etc/conf.d/sheepdog.conf
  7. EnvironmentFile=-/etc/sysconfig/sheepdog
  8. EnvironmentFile=-/etc/default/sheepdog
  9. ExecStart=/bin/sh -c ‘/home/ebsadmin/serNode/sheepdog‘
  10. PIDFile=/var/run/sheep.pid
  11. Type=forking
  12. Restart=on-abort
  13. StartLimitInterval=10s
  14. StartLimitBurst=3
  15. [Install]
  16. WantedBy=multi-user.target

验证sheepdog是否安装成功

[[email protected] /]# type sheep

#service sheepdog start

#systemctl status sheepdog.servic

验证功能好使

遇到的问题:

1、配置pc_san_conf.ini时填写的路径不对,以为是填写盘符,按如上填写即可,注意创建shd目录。

2.、因为之前安装过sheepdog,导致sheep和dog的版本不一致,删除/usr/bin和/usr/sbin/下的dog,然后重新编译。

来自为知笔记(Wiz)

时间: 2024-10-07 20:49:57

centos7下Zookeeper+sheepdog集群搭建的相关文章

Centos7安装zookeeper+kafka集群

Centos7安装zookeeper+kafka集群 1  Zookeeper和kafka简介 1)  ZooKeeper 是一个分布式的.分层级的文件系统,能促进客户端间的松耦合,并提供最终一致的,用于管理.协调Kafka代理,zookeeper集群中一台服务器作为Leader,其它作为Follower 2)  Apache Kafka 是分布式发布-订阅消息系统,kafka对消息保存时根据Topic进行归类,每个topic将被分成多个partition(区),每条消息在文件中的位置称为off

Zookeeper+ActiveMQ集群搭建

搭建三台虚拟机安装centos7.要提前安装好jdk环境 1.环境准备,搭建三台虚拟机ip分别是 192.168.192.130 192.168.192.131 192.168.192.134 Zookeeper环境准备 主机ip 消息端口 通信端口 节点目录/user/local/ 192.168.192.130 2181 2888:3888 zookeeper 192.168.192.131 2181 2888:3888 zookeeper 192.168.192.134 2181 2888

初始zookeeper与集群搭建实例

zookeeper是什么 Zookeeper,一种分布式应用的协作服务,是Google的Chubby一个开源的实现,是Hadoop的分布式协调服务,它包含一个简单的原语集,应用于分布式应用的协作服务,使得分布式应用可以基于这些接口实现诸如同步.配置维护和分集群或者命名的服务. zookeeper是一个由多个service组成的集群,一个leader,多个follower,每个server保存一份数据部分,全局数据一致,分布式读写,更新请求转发由leader实施. 更新请求顺序进行,来自同一个cl

[dubbo实战] dubbo+zookeeper伪集群搭建

zookeeper作为注册中心,服务器和客户端都要访问,如果有大量的并发,肯定会有等待.所以可以通过zookeeper集群解决. 一.为什么需要zookeeper呢? 大部分分布式应用需要一个主控.协调器或者控制器来管理物理分布的子进程.目前,大多数都要开发私有的协调程序,缺乏一个通用机制,协调程序的反复编写浪费,且难以形成通用.伸缩性好的协调器,zookeeper提供通用的分布式锁服务,用以协调分布式应用.所以说zookeeper是分布式应用的协作服务. 二.zookeeper的工作原理 核心

JAVAEE——宜立方商城08:Zookeeper+SolrCloud集群搭建、搜索功能切换到集群版、Activemq消息队列搭建与使用

1. 学习计划 1.solr集群搭建 2.使用solrj管理solr集群 3.把搜索功能切换到集群版 4.添加商品同步索引库. a) Activemq b) 发送消息 c) 接收消息 2. 什么是SolrCloud SolrCloud(solr 云)是Solr提供的分布式搜索方案,当你需要大规模,容错,分布式索引和检索能力时使用 SolrCloud.当一个系统的索引数据量少的时候是不需要使用SolrCloud的,当索引量很大,搜索请求并发很高,这时需要使用SolrCloud来满足这些需求. So

zookeeper+KAFKA 集群搭建

ZooKeeper是一个分布式的,开放源码的分布式应用程序协调服务,是Google的Chubby一个开源的实现,是Hadoop和Hbase的重要组件.它是一个为分布式应用提供一致性服务的软件,提供的功能包括:配置维护.域名服务.分布式同步.集群管理等. 因为Kafka集群是把状态信息保存在Zookeeper中的,并且Kafka的动态扩容是通过Zookeeper来实现的,所以需要优先搭建Zookeerper集群,建立分布式状态管理.开始准备环境,搭建集群: zookeeper是基于Java环境开发

【Data Cluster】真机环境下MySQL数据库集群搭建

阅读目录 MySQL Cluster简介 mysql-cluster构造 虚拟机安装centos6.6 mysql-cluster下载 centos6.6搭建环境配置 mysql-cluster安装包导入cent中 集群配置 运行mysql-cluster 常见问题 测试 真机环境下MySQL-Cluster搭建文档  摘要:本年伊始阶段,由于实验室对不同数据库性能测试需求,才出现MySQL集群搭建.购置主机,交换机,双绞线等一系列准备工作就绪,也就开始集群搭建.起初笔者对此不甚了解,查阅很多资

大数据平台CentOS7+CDH5.12.1集群搭建

1.CM(Cloudera Manager)介绍 1.1 简介 Cloudera Manager是一个拥有集群自动化安装.中心化管理.集群监控.报警功能的一个工具,使得安装集群从几天的时间缩短在几个小时内,运维人员从数十人降低到几人以内,极大的提高集群管理的效率. 对比Apache / CDH / HDP: (1)Apache:运维麻烦,组件间兼容性需要自己调研.(一般大厂使用,技术实力雄厚,有专业的运维人员)(2)CDH:国内使用最多的版本,但CM不开源,但其实对中.小公司使用来说没有影响(建

zookeeper,dubbo集群搭建

为保证服务的稳定性和持续性,在公司的项目中搭建集群是必不可少的. 1.环境准备 我的三台zk服务分别在192.168.254.122,192.168.254.123,192.168.254.124 wget http://www.apache.org/dist//zookeeper/zookeeper-3.4.8/zookeeper-3.4.8.tar.gz (建议选择稳定版,即stable的) 2.安装zk tar zxvf zookeeper-3.4.8.tar.gz cd zookeepe