mesos 集群安装部署zookeeper(2)

三:集群安装配置

##############################################################

配置zookeeper集群    (172.16.7.12~13 执行)

###############################################################

1:部署环境介绍:

服务器IP地址主机名安装服务

172.16.7.12ctn-7-12.ptmind.com zookeeper   myid=1

172.16.7.13ctn-7-13.ptmind.com zookeeper   myid=2

172.16.7.14ctn-7-14.ptmind.com zookeeper   myid=3

2:安装软件包

yum -y install mesos  mesosphere-zookeeper

3:配置参考(172.16.7.12):

创建id

touch /var/lib/zookeeper/myid

echo 1 > /var/lib/zookeeper/myid        #其它节点配置需要修改ID

more /var/lib/zookeeper/myid

添加集群配置文件

cat << EOF >> /etc/zookeeper/conf/zoo.cfg

server.1=ctn-7-12.ptmind.com:2888:3888

server.2=ctn-7-13.ptmind.com:2888:3888

server.3=ctn-7-14.ptmind.com:2888:3888

EOF

启动服务,添加开机启动

systemctl start  zookeeper.service

systemctl status  zookeeper.service

systemctl enable  zookeeper

添加zookeeper 环境变量

vim /etc/profile

#追加zookeeper在尾部  :/opt/mesosphere/zookeeper/bin

。。。。略。。。

export PATH=/mysql/bin:/usr/local/sbin:/usr/local/bin:/usr/sbin:/usr/bin:/root/bin:/opt/mesosphere/zookeeper/bin

。。。。略。。。。

指向是环境变量生效

source /etc/profile

故障排查解决:

添加zookeeper配置软连接,解决执行zkServer.sh 报错问题:

ln -s /etc/zookeeper/conf/ /opt/mesosphere/zookeeper/

不添加次软连接会报错:内容如下:

Using config: /opt/mesosphere/zookeeper/bin/../etc/zookeeper/zoo.cfg

grep: /opt/mesosphere/zookeeper/bin/../etc/zookeeper/zoo.cfg: No such file or directory

mkdir: cannot create directory ‘’: No such file or directory

grep: /opt/mesosphere/zookeeper/bin/../etc/zookeeper/zoo.cfg: No such file or directory

grep: /opt/mesosphere/zookeeper/bin/../etc/zookeeper/zoo.cfg: No such file or directory

4:验证

(1)

echo ruok|nc 127.0.0.1 2181

imok

(2) 环境变量添加后,输入zk 按tab 键可以补出相应的命令

zkServer.sh status

JMX enabled by default

Using config: /etc/zookeeper/conf/zoo.cfg

Mode: follower

5:按需可以将修改后的配置文件同步到zookeeper集群其它主机,然后修改ID信息;

传输环境变量文件:

for ip in $(cat /workspace/mesoslist);do echo ------$ip-----;rsync -avp  /etc/profile [email protected]$ip:/etc/;done

是环境变量生效,检查节点状态:

for ip in $(cat /workspace/mesoslist);do echo ------$ip-----;ssh [email protected]$ip "source /etc/profile && zkServer.sh status";done

查看服务监听端口:

[[email protected] conf]# netstat -tunlp

Active Internet connections (only servers)

Proto Recv-Q Send-Q Local Address           Foreign Address         State       PID/Program name

tcp6       0      0 :::2181                 :::*                    LISTEN      12975/java

6:修改zookeeper 输出日志文件位置

如果不做修改,默认zookeeper的日志输出信息都打印到了zookeeper.out文件中,这样输出路径和大小没法控制,因为日志文件没有轮转。所以需要修改日志输出方式。具体操作如下:

1、修改$ZOOKEEPER_HOME/bin目录下的zkEnv.sh文件,ZOO_LOG_DIR指定想要输出到哪个目录,ZOO_LOG4J_PROP,指定INFO,ROLLINGFILE的日志APPENDER.

2、建立日志输出文件夹

mkdir -p /var/log/zookeeper

chmod 755 /var/log/zookeeper

vim +57 /opt/mesosphere/zookeeper/bin/zkEnv.sh

55 then

56 #    ZOO_LOG_DIR="."

57     ZOO_LOG_DIR="/var/log/zookeeper"     #指定想要输出到哪个目录

58 fi

59

60 if [ "x${ZOO_LOG4J_PROP}" = "x" ]

61 then

62 #    ZOO_LOG4J_PROP="INFO,CONSOLE"

63     ZOO_LOG4J_PROP="INFO,ROLLINGFILE"    #ROLLINGFILE的日志APPENDER.

64 fi

65

4、修改$ZOOKEEPER_HOME/conf/log4j.properties文件的:zookeeper.root.logger的值与前一个文件的ZOO_LOG4J_PROP 保持一致,该日志配置是以日志文件大小轮转的,如果想要按照天轮转,可以修改为DaliyRollingFileAppender.

[[email protected] conf]# vim /etc/zookeeper/conf/log4j.properties

1 # Define some default values that can be overridden by system properties

2 zookeeper.root.logger=INFO, ROLLINGFILE      #值与前一个文件的ZOO_LOG4J_PROP

3 zookeeper.console.threshold=INFO

.....略......

49 #

50 # Add TRACEFILE to rootLogger to get log file output

51 #    Log DEBUG level and above messages to a log file

52 #log4j.appender.TRACEFILE=org.apache.log4j.FileAppender

53 log4j.appender.TRACEFILE=org.apache.log4j.RollingFileAppender      #如果想要按照天轮转,可以修改为DaliyRollingFileAppender

54 log4j.appender.TRACEFILE.Threshold=TRACE

55 log4j.appender.TRACEFILE.File=${zookeeper.tracelog.dir}/${zookeeper.tracelog.file}

56

5、配置文件修改完成,重启服务;

service zookeeper restart

6、查看日志,日志输出到修改后位置:

[[email protected] conf]# tailf /var/log/zookeeper/zookeeper.log

2016-03-22 16:27:23,704 [myid:2] - INFO  [QuorumPeer[myid=2]/0:0:0:0:0:0:0:0:2181:[email protected]] - Server environment:os.name=Linux

2016-03-22 16:27:23,706 [myid:2] - INFO  [QuorumPeer[myid=2]/0:0:0:0:0:0:0:0:2181:ZooKeeperSe

7、将修改后的配置文件,可以copy到其它节点

scp zkEnv.sh  172.16.7.13:/opt/mesosphere/zookeeper/bin/

scp /etc/zookeeper/conf/log4j.properties  172.16.7.13:/etc/zookeeper/conf/

###############################################################

Mesos 集群添加 ZooKeeper 信息配置

###############################################################

需要配置zookeeper的地址,写进/etc/mesos/zk ,详细如下:

cat << EOF >/etc/mesos/zk

zk://ctn-7-12.ptmind.com:2181,ctn-7-13.ptmind.com:2181,ctn-7-14.ptmind.com:2181/mesos

EOF

配置mesos-master,需要配置为master的节点都要配置。

mesos 集群安装部署规划、准备(1)

mesos 集群安装部署zookeeper(2)

mesos 集群安装部署mesos-master(3)

mesos 集群安装部署marathon(4)

mesos 集群安装部署chronos(5)

mesos 集群安装部署mesos-slave(6)

mesos 集群安装部署mesos-dns(7)

mesos 集群基础功能测试(8)

mesos 集群清理(9)

时间: 2024-07-30 00:49:33

mesos 集群安装部署zookeeper(2)的相关文章

mesos 集群安装部署规划、准备(1)

一:简介 Mesos诞生于UC Berkeley的一个研究项目,现已成为Apache Incubator中的项目.Mesos计算框架一个集群管理器,提供了有效的.跨分布式应用或框架的资源隔离和共享,可以运行Hadoop.MPI.Hypertable.Spark.使用ZooKeeper实现容错复制,使用Linux Containers来隔离任务,支持多种资源计划分配. 1: 总体架构 Apache Mesos由四个组件组成,分别是Mesos-master,mesos-slave,framework

mesos 集群安装部署mesos-master(3)

############################################################### Mesos 集群master配置 ############################################################### 1:部署环境介绍: 服务器IP地址主机名安装服务 172.16.7.11ctn-7-11.ptmind.com mesos-master 172.16.7.12ctn-7-12.ptmind.com mesos

mesos 集群安装部署marathon(4)

############################################################### 配置 marathon 服务 ############################################################### Marathon:marathon是一个mesos框架,能够支持运行长服务,比如web应用等.是集群的分布式Init.d,能够原样运行任何Linux二进制发布版本,如Tomcat Play等等,可以集群的多进程管理

mesos 集群安装部署chronos(5)

############################################################### chronos 安装部署 ############################################################### Chronos 是一个具备容错特性的作业调度器,可处理依赖性和基于 ISO8601 的调度.Chronos 是由 Airbnb 公司推出的用来替代 cron 的开源产品.你可以用它来对作业进行编排,支持使用 Mesos

mesos 集群安装部署mesos-slave(6)

############################################################### Slave节点安装配置 ############################################################### 1:部署环境介绍: 服务器IP地址主机名安装服务 172.16.7.12ctn-7-12.ptmind.com mesos-slave 172.16.7.13ctn-7-13.ptmind.com mesos-slave

mesos 集群安装部署mesos-dns(7)

############################################################### mesos-dns ############################################################### http://www.zoues.com/index.php/2016/01/13/mesos-dns-1/ https://open.mesosphere.com/advanced-course/building-and-

Zookeeper集群安装部署

 zookeeper集群: zookeeper作为一个开源的分布式应用协调系统,已经用到了许多分布式项目中,用来状态同步服务.集群管理.分布式应用配置项的管理等工作. ZooKeeper的工作模式有三种:单机模式.集群模式.伪集群模式. 单机模式:Zookeeper只运行在一台服务器上,适合测试用: 伪集群模式:就是在一台机器上运行多个Zookeeper 实例: 集群模式:运行于一个至少有三个节点以上集群中,适合生产环境; Zookkeeper 集群中有三种角色,leader -主节点 .fol

Storm笔记整理(三):Storm集群安装部署与Topology作业提交

[TOC] Storm分布式集群安装部署 概述 Storm集群表面类似Hadoop集群.但在Hadoop上你运行的是"MapReduce jobs",在Storm上你运行的是"topologies"."Jobs"和"topologies"是大不同的,一个关键不同是一个MapReduce的Job最终会结束,而一个topology永远处理消息(或直到你kill它). Storm集群有两种节点:控制(master)节点和工作者(wo

Mysql上的RAC:Percona XtraDB Cluster负载均衡集群安装部署手册

 Percona XtraDB Cluster安装部署手册 引言 编写目的 编写此文档,供PerconaXtraDB Cluster部署时使用. 预期读者 系统维护人员及实施人员. 编制依据及参考资料 目标 通过阅读该手册,让读者明确PerconaXtraDB Cluster的安装.配置和维护情况,为后续数据库运维工作提供指导. 应用部署方案 环境准备 服务器列表 序号 IP 用途 HOSTNAME 操作系统 1 192.168.0.7 Percona XtraDB Cluster RedHat