CDH 6.0.1 集群搭建「After install」

集群搭建完成之后其实还有很多配置工作要做，这里我列举一些我去做的一些。

首先是去把 zk 的角色重新分配一下，不知道是不是我在配置的时候遗漏了什么在启动之后就有报警说目前只能检查到一个节点。去将 zk 角色调整到三个节点。

上一张目前的角色图

下面我将分别列出各应用的各个简写代表的意义：

Hbase:

M: Master | RS: RagionServer

HDFS:

B: Balance | DN: DataNode | FC: Failover Controller | JN: JournalNode | NN: NameNode

Hive:

G: Gateway | HMS: Hive Master Server | HS2: Hive Server 2

Hue:

LB: LoadBalancer | HS: HueServer

Impala:

ICS: Impala Catalog Server | ISS: StateStore | ID: Daemon

Oozie:

OS: Oozie Server

Spark:

G: Spark Gateway | HS: History Server

YARN:

JHS: JobHistory Server | RM: ResourceManager | NM: NodeManager

ZK:

S: Zk Server

CloueraManager:

AP: Alert Publish | ES: EventServer | HM: HostMonitor | SM: ServiceMonitor

Reference:

https://www.cloudera.com/documentation/enterprise/6/6.0/topics/after_install.html

https://www.cloudera.com/documentation/enterprise/6/6.0/topics/cm_ig_ports_cm.html#cm_cn_ports 集群端口详情

原文地址：https://www.cnblogs.com/piperck/p/9957272.html

时间： 2024-11-09 03:04:35

CDH 6.0.1 集群搭建「After install」的相关文章

CDH 6.0.1 集群 prepare 以及一些需要注意的地方

从这一篇文章开始会有三篇文章依次介绍集群搭建「Before install」「process」「after install」继上一篇使用 docker 部署单机 CDH 的文章,当我们使用 docker 评估完相关组件和一些功能之后,接下来就是使用 CDH express 版本来搭建集群. 搭建之前应该关注一下手册看下还有哪些可以注意的地方参见官方 before your install https://www.cloudera.com/documentation/enterprise/

Hadoop-1.0.4集群搭建笔记

这篇文章介绍的是简单的配置Hadoop集群的方法,适合实验和小型项目用,正式运行的集群需要用更正规的方法和更详细的参数配置,不适合使用这篇文章. 安装 JDK 在终端输入 $ java -version 如果有反应,说明已安装过jdk.如果显示的信息里出现了类似OpenJDK的字样,如 java version "1.6.0_20" OpenJDK Runtime Environment (IcedTea6 1.9.2) (6b20-1.9.2-0ubuntu1~10.04.1) Op

Redis 4.0.1集群搭建

Redis 4.0.1集群搭建一.概述 Redis3.0版本之后支持Cluster. 1.1.redis cluster的现状目前redis支持的cluster特性: 1):节点自动发现 2):slave->master 选举,集群容错 3):Hot resharding:在线分片 4):进群管理:cluster xxx 5):基于配置(nodes-port.conf)的集群管理 6):ASK 转向/MOVED 转向机制. 1.2.redis cluster 架构 1)redis-clust

redis3.0.3集群搭建

redis3.0版本之后支持Cluster,具体介绍redis集群我就不多说,了解请看redis中文简介. 首先,直接访问redis.io官网,下载redis.tar.gz,现在版本3.0.3,我下面已经在虚拟机启动了两个linux来部署redis. 1. 下载和解包 cd /usr/local/ wget http://download.redis.io/releases/redis-3.0.3.tar.gz tar -zxvf redis-3.0.3.tar.gz mv redis-3.0.

Redis 3.0.2集群搭建以及相关问题汇总

Redis3 正式支持了 cluster,是为了解决构建redis集群时的诸多不便 (1)像操作单个redis一样操作key,不用操心key在哪个节点上(2)在线动态添加.删除redis节点,不用停止服务(3)根据节点性能,动态分配不同数量的key到不同redis节点 (4)每个节点都配有slave,并自动监测和切换 Redis3 cluster 中增加了一个重要概念: hash slot(哈希槽),共有16384个slotkey不是直接放入redis中了,而是放入slot中,再把slot放入r

java_redis3.0.3集群搭建

Redis4.0.10集群搭建

192.168.254.128192.168.254.129192.168.254.127注意事项安裝 GCC 编译工具不然会有编译不过的问题yum install -y gcc g++ gcc-c++ make升级所有的包,防止出现版本过久不兼容问题yum -y update 环境准备安装ruby: 关闭防火墙节点之前需要开放指定端口,为了方便,生产不要禁用centos 6.xservice iptables stop # 关闭命令:centos 7.xsystemctl stop fir

Linux rhel7.0 pacemaker集群搭建和配置

一集群环境介绍一 Linux 集群发展史高可用集群的层次结构1 消息/基础架构 corosync 2 成员关系 :监听心跳信息,并进行处理成员关系和计算成员关系的票数等信息3 资源管理 VIP 磁盘文件系统 CRM (群集资源管理器)等,有些策略引擎(有些资源是放置在同一个节点和其依赖关系) 和资源的分配调度有关 4 资源 : 对特定资源的操作,通过一定的脚本实现pacemaker 群集资源管理器corosync 消息/基础架构管理工具 crmsh : crm (cluster res

redis 3.0.2 集群搭建

一.环境 ubuntu 14.04 LTS. redis 3.0.2 二.redis cluster 搭建 (单机测试) 1.redis的安装 wget http://download.redis.io/releases/redis-3.0.2.tar.gz tar zxvf redis-3.0.2.tar.gz cd redis-3.0.2/ make make install 2.安装ruby sudo apt-get install ruby sudo gem install redis

CDH 6.0.1 集群搭建 「After install」

CDH 6.0.1 集群搭建 「After install」的相关文章

CDH 6.0.1 集群搭建「After install」

CDH 6.0.1 集群搭建「After install」的相关文章