Hadoop,Zookeeper,Hbase,Hive,Spark,Kafka,CDH，impala，azkaban，oozie，hue中webui常用端口

Hadoop：

50070：HDFS WEB UI端口 
8020 ： 高可用的HDFS RPC端口 
9000 ： 非高可用的HDFS RPC端口 
8088 ： Yarn 的WEB UI 接口 
8485 ： JournalNode 的RPC端口 
8019 ： ZKFC端口 
Zookeeper: 
2181 ： 客户端连接zookeeper的端口 
2888 ： zookeeper集群内通讯使用，Leader监听此端口 
3888 ： zookeeper端口 用于选举leader 
Hbase: 
60010：Hbase的master的WEB UI端口 
60030：Hbase的regionServer的WEB UI 管理端口 
Hive: 
9083 : metastore服务默认监听端口 
10000：Hive 的JDBC端口 
Spark： 
7077 ： spark 的master与worker进行通讯的端口 standalone集群提交Application的端口 
8080 ： master的WEB UI端口 资源调度 
8081 ： worker的WEB UI 端口 资源调度 
4040 ： Driver的WEB UI 端口 任务调度 
18080：Spark History Server的WEB UI 端口 
Kafka： 
9092： Kafka集群节点之间通信的RPC端口 
Redis： 
6379： Redis服务端口 
CDH： 
7180： Cloudera Manager WebUI端口 
7182： Cloudera Manager Server 与 Agent 通讯端口 
HUE： 
8888： Hue WebUI 端口

Azkaban：8443

oozie：11000

impala的监控：

cataLog：25010

stataStore：25020

原文地址：https://www.cnblogs.com/ninglinglong/p/12398952.html

时间： 2024-10-27 21:41:39

Hadoop,Zookeeper,Hbase,Hive,Spark,Kafka,CDH，impala，azkaban，oozie，hue中webui常用端口的相关文章

hadoop+zookeeper+hbase 开机自启动

hadoop2.7.3+zookeeper3.4.9+hbase1.2.6 我想让它们实现开机自启动,需要2个脚本实现.h1.sh 和h2.sh. #!/bin/bash #discribe: 实现hadoop+zookeeper+hbase  开机自启动 #对我非常有用的链接:ssh 到其他机器,实现zk启动.https://zhidao.baidu.com/question/1447196109490350780.html #while true 我会用,但不熟. #有小人挡路,不要怕.也不

大数据学习系列之七 ----- Hadoop+Spark+Zookeeper+HBase+Hive集群搭建 图文详解

引言 在之前的大数据学习系列中,搭建了Hadoop+Spark+HBase+Hive 环境以及一些测试.其实要说的话,我开始学习大数据的时候,搭建的就是集群,并不是单机模式和伪分布式.至于为什么先写单机的搭建,是因为作为个人学习的话,单机已足以,好吧,说实话是自己的电脑不行,使用虚拟机实在太卡了... 整个的集群搭建是在公司的测试服务搭建的,在搭建的时候遇到各种各样的坑,当然也收获颇多.在成功搭建大数据集群之后,零零散散的做了写笔记,然后重新将这些笔记整理了下来.于是就有了本篇博文. 其实我在搭

大数据学习系列之七 ----- Hadoop+Spark+Zookeeper+HBase+Hive集

引言 在之前的大数据学习系列中,搭建了Hadoop+Spark+HBase+Hive 环境以及一些测试.其实要说的话,我开始学习大数据的时候,搭建的就是集群,并不是单机模式和伪分布式.至于为什么先写单机的搭建,是因为作为个人学习的话,单机已足以,好吧,说实话是自己的电脑不行,使用虚拟机实在太卡了... 整个的集群搭建是在公司的测试服务搭建的,在搭建的时候遇到各种各样的坑,当然也收获颇多.在成功搭建大数据集群之后,零零散散的做了写笔记,然后重新将这些笔记整理了下来.于是就有了本篇博文. 其实我在搭

hadoop-ha+zookeeper+hbase+hive+sqoop+flume+kafka+spark集群安装

创建3台虚拟机 主机为桌面版 其他为迷你版本 ******************************常用命令.进程名称****************************启动集群命令: start-all.sh启动zookeeper: zkServer.sh start 启动journalnode: hadoop-daemon.sh start journalnode启动namenode: hadoop-daemon.sh --script hdfs start namenode启动z

Spark集群框架搭建【VM15+CentOS7+Hadoop+Scala+Spark+Zookeeper+HBase+Hive】

目录 1 目的 2 准备工作 3 安装过程 3.1 在虚拟机中安装CentOS7 3.1.1 虚拟机设置 3.1.2 安装Linux系统 3.2 JAVA环境 3.2.1 卸载Linux自带的jdk 3.2.2 下载并安装最新版本的jdk 3.2.3 环境变量设置 3.3 SSH免密登陆 3.3.1 准备工作 3.3.2 设置免密登陆 3.4 Hadoop2.7.2安装及集群配置 3.4.1 Hadoop安装 3.4.2 伪分布式集群配置 3.4.3 启动hadoop 3.5 Spark安装及环

【Todo】【转载】全栈工程师-Hadoop, HBase, Hive, Spark

学习参考这篇文章: http://www.shareditor.com/blogshow/?blogId=96 机器学习.数据挖掘等各种大数据处理都离不开各种开源分布式系统, hadoop用于分布式存储和map-reduce计算, spark用于分布式机器学习, hive是分布式数据库, hbase是分布式kv系统, 看似互不相关的他们却都是基于相同的hdfs存储和yarn资源管理, 本文通过全套部署方法来让大家深入系统内部以充分理解分布式系统架构和他们之间的关系.

hadoop生态圈安装详解（hadoop+zookeeper+hbase+pig+hive）

目录 1.hadoop分布式安装 2.zookeeper分布式安装 3.hbase分布式安装 4.pig分布式安装 5.hive客户端安装

伪分布式安装Hadoop + zookeeper + hbase安装配置

一．  安装JDK,配置环境JAVA环境变量 exportJAVA_HOME=/home/jdk1.6.0_27 exportJRE_HOME=/home/jdk1.6.0_27/jre exportANT_HOME=/home/apache-ant-1.8.2 export CLASSPATH=.:$JAVA_HOME/lib:$JRE_HOME/lib:$CLASSPATH 二．  安装Hadoop-1.0.3 1.     下载hadoop文件,地址为:http://hadoop.apac

CentOS 7 伪分布式搭建 hadoop+zookeeper+hbase+opentsdb

一.前期准备 1.配置ip 进入文件编辑模式: vim /etc/sysconfig/network-scripts/ifcfg-ens192 原内容: TYPE=Ethernet PROXY_METHOD=none BROWSER_ONLY=no BOOTPROTO=dhcp DEFROUTE=yes IPV4_FAILURE_FATAL=no IPV6INIT=yes IPV6_AUTOCONF=yes IPV6_DEFROUTE=yes IPV6_FAILURE_FATAL=no IPV6