hadoop 8088无法访问

http://bbs.csdn.net/topics/390891983

yarn-site.xml

<property>

<name>yarn.resourcemanager.address</name>

<value>192.168.X.X:8032</value>

</property>

<property>

<name>yarn.resourcemanager.scheduler.address</name>

<value>192.168.X.X:8030</value>

</property>

<property>

<name>yarn.resourcemanager.resource-tracker.address</name>

<value>192.168.X.X:8031</value>

</property>

<property>

<name>yarn.resourcemanager.admin.address</name>

<value>192.168.X.X:8033</value>

</property>

<property>

<name>yarn.resourcemanager.webapp.address</name>

<value>192.168.X.X:8088</value>

</property>

时间: 2024-11-03 22:18:55

hadoop 8088无法访问的相关文章

使用Hadoop ACL 控制访问权限

使用Hadoop ACL 控制访问权限 一.HDFS访问控制 hdfs-site.xml设置启动acl <property> <name>dfs.permissions.enabled</name> <value>true</value> </property> <property> <name>dfs.namenode.acls.enabled</name> <value>true&l

hadoop 8088 看不到mapreduce 任务的执行状态

进到8088页面后,怎么看不到mapreudce的执行状态,有哪里需要配置的 解决办法: 在$HADOOP_HOME/conf/mapred-site.xml 在原来的配置文件基础之上添加: <property>                     <name>mapreduce.framework.name</name>                 <value>yarn</value>         </property>

用Shell脚本过滤Hadoop中不能访问的节点

最近使用的一个集群hp1,因为维护集群的人不给力,节点总是过一段时间就掉一两个.今天发现重启hadoop时,HDFS已经进入保护模式了. 决定把slaves节点中的无法访问的节点全部过滤掉,所以写了一个小脚本,在这里记录一下,以后方便直接拿来使用. PS:用C Shell编写的 代码如下: #!/bin/csh if ( $#argv < 1 ) then echo "Usage: $0 host_file" exit 1 endif set NODES = `cat $1` f

二、基于hadoop的nginx访问日志分析---计算日pv

代码: # pv_day.py#!/usr/bin/env python # coding=utf-8 from mrjob.job import MRJob from nginx_accesslog_parser import NginxLineParser class PvDay(MRJob): nginx_line_parser = NginxLineParser() def mapper(self, _, line): self.nginx_line_parser.parse(line)

hadoop 50070 无法访问问题解决汇总

遇到这个其实不难解决! 解决办法1: [[email protected] hadoop]# vi /etc/selinux/config 改为 SELINUX=disabled 解决办法2: 查看你的$HADOOP_HOME/etc/hadoop下的core-site.xml和hdfs-site.xml是否配置好 解决办法3:必须在hadoop-env.sh文件中设置Java的绝对路径 解决办法4:是否关闭linux系统的防火墙 解决办法5:查看你windows里本地的配置文件的IP和主机名映

五、基于hadoop的nginx访问日志分析--userAgent和spider

useragent: 代码(不包含蜘蛛): # cat top_10_useragent.py #!/usr/bin/env python # coding=utf-8 from mrjob.job import MRJob from mrjob.step import MRStep from nginx_accesslog_parser import NginxLineParser import heapq class UserAgent(MRJob): nginx_line_parser =

三、基于hadoop的nginx访问日志分析--计算时刻pv

代码: # cat pv_hour.py #!/usr/bin/env python # coding=utf-8 from mrjob.job import MRJob from nginx_accesslog_parser import NginxLineParser class PvDay(MRJob): nginx_line_parser = NginxLineParser() def mapper(self, _, line): self.nginx_line_parser.parse

外网无法访问VM中的hadoop yarn的8088端口,网页打开不了

1.检查是否正确的启动了resourcemanager服务 若是没有启动,请检查yarn-site-xml配置 2.若是启动了 1.检查客户机和虚拟机之间是否能够相互ping通 2.检查虚拟机防火墙是否关闭 3.排查 1.首先,各个虚拟机和客户端之前都能ping通,虚拟机都能上外网,说明网络没有问题. 2.各个虚拟机自己的防火墙已经关闭. 3.在外网可以连接22端口和50070端口 4.解决 通过命令:netstat -tpnl | grep java 发现 那么通过在本机通过127.0.0.1

监控和审计IBM InfoSphere BigInsights和Cloudera Hadoop的访问权限

http://www.ithov.com/server/124456.shtml 您也将学习一个仅适用于 IBM InfoSphere BigInsights 的快速启动监控实现. 大数据骚动主要集中在支持极限容量.速度和多样性的基础架构和该基础架构支持的实时分析功能中.虽然像 Hadoop 这样的大数据环境是相对较新的,但事实是在大数据环境中数据安全问题的关键是预先解决.哪里有数据,哪里就有可能存在隐私泄密.非授权访问或特权用户的不恰当访问. 整个大数据环境和更多传统的大数据管理架构中应该执行