hadoop的伪分布

cd /hoperun

ln -s hadoop-0.20.2 hadoop

ln -s jdk1.6.0_21 jdk

vi /hadoop/conf/hadoop-env.sh

export JAVA_HOME=/hoperun/jdk

vi /hadoop/conf/core-site.xml

<property>

<name>fs.default.name</name>

<value>hdfs://localhost:9000</value>

</property>

vi /hadoop/conf/hdfs-site.xml

<property>

<name>dfs.replication</name>

<value>1</value>

</property>

vi /hadoop/conf/mapred-site.xml

<property>

<name>mapred.job.tracker</name>

<value>localhost:9001</value>

</property>

cd;ssh-keygen

cp .ssh/id_rsa.pub .ssh/authorized_keys

ssh localhost

cd /hoperun/hadoop

bin/hadoop fs -format

bin/start-all.sh

/hoperun/jdk/bin/jps


6810 TaskTracker

6849 Jps

6443 NameNode

6545 DataNode

6641 SecondaryNameNode

6713 JobTracker

netstat -nltp | grep java


tcp    0   0 ::ffff:127.0.0.1:9000    :::*      LISTEN      6443/java

tcp    0   0 ::ffff:127.0.0.1:9001    :::*      LISTEN      6713/java

=============================

时间: 2024-08-25 02:28:23

hadoop的伪分布的相关文章

大数据学习:Hadoop中伪分布的搭建

<注:我们假设使用的是一个没有进行过任何配置的Linux系统,下面我们开始进行伪分布的搭建> 1.设置IP 地址 设置完成后,执行命令:service iptables restart 验证:         ifconfig 2. 关闭防火墙 执行命令        service iptables stop 验证:                 service iptables status 3.关闭防火墙的自动运行 执行命令        chkconfig iptables off

hadoop安装 伪分布

伪分布hadoop 安装总结 准备,在配置中hadoop用的9000端口,如果有其它软件用着这个端口,建议更换后再进行下面配置,以避免出现错误.比如php-fpm经常使用9000端口. 一.下载jdk下载linux 64 8u73-64位版本tar zxvf jdk-8u74-linux-x64.tar.gz -C /usr/local/ 二.下载hadooptar zxvf hadoop-2.6.4.tar.gz -C /usr/local/ 配置项: vim /etc/profile.d/h

搭建Hadoop的伪分布环境

搭建伪分布环境 上传hadoop2.7.0编译后的包并解压到/zzy目录下 mkdir /zzy 解压 tar -zxvf hadoop.2.7.0.tar.gz -C /zzy ? ? 配置hadoop 注意:hadoop2.x的配置文件$HADOOP_HOME/etc/hadoop ????伪分布式需要修改5个配置文件 第一个:hadoop-env.sh ????????vim hadoop-env.sh ????????#第27行 ????????export JAVA_HOME=/usr

一:搭建Hadoop的伪分布环境*

1.上传hadoop2.7.0编译后的包并解压到/hadoop2目录下  mkdir /hadoop2 解压 tar  -zxvf  hadoop.2.7.0.tar.gz -C /hadoop2 2.解压后hadoop2的目录结构 bin Hadoop最基本的管理脚本和使用脚本,这些脚本是sbin目录下管理脚本的基础实现,用户可以用这些脚本管理和使用hadoop etc hadoop配置文件所在的目录,包括core-site.xml.hdfs-site.xml.mapred-site.xml等

吴超老师课程---hadoop的伪分布安装

1.1 设置ip地址    执行命令    service network restart    验证:         ifconfig1.2 关闭防火墙    执行命令    service iptables stop    验证:        service iptables status1.3关闭防火墙的自动运行    执行命令    chkconfig iptables off    验证:        chkconfig --list | grep iptables1.4 设置主

Hadoop之——伪分布安装

转载请注明出处:http://blog.csdn.net/l1028386804/article/details/45769499 1.1 设置ip地址 执行命令    service network restart 验证:    ifconfig 1.2 关闭防火墙 执行命令    service iptables stop 验证:        service iptables status 1.3    关闭防火墙的自动运行 执行命令    chkconfig iptables off 验

hadoop之伪分布搭建环境

1. 修改主机名字  临时修改(session): sudo hostname orcll /etc/sysconfig/network -> HOSTNAME=hadoop0 #localhost.localdomain    shutdown -r now 2.将hostname与ip绑定 添加/etc/hosts文件 ping hadoop0 3.关闭防火墙 1 service iptables stop 2 chkconfig iptables off 3 -- service ipta

Hadoop伪分布安装

1.hadoop的伪分布安装 1.1 设置ip地址 执行命令 service network restart 验证: ifconfig 1.2 关闭防火墙 执行命令 service iptables stop 验证: service iptables status 1.3 关闭防火墙的自动运行(在上面的那一步即使我们关闭了防火墙,还是在有些情况下,防火墙会自动起来,那些情况就是下面的命令的结果为on的时候) 执行命令 chkconfig iptables off 验证: chkconfig --

hadoop伪分布安装步骤

2.hadoop的伪分布的安装步骤: 1.1设置静态IP 在centos桌面右上角图标,右键修改 重启网卡,执行命令service network restart 验证:ifconfig 1.2 修改主机名 <1> 修改当前会话中的主机名,执行命令hostname hadoop <2> 修改配置文件中的主机名,执行命令 vi /etc/sysconfig/network 验证:重启机器 1.3 把hostname和ip绑定 执行命令 vi /etc/hosts 增加一行192.16