1、分布式环境搭建
采用4 台安装Linux 环境的机器来构建一个小规模的分布式集群。
其中有一台机器是Master 节点,即名称节点,另外三台是Slaver 节点,即数据
节点。这四台机器彼此间通过路由器相连,从而实验相互通信以及数据传输。它们都
可以通过路由器访问Internet,实验网页文档的采集。
2、集群机器详细信息
2.1 Master 服务器
名称详细信息
机器名称Master.Hadoop
机器IP 地址192.168.1.2
最高用户名称(Name) root
最用用户密码(PWD) hadoop(全小写)
一般用户名称(Name) hadoop(全小写)
一般用户密码(PWD) hadoop(全小写)
更多内容http://www.yfteach.com
企业真实项目实时在线授课1
2.2 Slave1 服务器
名称详细信息
机器名称Slave1.Hadoop
机器IP 地址192.168.1.3
最高用户名称(Name) root
最用用户密码(PWD) hadoop(全小写)
一般用户名称(Name) hadoop(全小写)
一般用户密码(PWD) hadoop(全小写)
2.3 Slave2 服务器
名称详细信息
机器名称Slave2.Hadoop
机器IP 地址192.168.1.4
最高用户名称(Name) root
最用用户密码(PWD) hadoop(全小写)
一般用户名称(Name) hadoop(全小写)
一般用户密码(PWD) hadoop(全小写)
2.4 Slave3 服务器
名称详细信息
机器名称Slave3.Hadoop
机器IP 地址192.168.1.5
最高用户名称(Name) root
最用用户密码(PWD) hadoop(全小写)
一般用户名称(Name) hadoop(全小写)
一般用户密码(PWD) hadoop(全小写)
备注:
添加新用户命令:useradd;修改新用户密码:passwd 用户名
退出当前用户:exit; 登录root 用户:su –
3.1 Hadoop 工作集群
该Hadoop 集群机器是学习和研究之用,上面运行着已经搭建好的的Hadoop 平台以及
运行着一些实际程序。
图3.1-1 Hadoop 工作集群部署图(1)
图3.1-2 Hadoop 工作集群部署图(2)
上面从两个角度来分别观察Hadoop 集群部署,作为Hadoop 集群的Master 节点,用的
更多内容http://www.yfteach.com
企业真实项目实时在线授课3
是机器较为不错的新Dell,而三台Slave 机器则是实验室淘汰的旧Lenovo,用一个小路
由器他们组成了一个局域网。
图3.1-3 路由器特写
3.2 Hadoop 实验集群
为了方便新成员练习Hadoop 技术,又防止在实际Hadoop 集群上破坏已运行的程序,
故另外弄了两台旧Lenovo 电脑组成:一个“主——TMaster”;一个“辅——TSlave”。
图3.2-1 Hadoop 实验集群部署
上面就是实验室Hadoop 集群的样子,虽然很简陋,但足够学习用了。