Hadoop配置第1节-JDK的安装

Hadoop配置-JDK的安装

总体目标:完成zookeeper+Hadoop+Hbase 整合平台搭建

进度:
1:集群网络属性配置
2:集群免密码登陆配置
3:JDK的安装
4:Zookeeper的安装
5:Hadoop普通集群模式的安装
6:Hbase普通模式的安装
7:Hadoop HA集群模式的安装

8:Hbase HA集群模式的安装

___________________________________________________________________________________________

实验环境:

环境:1.五台独立PC机或虚拟机
          2.主机之间有有效的网络连接
        3.每台主机内存2G以上,磁盘50G

4.所有主机上已安装CentOS 7.4_64操作系统

软件版本

选用JDK 8的131版本,软件包名jdk-8u131-linux-x64.tar.gz:

集群规划
将五台主机中的主机1和主机2作为主节点,主机3、主机4、主机5作为其它节点。

________________________________________________________________________________________________________

一、卸载原有JDK

1.1 卸载

命令:

#rpm -qa | grep java

#搜索所有当前系统中已经安装的JDK相关软件包

#rpm -qa | grep jdk

# rpm -e 软件包名

#依次删除所有之前搜索到的当前系统中已经安装的JDK相关软件包
# yum remove 软件名

#删除相关联的依赖软件包
注:集群中其它主机都要进行卸载操作。

二、安装配置JDK

2.1 安装

★ 该项的所有操作步骤使用专门用于集群的用户admin进行。
★ 此项只在一台主机操作,然后在下一步骤进行同步安装与配置。

首先,我们先新建一个存放Hadoop软件包的文件夹setups,然后把所有

相关包上传到setups目录内。

$mkdir ~/setups

#在admin用户家目录下创建一个存放软件包的
文件夹;

并把相关的安装包上传至此文件夹。

下载地址:

链接:点击打开链接 密码:euqr

使用 xFTP软件上传至 setups文件夹

命令:

$mkdir ~/java

#在家目录下创建用于存放JDK相关文件的目录

$cd ~/java

#进入该目录

$tar -xzf ~/setups/jdk-8u131-linux-x64.tar.gz

#将软件包解压解包到“java”目录下

2.2 配置环境变量

命令:

$vi ~/.bash_profile     #该文件位于admin用户家目录下

对配置文件进行修改,在文件末尾添加以下内容:

#javaenvironment
JAVA_HOME=/home/admin/java/jdk1.8.0_131                       
CLASSPATH=.:$JAVA_HOME/lib/tools.jar:$JAVA_HOME/lib/dt.jar
PATH=$JAVA_HOME/bin:$PATH
export JAVA_HOME CLASSPATH PATH

#该路径以JDK软件包实际解压解包的路径为准
#保证此项输入正确,否则可能会导致所有命令无法使用
#必须按照前面的定义顺序书写

$source ~/.bash_profile                      #使新配置的环境变量立即生效

$echo $JAVA_HOME

$echo $CLASSPATH

$echo $PATH

#查看新添加和修改的环境变量是否设置成功,以及环境变量的值是否正确。

$java -version

$javac -version
#验证JDK的安装配置是否成功

三、同步JDK安装和配置

将“java”目录和“.bash_profile”文件发给集群中所有其它主机,发送目标用户为集群专用用户admin,发送目标路径为“/home/admin”,即集群专用用户admin的家目录。

$scp -r ~/java ~/.bash_profile [email protected]:/home/admin

$scp -r ~/java ~/.bash_profile [email protected]:/home/admin

$scp -r ~/java ~/.bash_profile [email protected]:/home/admin

$scp -r ~/java ~/.bash_profile [email protected]:/home/admin

在集群中每台主机查看是否拷贝成功。

原文地址:https://www.cnblogs.com/lilongxin/p/9038995.html

时间: 2024-10-10 15:24:36

Hadoop配置第1节-JDK的安装的相关文章

跟老杨学java系列(五) JDK的安装与配置

跟老杨学java系列(五) JDK的安装与配置 提示:本节内容对于java入门是非常关键的,对于刚接触java的同学一定要认真学习,欢迎大家留言探讨技术问题.其他问题概不回复. (书接上回)上节课程我们简单介绍了java项目的开发过程及常用的开发工具,这节课我们详细讲解一下JDK的安装与配置.根据上一节的学习,我们知道编写完java代码后,需要先对java代码进行编译,然后再执行.而java程序的编译与执行都是通过JDK来完成的.所以做java开发,首先我们需要学会安装和配置JDK.下面我们就来

Win7环境下JDK的安装与配置

初学java,希望自己能够坚持一步一脚印的学习,打好基础,动手操作——致自己 一.了解java的历史及发展 1990年,sun公司预料嵌入式的发展,决定开发一种新的面向对象语言. 1996年,JDK 1.0版本包括:JRE(运行环境) :包括核心API.集成API.用户界面API.发布技术.java虚拟机JVM JDK(开发环境):javac(java程序的编译器) 1997年,JDK 1.1版本.新增JIT(及时编译编译器).传统的编译器是编译一条运行完后将其扔掉,而及时编译会将经常用到的指令

大数据开发Hadoop工程师-第一课 Java基本知识和JDK的安装配置

Java概述 Java的版本 Java为消费类智能电子产品而设计,但智能家电产品并没有像最初想象的那样拥有大的发展.跨平台是Java语言的核心优势,赶上最初互联网的发展,并随着互联网的发展而发展,建立了强大的生态体系,目前已经覆盖IT各行业的"第一大语言",是计算机界的"英语". JavaSE(J2SE)(Java2 Platform Standard Edition)(Java平台标准版) 标准版,定位在个人计算机上的应用.这个版本是Java平台的核心,主要用于桌

Hadoop自学系列集(二) ---- CentOS下安装JDK

上篇我们讲述了如何使用VMware安装CentOS系统,接下来就看如何安装我们最为熟悉的jdk吧!安装前先看看系统上有没有安装过jdk,输入java -version,如果查询出了其他版本的jdk版本,就先删除了,笔者这里使用jdk1.6.说开始就开始,下面开始说明安装步骤吧. 1.我们去Oracle获取jdk1.6安装文件,地址分享:http://download.oracle.com/otn/java/jdk/6u45-b06/jdk-6u45-linux-i586.bin,这地址不能直接进

hadoop 部署 之jdk的安装

第一步 jdk的安装 1.将下载好的jdk放在要安装的目录下(我的目录是:/root/hadoop/opt/cloud,使用WinSCP直接拖到目标目录) 2.在目标目录解压 sudo tar xvf jdk-7u45-linux-x64.tar.gz 3.配置环境变量 这里我使用的是在命令的目录下使用命令: [[email protected] cloud]# /bin/vi /etc/profile 使用该命令的好处是:即使配置的环境命令有问题,配错误了,也能够再次打开配置环境变量的文件,进

CentOS7上Hadoop 2.6.0集群的安装与配置

转载请注明出处:http://blog.csdn.net/l1028386804/article/details/45740791 1.CentOS7安装 (1)最小化安装CentOS7 (2)配置网络连接 vi/etc/sysconfig/network-scripts/ifcfg-eth0 修改:BOOTPROTO=static ONBOOT=yes 添加:IPADDR= ipaddress(ip地址) NETMASK=subnetmask(子网掩码) GATEWAY=gateway(网关)

Hadoop配置安装手册

本次Hadoop集群安装一共使用四个节点,各节点IP如下: Master 172.22.120.191 Slave1 172.22.120.192 Slave2 172.22.120.193 Slave3 172.22.120.193 系统版本CentOS 6.2L JDK版本:1.7 Hadoop版本:1.1.2 完成四个节点系统安装后,开始安装hadoop: 1. 配置hosts文件 2. 配置SSH免密码登录 3. 安装JDK 4. 下载并解压hadoop 5. 配置namenode,修改

Hadoop的学习前奏——在Linux上安装与配置Hadoop

前言: 笔者目前是在做Android开发,又是在一个信息安全的公司.公司的主要是做在虚拟机上运行的产品,又涉猎云计算,心想是要去搞一下云计算.自我感觉移动互联网 + 云计算 + 信息安全会是一个很好的方向,于是投身其中.因为是Java出身,所以自然而然选择了Hadoop. 笔者系统环境: Linux:  CentOS release 6.5 (Final) JDK:    java version "1.7.0_75" OpenJDK Runtime Environment (rhel

hadoop伪分布下的sqoop基本安装配置

1.环境工具版本介绍 centos6.4(Final) jdk-7u60-linux-i586.gz hadoop-1.1.2.tar.gz sqoop-1.4.3.bin__hadoop-1.0.0.tar.gz mysql-5.6.11.tar.gz 2.安装centos 参照网上Ultra的使用制作了U盘启动,直接格式化安装系统,具体做法网上资料很多,但注意最好不要在安装时改主机名称,也最好不要利用图形化界面添加用户,因为我出过问题重做了系统,这些terminal中都能完成的 3.安装jd