Ubuntu-64位下hadoop安装

本文是hadoop学习系列的第一篇文章
本文将介绍Ubuntu环境下JDK的安装以及hadoop的安装
阅读本文需要有一定Linux命令基础

前期准备

安装环境：ubuntu-16.04.3-desktop 64bit
所需软件：jdk-8u161-linux-x64 ?? hadoop-3.0.0

JDK与hadoop的下载

下载上面的JDK安装包至~/Downloads目录，切换至该目录并解压缩。
下载上面的hadoop安装包至~/Downloads目录，切换至该目录并解压缩。

也可以通过以下方式下载：

wget http://download.oracle.com/otn-pub/java/jdk/8u161-b12/2f38c3b165be4555a1fa6e98c45e0808/jdk-8u161-linux-x64.tar.gz --no-check-certificate --no-cookies --header "Cookie: oraclelicense=accept-securebackup-cookie"

wget http://mirrors.hust.edu.cn/apache/hadoop/common/hadoop-3.0.1/hadoop-3.0.1.tar.gz

123	cd ~/Downloadstar -xzvf jdk1.8.0_161.tar.gztar -xzvf hadoop-3.0.0.tar.gz

为了方便管理，在/usr目录下新建一个目录soft，在Download目录下将解压后的目录移动到soft目录下。

123	mkdir softmv jdk1.8.0_161 /usr/softmv hadoop-3.0.0 /usr/soft

请不要使用apt-get install 安装JDK！

JDK与hadoop的环境配置

在命令行下切换目录至/etc/下，打开environment文件，并添加以下配置信息。

12	cd /etc/vim environment

1234	JAVA_HOME=/usr/soft/jdk1.8.0_161HADOOP_INSTALL=/usr/soft/hadoop-3.0.0 :/usr/soft/jdk1.8.0_161/bin:/usr/soft/hadoop-3.0.0/bin:/usr/soft/hadoop-3.0.0/sbin

配置好信息之后使用以下命令使配置生效。

1	source environment

测试配置

输入以下命令进行测试是否配置成功。

1234	# 测试java环境变量配置java -version# 测试hadoop环境变量配置hadoop version

输出相应版本信息即配置正确，hadoop测试可能会出现error，重启Ubuntu即可。

安装过程中可能会遇到各种权限问题，需要修改相应文件访问权限，或者使用root用户操作(不推荐)。

原文:大专栏 Ubuntu-64位下hadoop安装

原文地址：https://www.cnblogs.com/wangziqiang123/p/11652510.html

时间： 2024-10-09 23:25:31

Ubuntu-64位下hadoop安装的相关文章

ubuntu 64位下安装wps

首先,去官网下载wps.地址:http://community.wps.cn/download/ 然后切换到下载目录,执行如下命令: $ sudo apt-get install ia32-libs* 然后执行安装命令: $ sudo dpkg -i --force-architecture wps-office_8.1.0.3724~b1p2_i386.deb 会报如下错误: Selecting previously unselected package wps-office. (Readin

vsftpd在Ubuntu 64位下的多用户多目录配置

研究了两天vsftpd,从网上找了很多资料,不是出这问题就是那问题,幸好终于解决了,下面贴出我的配置过程.不喜勿喷... 一.安装vsftpd sudo apt-get install vsftpd 安装完以后大致的目录介绍 /etc/vsftpd/vsftpd.conf 主配置文件 /usr/sbin/vsftpd Vsftpd的主程序 /etc/rc.d/init.d/vsftpd 启动脚本 /etc/pam.d/vsftpd PAM认证文件(此文件中file=/etc/vsftpd/ftp

win7 64位下如何安装配置mysql-5.7.4-m14-winx64

win7 64位下如何安装配置mysql-5.7.4-m14-winx641. mysql-5.7.4-m14-winx64.zip下载官方网站下载地址:http://dev.mysql.com/get/Downloads/MySQL-5.6/mysql-5.6.17-winx64.zip 2.解压到D:\mysql.(路径自己指定)3.在D:\mysql\mysql-5.7.4-m14-winx64下新建my.ini配置文件内容如下: ####################配置文件开始#

win7 64位下 memcached安装

1:下载 memcached for Win32 2:解压之后会有 memcached.exe memcached.ini 两个文件(我下载的是这样的) 3:memcached.ini内容 bind_addr=127.0.0.1 listener_port=11212 memory=16 max_conns=1024 evict_to_free = 0 4:用cmd进入memcached.exe所在的目录.cmd要以管理员权限运行. 5:memcached -d install 安装服务 6

windows(32位 64位)下python安装mysqldb模块

windows(32位 64位)下python安装mysqldb模块 www.111cn.net 编辑:mengchu9 来源:转载本文章来给各位使用在此windows系统中的python来安装一个mysqldb模块教程,有需要了解学习的朋友可参考参考. 1.exe下载地址:http://www.codegood.com/archives/129 分为32位和64位,下载对应的exe即可 2.下载完后,双击exe安装即可 3.检查是否安装成功:如果安装成功,将没有任何提示,如下代码如下复

2 pygraphviz在windows10 64位下的安装问题（反斜杠的血案）

可以负责任的说,这篇文档是windows10安装pygraphviz中,在中文技术网站中最新的文档,没有之一.是自己完全结合各种问题,包括调试等,总结出来的. 问题来源:主要是可视化RvNN网络的树结构. pygraphviz安装时,我参考了博文http://www.myexception.cn/perl-python/2046792.html.但是,文章的解决方案已经失效. 已有博文存在的问题:windows下pygraphviz?1.3.1?cp34?none?win_amd64.whl文件

Ubuntu 64位下安装搜狗输入法

今天在搜狗输入法官网下载了deb安装包,直接点击安装输入法后发现并不能成功输入汉字.原因可能是没有先卸载fcitx.于是在贴吧里面看到了如下方法: 1:卸载fcitx sudo apt-get purge fcitx* 2:清理系统内的无用的软件包 sudo apt-get purge autoremove 3:到搜狗官网下载搜狗拼音输入法,选择你系统对应的软件包,我系统是64位的,所以我选择了amd64的 http://pinyin.sogou.com/linux/?r=pinyin 4:用g

Ubuntu 64位配置hadoop 2.7

64位的Ubuntu上配置Hadoop需要先从源码编译,虽然Ubuntu是安装在虚拟机里的,完全可以再装一个32位,但现在麻烦一点积攒经验以后方便.然而写下这句话的时候编译的部分还没有完成.不管怎样,按照以往习惯,边做边写: 1. hadoop-2.7.1-src.tar.gz 解压缩. 2.其中的BUILDING.txt中对于工具的要求是: Requirements: * Unix System * JDK 1.7+ * Maven 3.0 or later * Findbugs 1.3.9

[转]win7 64位下完美安装64位oracle 11g

最近在网上搜如何在win764位的情况下安装64位的oracle,并且使用PLSQL Developer来管理oracle. 于是开始在oracle官网下载数据库,下载是一件很简单的事情,问题是在百度的时候都说PLSQL Developer位32位的,根本没有64位,而且32位的PLSQL Developer无法管理64位的oracle,当时就想着那安装32位的oracle不就行了吗?于是我又在百度上搜了一下,说64位的机子不能按32位的oracle,当时就蒙了.接下来又是百度有是谷歌的,发现有