64位ubuntu下单节点安裝配置hadoop2.5.0

1、在Ubuntu下创建hadoop用户组和用户

2、在Ubuntu下安装JDK(可以在官网下载linux包然后解压安装)

3、hadoop下载:http://www.apache.org/dyn/closer.cgi/hadoop/common/

因为64位ubuntu需要编译源文件:故下载hadoop-2.5.0-src.tar.gz

(1)编译时需要安装protobuf-2.5.0,解压下载的protobuf-2.5.0.tar.gz,进入protobuf-2.5.0目录,执行下面命令

./configure --prefix=/usr

sudo make

sudo make check

sudo make install

验证:protoc --version

(2)安装Maven。

(3)编译hadoop

解压hadoop-2.5.0-src.tar.gz,进入hadoop-2.5.0-src,执行下面命令

mvn package -Pdist,native -DskipTests -Dtar

参考:http://www.ercoppa.org/Linux-Compile-Hadoop-220-fix-Unable-to-load-native-hadoop-library.htm

可能出现的问题:http://www.cnblogs.com/shenh062326/p/3562491.html

编译好的文件在hadoop-dist/target中

4、安装配置

参考: http://www.cnblogs.com/end/archive/2012/08/13/2636645.html

http://hadoop.apache.org/docs/stable/hadoop-project-dist/hadoop-common/SingleCluster.html

https://www.digitalocean.com/community/tutorials/how-to-install-hadoop-on-ubuntu-13-10

安装完跑一下:jar share/hadoop/mapreduce/hadoop-mapreduce-examples-2.5.0.jar grep input output ‘dfs[a-z.]+‘

页面查看:

http://localhost:50070/dfshealth.html#tab-overview

http://localhost:8088/cluster

64位ubuntu下单节点安裝配置hadoop2.5.0

时间: 2024-11-29 07:59:08

64位ubuntu下单节点安裝配置hadoop2.5.0的相关文章

64位ubuntu下Android开发环境的配置

本文介绍如何在64位ubuntu上搭建android的开发环境. 系统:ubuntu12.04LTS 使用的是ADT Bundle for Linux和jdk1.7(open jdk也可) 一共分为3步走: 1.配置JDK 安装Open jdk $sudo apt-get install openjdk-7-jdk 或 从oracle官网下载 从官网下载JDK64位版 解压安装 将解压出的文件用最高权限复制到/usr/lib/jvm里 sudo cp -r ~/jdk1.7/ /usr/lib/

vsftpd在Ubuntu 64位下的多用户多目录配置

研究了两天vsftpd,从网上找了很多资料,不是出这问题就是那问题,幸好终于解决了,下面贴出我的配置过程.不喜勿喷... 一.安装vsftpd sudo apt-get install vsftpd 安装完以后大致的目录介绍 /etc/vsftpd/vsftpd.conf 主配置文件 /usr/sbin/vsftpd Vsftpd的主程序 /etc/rc.d/init.d/vsftpd 启动脚本 /etc/pam.d/vsftpd PAM认证文件(此文件中file=/etc/vsftpd/ftp

64位ubuntu上安装 hadoop-2.4.0

完全参考:http://blog.csdn.net/cruise_h/article/details/18709969 这上面的安装教程 伪分布配置: http://my.oschina.net/mynote/blog/93735 64位ubuntu上安装 hadoop-2.4.0,布布扣,bubuko.com

在64位Ubuntu下搭建Java web +mysql

今天搭建了一个ubuntu 64位的tomcat + java + mysql的环境,现在总结一下: 1.下载jdk 地址: http://download.oracle.com/otn-pub/java/jdk/7u51-b13/jdk-7u51-linux-x64.tar.gz?AuthParam=1394967394_1531ce17d13be0962e25ec8fe3e45f1d 安装: tar xvf 解压刚下载的jdk压缩包. 然后到/etc/profile(注释:使用vi命令)文件

Android 源码编译环境搭建(64位Ubuntu)各种依赖包安装

1.准备: 普通PC(要求能上网), PC的操作系统Ubuntu 10.04 LTS(64位的),已经下载好的Android 1.6_r1的源代码. 2.Linux的依赖package安装: 为了更快的下载和安装包,请首先修改Ubuntu10.04的更新源,修改步骤如下: 在终端中运行: $ sudo gedit /etc/apt/sources.list 将打开文本编辑器,修改源服务器的列表,这里使用网易的源, 地址如下:摘自网络 deb http://mirrors.163.com/ubun

在64位ubuntu上安装alienbrain客户端

一.首先从Alienbrain_EN_10.5.zip安装包(网上可搜索下载)里提取出linux版安装文件:Installations/Clients/Linux/NoVM/install.bin并chmod+x使之可执行 二.如果直接运行,可能会出现大把问题,逐步解决如下: 1.首先是报libc.so.6找不到:strings: '/lib/libc.so.6': No such file.这里只要做个链接:/lib/libc.so.6 -> /lib/x86_64-linux-gnu/lib

64位ubuntu下重新编译hadoop2.2流水账

hadoop官方网站中只提供了32位的hadoop-2.2.0.tar.gz,如果要在64位ubuntu下部署hadoop-2.2.0,就需要重新编译源码包,生成64位的部署包.建议以下操作使用root账户,避免出现权限不足的问题. 安装jdk 请参考文章<在ubuntu中安装jdk>. 安装maven 请参考文章<在ubuntu中安装maven>. 下载hadoop源码 wget http://mirror.bit.edu.cn/apache/hadoop/common/hado

04.ubuntu下kvm 命令行安装64位ubuntu报&quot;Couldn&#39;t find hvm kernel for Ubuntu tree.&quot;的问题

1.安装ubuntu时使用的virt-install的配置: virt-install \ --name test4 \ --ram 1024 \ --disk path=/data/01_ubuntu/ubuntu4.img,size=6 \ --vcpus 1 \ --hvm \ --os-type linux \ --network network=default \ --os-variant ubuntuquantal \ --graphics none \ --console pty,

node+npm安裝配置

控制臺輸入node 根據提示安裝 sudo apt-get install -g npm npm install -g n n v4.5.0 n stable或n v4.5.0(指定版本 配置淘寶源 npm config set registry https://registry.npm.taobao.org 安裝cnpm npm install -g cnpm cnpm安装gulp安装的不完整 还是用npm安装node+npm安裝配置