CDH5.3集群安装笔记-环境准备(3)

3、安装本地CDH镜像站点

去http://archive-primary.cloudera.com/cdh5/parcels/latest/上下载CDH-5.3.0-1.cdh5.3.0.p0.30-el6.parcel和manifest.json两个文件,到/home/cdh5/parcels/latest下:

[[email protected] latest]# pwd
/home/cdh5/parcels/latest
[[email protected] latest]# ll
total 1533544
-rw-r--r--. 1 root root 1570299413 Jan  7 00:57 CDH-5.3.0-1.cdh5.3.0.p0.30-el6.parcel
-rw-r--r--. 1 root root      42655 Jan  7 00:47 manifest.json

然后在/var/www/html下创建连接:

ln -s /home/cdh5 /var/www/html/cdh5

去http://archive-primary.cloudera.com/redhat/cdh/ 下载RPM-GPG-KEY-cloudera,到/home/redhat/cdh下:

[[email protected] cdh]# pwd
/home/redhat/cdh
[[email protected] cdh]# ll
total 4
-rw-r--r--. 1 root root 1690 Jan  7 00:50 RPM-GPG-KEY-cloudera

然后再/var/www/html下创建连接:

ln -s /home/redhat /var/www/html/redhat

去http://archive-primary.cloudera.com/cm5/repo-as-tarball/5.3.0/下载cm5.3.0-centos6.tar.gz到/home/下,并解压:

tar -zxvf cm5.3.0-centos6.tar.gz

产生一个cm目录如下:

[[email protected] cm]# pwd
/home/cm
[[email protected] cm]# ll
total 16
lrwxrwxrwx. 1 1106  592    5 Jan  7 20:48 5 -> 5.3.0
drwxrwxr-x. 4 1106  592 4096 Oct 13 14:23 5.3.0
-rw-rw-r--. 1 1106  592  325 Oct 13 14:23 cloudera-manager.repo
-rw-rw-r--. 1 1106  592 1690 Oct 13 14:03 RPM-GPG-KEY-cloudera

然后在/var/www/html下创建连接:

[[email protected] html]# pwd
/var/www/html
[[email protected] html]# mkdir -p cm5/redhat/6/x86_64
[[email protected] html]# ln -s /home/cm /var/www/html/cm5/redhat/6/x86_64

启动你的httpd服务:

chkconfig httpd on
service httpd start

打开浏览器,访问http://192.168.10.1/cdh5/;http://192.168.10.1/redhat/;http://192.168.10.1/cm5这三个web目录,如果可以正常打开,一切ok。如果不行,请查看你的httpd服务的配置是否正确。

至此一个CDH的本地镜像服务器搭建完成了。

时间: 2024-10-07 03:58:30

CDH5.3集群安装笔记-环境准备(3)的相关文章

CDH5.3集群安装笔记-环境准备(1)

Hadoop是一个复杂的系统组合,搭建一个用于生产的Hadoop环境是一件非常麻烦的事情.但这个世界上总有一些牛人会帮你解决一些看似痛苦的问题,如果现在没有,那也是早晚的事.CDH是Cloudera旗下的Hadoop套装环境,CDH的相关介绍请各位亲自己查阅www.cloudera.com,我就不再多说了.这里主要是介绍使用CDH5.3安装一个可以用于生产的Hadoop环境.虽然人家Cloudera牛人帮你解决了hadoop安装的问题,但随之而来的是:Cloudera Manager的安装不比h

CDH5.3集群安装笔记-环境准备(2)

2.安装时间服务器 在server1.cdhwork.org(192.168.10.1)安装ntp服务,确保服务器可以访问外网: yum -y install ntp chkconfig --add ntpd chkconfig ntpd on 编辑ntp配置文件: cp /etc/ntp.conf /etc/ntp.conf.bak vi /etc/ntp.conf 修改如下部分: # Permit time synchronization with our time source, but

redis集群安装

Redis集群安装 1         环境准备 1.1  系统环境 Centos6.5 2.6.32-431.el6.x86_64 1.2  依赖包 yum -y install wget tcpdump glibc libgcc gcc gcc-c++ ncurses-devel bison openssl openssl-devel xinetd glibc glibc-common gd gd-devel rsync puppet ntp perl cmake man tree lsof

ElasticSearch2.2 集群安装部署

一.ElasticSearch 集群安装部署 环境准备 ubuntu虚拟机2台 ip:192.168.1.104 192.168.1.106 jdk:最低要求1.7,本机jdk版本1.7_67 安装 a.安装jdk(这里不赘述) b.从官网下载ES版本 地址https://www.elastic.co/downloads/elasticsearch c.解压ES到本地 d.进入config目录下,用编辑器打开elasticsearch.yml文件 1.cluster.name: ppscore-

Hadoop集群安装-CDH5(5台服务器集群)

CDH5包下载:http://archive.cloudera.com/cdh5/ 架构设计: 主机规划: IP Host 部署模块 进程 192.168.254.151 Hadoop-NN-01 NameNode ResourceManager NameNode DFSZKFailoverController ResourceManager 192.168.254.152 Hadoop-NN-02 NameNode ResourceManager NameNode DFSZKFailoverC

CDH5 集群安装教程

一.虚拟机的安装和网络配置. 1.虚拟机安装. 2.安装CentOS-6.5 64位版本. 桥接模式: Master: 内存:3G: 硬盘容量40G: 4核: Slave: 内存2G: 硬盘容量30G: 2核: 3.网络配置(master,slave) 1)进入root账号 su - root 输入密码: vi /etc/sysconfig/network 2)关闭防火墙 vi /etc/sysconfig/selinux #SELinux=disable Service iptables st

Storm笔记整理(三):Storm集群安装部署与Topology作业提交

[TOC] Storm分布式集群安装部署 概述 Storm集群表面类似Hadoop集群.但在Hadoop上你运行的是"MapReduce jobs",在Storm上你运行的是"topologies"."Jobs"和"topologies"是大不同的,一个关键不同是一个MapReduce的Job最终会结束,而一个topology永远处理消息(或直到你kill它). Storm集群有两种节点:控制(master)节点和工作者(wo

ElasticSearch笔记整理(二):CURL操作、ES插件、集群安装与核心概念

[TOC] CURL操作 CURL简介 curl是利用URL语法在命令行方式下工作的开源文件传输工具,使用curl可以简单实现常见的get/post请求.简单的认为是可以在命令行下面访问url的一个工具.在centos的默认库里面是有curl工具的,如果没有请yum安装即可. curl -X 指定http的请求方法 有HEAD GET POST PUT DELETE -d 指定要传输的数据 -H 指定http请求头信息 curl创建索引库 curl -XPUT http://<ip>:9200

1.1 Storm集群安装部署步骤

安装storm集群,需要依赖以下组件: Zookeeper Python Zeromq Storm JDK JZMQ 故安装过程根据上面的组件分为以下几步: 安装JDK 安装Zookeeper集群 安装Python及依赖 安装Storm 另外,操作系统环境为:Centos6.4,安装用户为:root. 1. 安装JDK 安装jdk有很多方法,可以参考文博客使用yum安装CDH Hadoop集群中的jdk安装步骤,需要说明的是下面的zookeeper集群安装方法也可以参考此文. 不管你用什么方法,