CDH5离线安装简记

需要的介质如下:
CM: cloudera-manager-el6-cm5.4.3_x86_64.tar.gz
CDH parcel: CDH-5.4.0-1.cdh5.4.0.p0.27-el6.parcel                            
                  CDH-5.4.0-1.cdh5.4.0.p0.27-el6.parcel.sha
                  manifest.json
MySql driver: mysql-connector-java-5.1.26-bin.jar

自建本地yum源,其实是启动一个web服务,可以使用python -m SimpleHttpServer,
或tomcat来当容器.
自建仓库的话,需要下载正确的文件,或者是rpms包,然后在linux通过create repo来创建
repomd.xml.
cm tar as repo 下载后解压即可.
parcels 的两个文件 .parcel ,manifest.json;

/etc/yum.repos.d/cloudera-manager.repo (名字需要确定这个)
[cloudera-manager]
baseurl = http://192.168.162.1:8081/cm5/redhat/6/x86_64/cm/5.4.8/
enabled = 1
gpgcheck = 0

使用超级用户进行mysql,并执行如下语句
grant all on *.* to ‘temp‘@‘%‘ identified by ‘temp‘ with grant option;
grant all on *.* to ‘scm‘@‘%‘ identified by ‘scm‘ with grant option;

安装oracle jdk:
yum install oracle-j2sdk1.7 -y

安装 cloudera-manager server
yum install cloudera-manager-daemons cloudera-manager-server -y

复制mysql连接包到/usr/share/java/mysql-connector-java.jar
后面配置cm的外部数据库信息的时候需要使用到这个包
/usr/share/cmf/schema/scm_prepare_database.sh mysql -h 192.168.162.1 -utemp -ptemp scm scm scm

启动cm server
service cloudera-scm-server start
第一次启动的时候,会根据配置的外部数据库信息,创建原始的表信息等.
在服务的日志信息中会有明确的体现.
请使用tail -f 一直观察日志信息,最后发现
INFO WebServerImpl:org.mortbay.log: Started [email protected]:7180
表明服务器的web服务监听已经启动.可以在浏览器中查看了.

安装客户端cm-agent
yum install cloudera-manager-agent cloudera-manager-daemons -y

时间: 2024-10-13 23:21:08

CDH5离线安装简记的相关文章

Cloudera Manager 5和CDH5离线安装

CDH (Cloudera's Distribution, including Apache Hadoop),是Hadoop众多分支中的一种,由Cloudera维护,基于稳定版本的Apache Hadoop构建,并集成了很多补丁,可直接用于生产环境. Cloudera Manager则是为了便于在集群中进行Hadoop等大数据处理相关的服务安装和监控管理的组件,对集群中主机.Hadoop.Hive.Spark等服务的安装配置管理做了极大简化. 相关包的下载地址: Cloudera Manager

cdh5 离线安装问题

1.parcel 哈希验证错误: 从cloudera下载的CDH-5.1.0-1.cdh5.1.0.p0.53-el6.parcel.sha1中用vi打开,将其后面的路径删除,如原内容为67fc4c86b260eeba15c339f1ec6be3b59b4ebe30  ./cdh5/parcels/5.1.0.53/CDH-5.1.0-1.cdh5.1.0.p0.53-el6.parcel,修改后为67fc4c86b260eeba15c339f1ec6be3b59b4ebe30 2.cloude

CDH5.7快速离线安装教程

一.简介 CDH是cloudera公司开发的一个快速部署.高效管理Hadoop和其各种组件的一个商业化产品.主要分为两部分,分别为Cloudera Manager和CDH软件包.其中Cloudera Manager负责集群的部署与管理.CDH软件包囊括了hdaoop各类的组件的安装包,例如hive.hdfs.spark等等. 由于实验室服务器集群实现了硬件虚拟化,要在虚拟资源重新搭建CDH集群.cloudera的搭建官方提供了三种安装方式.分别是在线安装.yum安装和离线安装,我首先是采用离线安

Hadoop部署实践:   离线安装 CDH5.1   (待完成)

配置主机映射关系 [[email protected] ~]$ cat /etc/hosts 127.0.0.1   localhost localhost.localdomain localhost4 localhost4.localdomain4 10.15.5.200 master.hadoop 10.15.5.201 slave01.hadoop 10.15.5.202 slave02.hadoop 10.15.5.203 slave03.hadoop 如上有4台主机,每台hosts都已

离线安装Cloudera Manager 5和CDH5(最新版5.1.3) 完全教程

原文  http://www.cnblogs.com/jasondan/p/4011153.html 关于CDH和Cloudera Manager CDH (Cloudera's Distribution, including Apache Hadoop),是Hadoop众多分支中的一种,由Cloudera维护,基于稳定版本的Apache Hadoop构建,并集成了很多补丁,可直接用于生产环境. Cloudera Manager则是为了便于在集群中进行Hadoop等大数据处理相关的服务安装和监控

Cloudera Manager和CDH5.8离线安装

https://blog.csdn.net/zzq900503/article/details/52982828 简介 我们在上篇文章中已经了解了CDH,为了后续的学习,我们本章就来安装CDH5.8.CDH5.8是目前比较新的版本,自带hadoop2.0以上的hadoop,而且已经包含了很多组件,也是我们接下来需要学习的hadoop生态圈中的组件. 环境 Cloudera Manager是为了简化hadoop及其组件的部署,但是由于包含的组件较多,对内存要求也比较大.所以我们尽量要保持主节点ma

离线安装Cloudera Manager5.3.4与CDH5.3.4(二)

Cloudera Manager Server和Agent都启动以后,就可以进行CDH5的安装配置了. 这时可以通过浏览器访问主节点的7180端口测试一下了(由于CM Server的启动需要花点时间,这里可能要等待一会才能访问),默认的用户名和密码均为admin. 制作本地源 先下载CDH到本地http://archive-primary.cloudera.com/cdh5/parcels/5.3.4/, 这里需要下载三样东西, 首先是与自己系统版本相对应的parcel包,然后是manifest

CDH-5.7.1离线安装

参考自:http://blog.csdn.net/jdplus/article/details/45920733 1.文件下载 CDH (Cloudera's Distribution, including Apache Hadoop),是Hadoop众多分支中的一种,由Cloudera维护,基于稳定版本的Apache Hadoop构建,并集成了很多补丁,可直接用于生产环境. Cloudera Manager则是为了便于在集群中进行Hadoop等大数据处理相关的服务安装和监控管理的组件,对集群中

Ubuntu14.04离线安装CDH5.6.0

官方安装文档:http://www.cloudera.com/documentation/enterprise/5-6-x/topics/installation.html 相关包的下载地址: Cloudera Manager地址:http://archive.cloudera.com/cm5/cm/5/ CDH安装包地址:http://archive.cloudera.com/cdh5/parcels/5.6.0/ 由于我们的操作系统为ubuntu14.04,需要下载以下文件: CDH-5.6