0002-CENTOS7.2安装CDH5.10和Kudu1.2(二)

5 Kudu安装

CDH从5.10开始,打包集成Kudu1.2,并且Cloudera正式提供支持。这个版本开始Kudu的安装较之前要简单很多,省去了Impala_Kudu,安装完Kudu,Impala即可直接操作Kudu。

以下安装步骤基于用户使用Cloudera Manager来安装和部署Kudu1.2

5.1 安装csd文件

5.2 安装Kudu服务

3.检查http显示Kudu正常:

4.通过CM界面配置Kudu的Parcel地址,并下载,分发,激活Kudu。

5.通过CM安装Kudu1.2

添加Kudu服务

选择Master和Tablet Server

配置相应的目录,注:无论是Master还是Tablet根据实际情况数据目录(fs_data_dir)应该都可能有多个,以提高并发读写,从而提高Kudu性能

启动Kudu服务

安装完毕

5.3 配置Impala

在CDH5.10中,安装完Kudu1.2后,默认Impala即可直接操作Kudu进行SQL操作,但为了省去每次建表都需要在TBLPROPERTIES中添加kudu_master_addresses属性,建议在Impala的高级配置KuduMaster的地址:--kudu_master_hosts=ip-172-31-2-159:7051

6 快速组件服务验证

6.1 HDFS验证(mkdir+put+cat+get)

6.2 Hive验证

6.3 MapReduce验证

6.4 Impala验证

6.5 Spark验证

6.6 Kudu验证

“醉酒鞭名马,少年多浮夸! 岭南浣溪沙,呕吐酒肆下!挚友不肯放,数据玩的花!”

相关链接:CENTOS7.2安装CDH5.10和Kudu1.2(一)

原文地址:http://blog.51cto.com/14049791/2316125

时间: 2024-10-07 15:06:13

0002-CENTOS7.2安装CDH5.10和Kudu1.2(二)的相关文章

0002-CENTOS7.2安装CDH5.10和Kudu1.2

Fayson的github: https://github.com/fayson/cdhproject 推荐关注微信公众号:"Hadoop实操",ID:gh_c4c535955d0f,或者扫描文末二维码. 1.概述 本文档描述CENTOS7.2操作系统部署CDH企业版的过程.Cloudera企业级数据中心的安装主要分为4个步骤: 1.集群服务器配置,包括安装操作系统.关闭防火墙.同步服务器时钟等:2.外部数据库安装3.安装Cloudera管理器:4.安装CDH集群:5.集群完整性检查,

0002-CENTOS7.2安装CDH5.10和Kudu1.2(一)

1 概述 本文档描述CENTOS7.2操作系统部署CDH企业版的过程.Cloudera企业级数据中心的安装主要分为4个步骤: 1.集群服务器配置,包括安装操作系统.关闭防火墙.同步服务器时钟等: 2.外部数据库安装 3.安装Cloudera管理器: 4.安装CDH集群: 集群完整性检查,包括HDFS文件系统.MapReduce.Hive等是否可以正常运行. 这篇文档将着重介绍Cloudera管理器与CDH的安装,并基于以下假设: 操作系统版本:CENTOS7.2 MariaDB数据库版本为10.

Centos7下安装mono3.10.0

mono 3.10.0 正式发布:性能进一步改进,以前已经写过一篇  Centos 7.0 安装Mono 3.4 和Jexus 5.6.下面我们在CentOS 7上通过源码安装Mono 3.10, 需要安装最新的libgdiplus3.8. 1. 安装依赖项 yum -y install wget glib2-devel libtiff libtiff-devel libjpeg libjpeg-devel giflib giflib-devel libpng libpng-devel libX

CentOS7.2 安装nginx-1.10.3

nginx-1.10.3 下载nginx 检查是否安装了依赖库: [[email protected] ~]# rpm -q gcc gcc-4.8.5-11.el7.x86_64 [[email protected] ~]# rpm -q openssl openssl-1.0.1e-60.el7_3.1.x86_64 [[email protected] ~]# rpm -q zlib zlib-1.2.7-17.el7.x86_64 [[email protected] ~]# rpm -

CENTOS7离线安装CDH5.6遇到的问题

1,安装cloudera-manager-agent 时,报错,报端口80问题, 开启80端口 firewall-cmd --zone=public --add-port=80/tcp --permanent 出现success表明添加成功 命令含义: --zone #作用域 --add-port=80/tcp  #添加端口,格式为:端口/通讯协议 --permanent   #永久生效,没有此参数重启后失效 运行.停止.禁用firewalld 启动:# systemctl start  fir

centos7+cdh5.10.0搭建

一.选择环境: 1.说明 本次部署使用台机器,3台用于搭建CDH集群,1台为内部源.内部源机器是可以连接公网的,可以提前部署好内部源,本次部署涉及到的服务器的hosts配置如下: 192.168.10.114    sp-04 192.168.10.115    sp-05 192.168.10.116    sp-06 本次安装为cdh5.10.0 需要centos版本: Jdk版本:jdk-8u73-linux-x64.tar 参考地址:https://www.cloudera.com/do

centos7.4下离线安装CDH5.7

(一)安装前的规划 (1)操作系统版本:centos7.4(64bit) [[email protected] etc]# more /etc/centos-release CentOS Linux release 7.4.1708 (Core) [[email protected] installPackage]# cat /proc/version Linux version 3.10.0-693.el7.x86_64 ([email protected]) (gcc version 4.8

cdh-5.10.0搭建安装

1.修改主机名为master, slave1, slave2 vim /etc/sysconfig/network HOSTNAME = master HOSTNAME = slave1 HOSTNAME = slave2 2.修改hosts文件(三个节点都要设置) vim /etc/hosts 192.168.1.7 master 192.168.1.8 slave1 192.168.1.9 slave2 3.IP设置(三个节点都要设置) DEVICE=eth0 HWADDR=4C:CC:6A

centos7.0安装apache-2.4.10

centos7.0安装完毕后,通过yum 安装的apache版本是 2.4.6的. 于是先停止了httpd服务,然后卸载了默认安装的版本. systemctl stop httpd.service rpm -qa|grep httpd #查看apache包,找到名字(例如httpd-2.4.6-18.el6_2.1.x86_64)后用下面命令删除 rpm -e httpd-2.2.15-15.el6_2.1.x86_64 #不过要先把依赖apache的包删除 或者 yum list|grep h