Hive 2、Hive 的安装配置(本地MySql模式)

一、前提条件

  安装了Zookeeper、Hadoop HDFS HA

二、安装Mysql

  因为使用量多的是单用户数据库模式,并且数据库使用最多的是mysql 所以在这里选择mysql数据库;

$ yum install mysql-server
$ service mysqld start
#连接mysql
$ mysql -uroot -p  #首次密码是空的(直接敲空格)

  

use mysql;
select host,user,password from user;

  

--要删除 user为空的用户
delete from user where user=‘‘;

--为root用户设置密码,这里用到了一个函数 PASSWORD()他可以将输入的明文密码转换为加密码格式
update user set password=PASSWORD(‘123456‘) where user=‘root‘;

  

--刷新权限
flush privileges;

--为其他客户端开启连接权限  如果是hive和mysql在同一台服务器上则不需要授权
grant all privileges on *.* to ‘root‘@‘%‘ identified by ‘123456‘;
-- 可以把 %改成IP,则授权固定IP

  三、Hive安装

#启动Zookeeper
$ zkServer.sh start 

#启动Hadoop
$ start-all.sh

  

#解压安装包 并移动到local目录下
$ tar -zxvf apache-hive-1.2.1-bin.tar.gz
$ mv apache-hive-1.2.1-bin /usr/local/apache-hive-1.2.1

  

#配置环境变量,将HIVE_HOME写入:
$ vim /root/.bash_profile
#写入
PATH=$PATH:$HOME/bin
JAVA_HOME=/usr/java/jdk1.7.0_79
HADOOP_HOME=/usr/local/hadoop-2.5.1
ZK_HOME=/usr/local/zookeeper-3.4.6
HIVE_HOME=/usr/local/apache-hive-1.2.1
export JAVA_HOME
export HADOOP_HOME
export ZK_HOME
PATH=$PATH:$HADOOP_HOME/bin/:$HADOOP_HOME/sbin/:$JAVA_HOME/bin/:$ZK_HOME/bin/:$HIVE_HOME/bin
export PATH

#重新加载配置文件
$ source /root/.bash_profile

  

#修改Hive的配置文件
$ cd /usr/local/apache-hive-1.2.1/conf
$ cp hive-default.xml.template hive-site.xml
$ vim hive-site.xml

#删除里面内容,只留<configuration></configuration> 节点
#删除方法
#将光标放在<configuration>的下一行在:模式下输入.,$-1d 按回车 例     :.,$-1d  #从当前行删除到倒数第二行

 

<!-- 在configuration中加入配置 -->
<property>
<name>hive.metastore.warehouse.dir</name>
<value>/opt/hive/warehouse</value>
</property>
<property>
<name>hive.metastore.local</name>
<value>true</value>
</property>
 <!-- 如果是远程mysql数据库的话需要在这里写入远程的IP或hosts -->
<property>
<name>javax.jdo.option.ConnectionURL</name>
<value>jdbc:mysql://node5:3306/hive?createDatabaseIfNotExist=true</value>
</property>
<property>
<name>javax.jdo.option.ConnectionDriverName</name>
<value>com.mysql.jdbc.Driver</value>
</property>
<property>
<name>javax.jdo.option.ConnectionUserName</name>
<value>root</value>
</property>
<property>
<name>javax.jdo.option.ConnectionPassword</name>
<value>123456</value>
</property>

  

更新jline.jar 在早期Hadoop版本中 jline.jar的版本是0.9+ 使用这个版本会报错,所以要替换成新版本的Jar包;
  jline.jar包下载地址:http://maven.outofmemory.cn/jline/jline/2.12.1/

 

$ cd /usr/local/hadoop-2.5.1/share/hadoop/yarn/lib
$ rm -rf  jline-0.9.94.jar
$ cp /root/jline-2.12.1.jar ./

  

 下载mysql 的 jdbc连接驱动jar包,放到hive的lib目录下  http://www.mysql.com/products/connector/  :JDBC Driver for MySQL (Connector/J)

  

$ cp /root/mysql-connector-java-5.1.32-bin.jar ./

  启动hive

 

 

如果能正常的显示登录到hive的命令行下,就表示安装成功了;

原文地址:https://www.cnblogs.com/tesla-turing/p/11509243.html

时间: 2024-10-19 18:11:29

Hive 2、Hive 的安装配置(本地MySql模式)的相关文章

Hive 3、Hive 的安装配置(本地derby模式)

这种方式是最简单的存储方式,只需要在hive-site.xml做如下配置便可; $ vim hive-site.xml <configuration> <property> <name>javax.jdo.option.ConnectionURL</name> <value>jdbc:derby:;databaseName=metastore_db;create=true</value> </property> <p

Hive 2.1.1安装配置

##前期工作 安装JDK 安装Hadoop 安装MySQL ##安装Hive ###下载Hive安装包 可以从 Apache 其中一个镜像站点中下载最新稳定版的 Hive, apache-hive-2.1.1-bin.tar.gz. 解压安装Hive 使用以下命令安装 Hive: sudo mv apache-hive-2.1.1-bin.tar.gz /opt cd /opt sudo tar -xzvf apache-hive-2.1.1-bin.tar.gz ##解压 sudo ln -s

数据库--oracle安装配置(本地安装的步骤及各种问题解决方案)

oracle版本:Oracle 11g 本地电脑配置:安装内存8G 64为操作系统win8.1 下载Oracle 11g压缩包: 1 网址http://www.oracle.com/technetwork/database/enterprise-edition/downloads/index.html 如果上面链接失效www.oracle.com官网在menu菜单下打开Developers->develper resources 接着在导航栏technologies->databases打开滑

Centos6.5 安装配置 Apache +mysql +php 操作文档

目录: 1.配置系统软件源 2.Apache的安装 2.1 Apache的下载 2.2 Apache的安装 3.mysql的安装 3.1 mysql的下载 3.2 mysql的安装 4.php的安装 4.1 php下载 4.2 php安装 5.测试 5.1 测试Apache连接php 5.2 测试php连接mysql 配置系统软件源 本次安装使用的系统软件源为网易163开源镜像软件源. http://mirrors.163.com/.help/ http://mirrors.163.com/.h

Hive 4、Hive 的安装配置(远端MyMql模式)

1.remote一体 这种存储方式需要在远端服务器运行一个mysql服务器,并且需要在Hive服务器启动meta服务.这里用mysql的测试服务器,ip位192.168.1.214,新建hive_remote数据库,字符集位latine1; $ vim hive-site.xml <configuration>      <property>     <name>hive.metastore.warehouse.dir</name>     <valu

MYSQL + MHA +keepalive + VIP安装配置(一)--MYSQL安装配置

一.总概: 本文介绍了MySQL高可用性的实现方案MHA,MHA由Node和Manager组成,Node运行在每一台MySQL服务器上,不管是MySQL主服务器,还是MySQL从服务器,都要安装Node.主从安装keepalived ,实现虚拟ip漂移,程序不用改IP自动切换. 二.环境 1.操作系统:centos 6.5 64位 2.数据库:   MySQL-5.6.17-1.el6.x86_64.rpm-bundle.tar 下载 3.MHA版本:mha4mysql-node-0.54-0.

mariadb、redis安装配置及MySQL主从同步

今日内容 https://www.cnblogs.com/pyyu/p/9467289.html mysql博客 mysql (分支 mariadb)1.安装mariadb -yum -源码编译安装 -下载rpm安装 yum和源码编译安装的区别? 1.路径区别-yum安装的软件是他自定义的,源码安装的软件./configure --preifx=软件安装的绝对路径 2.yum仓库的软件,版本可能比较低,而源码编译安装,版本可控 3.编译安装的软件,支持第三方功能扩展./configure 这里可

安装配置数据库mysql+springMVC 与数据库连接完成 检索,条件检索和插入

新建表:Test-----右键Create  Table-----在表中添加字段 一.项目与数据库连接 1.修改数据库登录用户名和密码,连接数据库 context.xml (片段) <Context> <Resourcename="jdbc/TerasolunaSampleDataSource" type="javax.sql.DataSource"driverClassName="com.mysql.jdbc.Driver"

Ubuntu 16下单机安装配置zookeeper和kafka

环境说明: os:Ubuntu 16.04 zookeeper:zookeeper 3.4.9 kafka:kafka_2.11-0.11.0.0 jdk:jdk 8(kafka启动需要使用到jdk) 详细说明(以下所有操作均是在root用户下操作): 一.jdk安装 jdk分为以下几种:jre.openjdk. oracle jdk,这里我们要安装的是oracle jdk(推荐安装) add-apt-repository ppa:webupd8team/java apt-get update