hadoop2.6伪分布配置:http://blog.csdn.net/gamer_gyt/article/details/46793731
hive1.2 derby元数据库配置:http://blog.csdn.net/gamer_gyt/article/details/47150621
环境说明
hadoop2.6伪分布 Ubuntu14.04 hive 1.1 MySql 5.5 MySql连接驱动5.1.11
一,hive配置
1.解压hive到相应的目录(我的是/usr/localo/hadoop)
2.重命名为hive
3.设置环境变量
sudo gedit /etc/profile
添加:export HIVE_HOME=/usr/local/hadoop/hive
PATH中添加 $HIVE_HIOME/bin
4.在目录$HIVE_HOME/conf/下,执行命令mv hive-default.xml.template hive-site.xml重命名
在目录$HIVE_HOME/conf/下,执行命令mv hive-env.sh.template hive-env.sh重命名
在目录$HIVE_HOME/bin下面,修改文件hive-config.sh,增加以下内容:
export JAVA_HOME=/usr/local/jdk #你自己的java路径
export HIVE_HOME=/usr/local/hadoop/hive
export HADOOP_HOME=/usr/local/hadoop
修改hive-env.sh 如下图:
========================================================================================
此时hive的就可以正常使用了,不过此时使用的是derby数据库,不能两台机器同时访问
========================================================================================
二,MySql安装
1. 删除mysql
a. sudo apt-get autoremove --purge mysql-server-5.0 b. sudo apt-get remove mysql-server c. sudo apt-get autoremove mysql-server d. sudo apt-get remove mysql-common (非常重要)
上面的其实有一些是多余的,建议还是按照顺序执行一遍
2. 清理残留数据
dpkg -l |grep ^rc|awk ‘{print $2}‘ |sudo xargs dpkg -P
3. 安装 mysql
a. sudo apt-get install mysql-server b. sudo apt-get install mysql-client
一旦安装完成,MySQL服务器应该自动启动。您可以在终端提示符后运行以下命令来检查 MySQL 服务器是否正在运行:
4. 检查Mysql是否正在运行
sudo netstat -tap | grep mysql
当您运行该命令时,您可以看到类似下面的行:
[email protected]:~# sudo netstat -tap | grep mysql tcp 0 0 localhost.localdo:mysql *:* LISTEN 870/mysqld
如果服务器不能正常运行,您可以通过下列命令启动它:
sudo /etc/init.d/mysql restart
三,使用mysql作为hive的metastore配置
1.把mysql的jdbc驱动放置到hive的lib目录下
2.修改hive-site.xml文件,修改相应的内容如下:
<property>
<name>javax.jdo.option.ConnectionURL</name>
<value>jdbc:mysql://localhost:3306/hive?createDatabaseIfNotExist=true</value>
</property>
<property>
<name>javax.jdo.option.ConnectionDriverName</name>
<value>com.mysql.jdbc.Driver</value>
</property>
<property>
<name>javax.jdo.option.ConnectionUserName</name>
<value>root</value>
</property>
<property>
<name>javax.jdo.option.ConnectionPassword</name>
<value>root</value>
</property>
注:以上配置出现的两个root即为在安装mysql时候键入的用户名和秘密
============================================================================================
至此,mysql作为元数据库的配置已经完毕
============================================================================================
四,wrong
若安装过程中出现连接不上或者不能访问,可能是权限问题
进入hadoop安装目录local执行:sudo chown-R
hadoop:hadoop./hadoop#
修改文件权限
若出现com.mysql.jdbc.exceptions.jdbc4.CommunicationsException: Communications link failure
建议好好查看配置文件hive-site.xml
版权声明:本文为博主原创文章,未经博主允许不得转载。