阿里云轻量服务器Ubuntu18.04上安装Hbase2.2.0与Hbase Shell基本操作

  这是我自己装BigData相关软件的一系列教程的第二篇,第一篇是Hadoop的安装https://www.cnblogs.com/annie666/p/11567690.html

  装软件是学大数据最最基础的一步,虽然相对简单,还是很容易出错啊。希望这个详细的教程可以帮助其他想学大数据的同学少走弯路。

参考资料 厦大林子雨教程:http://dblab.xmu.edu.cn/blog/2139-2/

一、准备工作

  装软件最怕的事情就是安错版本。所以安装Hbase前,看一下官网的basic preparation。(但官方文档有好多准备工作啊,比如DNS,我们这个没那么复杂,只需确定Hadoop,Hbase,JDK的版本问题。官网链接:http://hbase.apache.org/book.html#basic.prerequisites

1.Hadoop

    官方文档建议安装Hadoop2.*,因为更快,更稳定

2.JDK 8

    (应该没有Java还没装好的朋友吧,这个我就不细讲了)

  3.Hadoop与Hbase版本支持关系

    因此,我们最后选择Hadoop-2.9.2与Hbase-2.2.0(清华镜像上没有,可以去官网下载然后通过FTP传到服务器上)进行安装

    清华大学镜像下载Hadoop-2.9.2

wget https://mirrors.tuna.tsinghua.edu.cn/apache/hadoop/common/hadoop-2.9.2/hadoop-2.9.2.tar.gz

二、解压缩

sudo tar -zxvf ~/hbase-2.2.0-bin.tar.gz -C /usr/local
cd  /usr/local
sudo mv ./hbase-2.2.0 ./hbase
sudo  chown  -R  hadoop:hadoop  ./hbase

查看安装成功没

/usr/local/hbase/bin/hbase version

若成功,返回下面的信息:

[email protected]:/usr/local$ /usr/local/hbase/bin/hbase version
2019-10-02 14:00:33,041 INFO  [main] util.VersionInfo: HBase 2.2.0
2019-10-02 14:00:33,042 INFO  [main] util.VersionInfo: Source code repository git://diocles.local/Volumes/hbase-1.1.5/hbase revision=239b80456118175b340b2e562a5568b5c744252e
2019-10-02 14:00:33,042 INFO  [main] util.VersionInfo: Compiled by ndimiduk on Wed Oct 02 14:03:05 CST 2019
2019-10-02 14:00:33,042 INFO  [main] util.VersionInfo: From source with checksum 7ad8dc6c5daba19e4aab081181a2457d

三、单机式配置

在/usr/local/hbase/conf/下

1.修改hbase-env.sh

export JAVA_HOME=/usr/lib/jvm/java-8-openjdk-amd64  #忘记自己的javahome可以打开hadoop-env.sh看自己以前怎么写的

2.修改hdfs-site.xml

  和官网一模一样https://hbase.apache.org/book.html#quickstart

<configuration>
  <property>
    <name>hbase.rootdir</name>
    <value>file:///home/testuser/hbase</value>
  </property>
  <property>
    <name>hbase.zookeeper.property.dataDir</name>
    <value>/home/testuser/zookeeper</value>
  </property>
  <property>
    <name>hbase.unsafe.stream.capability.enforce</name>
    <value>false</value>
    <description>
      Controls whether HBase will check for stream capabilities (hflush/hsync).

      Disable this if you intend to run on LocalFileSystem, denoted by a rootdir
      with the ‘file://‘ scheme, but be mindful of the NOTE below.

      WARNING: Setting this to false blinds you to potential data loss and
      inconsistent system state in the event of process and/or node failures. If
      HBase is complaining of an inability to use hsync or hflush it‘s most
      likely not a false positive.
    </description>
  </property>
</configuration>

四、测试运行Hbase

 第一步 启动Hadoop

  由于Hbase依赖hadoop,所以先得启动Hadoop

  输入jps,若非Data、Name、SecondaryNameNode三个都出现了,开启一下Hadoop吧!

cd /usr/local/hadoop-2.9.2
./sbin/start-dfs.sh

 第二步 启动Hbase

  使用 ./bin/start-hbase 启动Hbase

cd /usr/local/hbase
./bin/start-hbase.sh

  输入JPS检查进程,若出现HMaster,独立式配置成功!

[email protected]:/usr/local/hbase$ jps
NameNode                  #1
DataNode                  #2
SecondaryNameNode         #3
HMaster                   #4
Jps                       #5      

start-hbase之后可以访问UI界面

第三步 使用hbase shell

cd /usr/local/hbase
./bin/hbase shell

耐心等待后会出现下面的信息:

2019-10-02 14:04:04,826 WARN  [main] util.NativeCodeLoader: Unable to load native-hadoop library for your platform... using builtin-java classes where applicable HBase Shell Use "help" to get list of supported commands.
Use "exit" to quit this interactive shell.
For Reference, please visit: http://hbase.apache.org/2.0/book.html#shell
Version 2.2.0, rUnknown, Tue Jun 11 04:30:30 UTC 2019
Took 0.0066 seconds
hbase(main):001:0> create ‘test‘,‘cf‘

然后开始编程吧!

基础知识:行键/列族/列限定符/时间戳

1.创建表:

  语法:create ‘tablename‘, ‘columnname‘

hbase(main):001:0> create ‘test‘, ‘cf‘
0 row(s) in 0.4170 seconds

=> Hbase::Table - test

  然后可通过 list ‘test’ 查看创建的表

hbase(main):002:0> list ‘test‘
TABLE
test
1 row(s) in 0.0180 seconds

=> ["test"]

  或通过 describe ‘test’ 查看详细配置信息

hbase(main):003:0> describe ‘test‘
Table test is ENABLED
test
COLUMN FAMILIES DESCRIPTION
{NAME => ‘cf‘, VERSIONS => ‘1‘, EVICT_BLOCKS_ON_CLOSE => ‘false‘, NEW_VERSION_BEHAVIOR => ‘false‘, KEEP_DELETED_CELLS => ‘FALSE‘, CACHE_DATA_ON_WRITE =>
‘false‘, DATA_BLOCK_ENCODING => ‘NONE‘, TTL => ‘FOREVER‘, MIN_VERSIONS => ‘0‘, REPLICATION_SCOPE => ‘0‘, BLOOMFILTER => ‘ROW‘, CACHE_INDEX_ON_WRITE => ‘f
alse‘, IN_MEMORY => ‘false‘, CACHE_BLOOMS_ON_WRITE => ‘false‘, PREFETCH_BLOCKS_ON_OPEN => ‘false‘, COMPRESSION => ‘NONE‘, BLOCKCACHE => ‘true‘, BLOCKSIZE
 => ‘65536‘}
1 row(s)
Took 0.9998 seconds

2.增删改查

(1)插入&更新

  使用put命令插入或更新单元格

hbase(main):003:0> put ‘test‘, ‘row1‘, ‘cf:a‘, ‘value1‘
0 row(s) in 0.0850 seconds

hbase(main):004:0> put ‘test‘, ‘row2‘, ‘cf:b‘, ‘value2‘
0 row(s) in 0.0110 seconds

hbase(main):005:0> put ‘test‘, ‘row3‘, ‘cf:c‘, ‘value3‘
0 row(s) in 0.0100 seconds

  然后可使用scan命令查看整张表中数据

hbase(main):009:0> scan ‘test‘
ROW                      COLUMN+CELL
 row1                    column=cf:a, timestamp=1569996475448, value=value1
 row2                    column=cf:b, timestamp=1569996503176, value=value2
 row3                    column=cf:c, timestamp=1569996607878, value=value3

(2)删除

  使用drop删除整张表,注意:要更改删除时必须先disable

disable ‘test‘  #第一步 让表不可用(必须先这样)
drop   ‘test‘     #第二步 删除表

(3)查看

  get ‘test‘, ‘row2‘

  COLUMN CELL
  cf:b timestamp=1569996503176, value=value2

  退出quit:To exit the HBase Shell and disconnect from your cluster, use the quit command. HBase is still running in the background.

五、关闭Hbase

cd /usr/local/hbase
./bin/stop-hbase.sh

原文地址:https://www.cnblogs.com/annie666/p/Install-Hbase-in-AliyunServer-Ubuntu-18_04.html

时间: 2024-10-13 13:14:09

阿里云轻量服务器Ubuntu18.04上安装Hbase2.2.0与Hbase Shell基本操作的相关文章

阿里云轻量服务器LAMP镜像部署网站踩过的坑第一期

阿里云的轻量服务器真的很多坑,刚完成3个网站部署在一台轻量服务器的工作,虚拟主机配置文件,php源码解析,mysql.httpd和php不是系统变量等等各种问题:准备一个一个来填坑,在这感谢51CTO讲师段老师的帮助,3年前在他那学的红帽7.0:碰到什么写什么,可能有点水,但是都是实操经验,现在网上大多都是copy,自己也没验证过,还有一些是初学者虚拟机玩配置,对实际操作帮助不大: 今天先说一下轻量服务器的虚拟主机配置文件 碰到新的系统,先查看系统版本,下面是阿里云轻量服务器的版本信息 [[em

阿里云轻量服务器价格及轻量与ECS服务器区别比较

https://yq.aliyun.com/articles/221647 摘要: 阿里云轻量应用服务器价格表及介绍,关于轻量应用服务器和ECS服务器的性能对比 阿里云轻量应用服务器是阿里云新推出的服务器,本文介绍阿里云轻量服务器的价格,已经何为"轻量"?轻量与阿里云ECS服务器有什么区别?轻量性能就一定不如ECS服务器吗? 什么是轻量应用服务器?轻量应用服务器是面向单机应用场景的新一代计算服务,提供精品应用一键部署,支持一站式的域名.网站.安全.运维.应用管理等服务,极大地优化了搭建

阿里云轻量服务器部署PHP网站简述(基于Lamp)

一:首先登陆阿里云账户购买轻量服务器(这里就不详细介绍啦) 二:进去以后是这样的 然后其他的一些设置参考https://blog.csdn.net/cuiji4724/article/details/81395364(内容如下) 一.介绍环境1.首先进入操控台找到轻量应用服务器(若找不到可以在下方)产品与服务里面搜. 2.进入轻量应用服务器,找到重置系统,应用镜像选择LAMP,系统镜像选择CentOS,点击确认更换 (这里我也进行了应用镜像的更换,但是更换了多次没有成功,还是显示的是WrodPr

阿里云服务器Ubuntu18.04上安装MongoDB Ops Manager

首先确保mongoDB运行起来了 法一:输入 mongo 可以进入Mongo shell 法二:用NoSQL Booster可以连接到MongoDB 法三:输入systemctl status mongod显示mongod.service loaded 一.创建虚拟内存 详见<阿里云服务器启用虚拟内存-Ubuntu> https://my.oschina.net/u/2306127/blog/657269 二.下载安装Ops manager apt install axel axel http

阿里云轻量应用服务器Linux-Centos7下MySQL8.0.19的安装

初始环境:阿里云轻量应用服务器已经重置系统为CentOS7.3-64位具体目标:安装MySQL 8.0.19 第一步:检查Linux系统版本 1.执行命令 lsb_release -a 查看系统版本可以看到,目前我的系统版本为CentOS7.3-64位.2.为了确保一切正常,我准备升级自己的系统到当前最新.3.用yum更新升级执行命令 yum -y clean all执行命令 yum -y update最后看见"Complete!"就是更新完成了.4.更新完成后,执行命令 lsb_re

阿里云轻量应用服务器Linux-Centos7下Oracle19c的安装

初始环境:阿里云轻量应用服务器已经重置系统为CentOS7.3-64位具体目标:安装Oracle Database 19c 第一步:检查Linux系统版本 执行命令 lsb_release -a 查看系统版本可以看到,目前我的系统版本为CentOS7.3-64位.2.为了确保一切正常,我准备升级自己的系统到当前最新.3.用yum更新升级执行命令 yum -y clean all执行命令 yum -y update最后看见"Complete!"就是更新完成了.4.更新完成后,执行命令 l

阿里云的ubuntu server 12.04 下安装jdk和tomcat

因为想自己在做个简单粗暴的小游戏,弄到朋友圈去,买了个阿里云服务,当时选的的ubuntu sever 12.04的os,恰巧朋友又委托一个小项目,所以先尝试搭建下环境. 首先,用putty或者SSH Secure Shell Client连接到服务器,进入命令环境. 1.$ sudo mkdir /usr/lib/jvm     创建存放jdk的安装目录 然后到 http://www.oracle.com/technetwork/java/javase/downloads/jdk7-downlo

EOS 在ubuntu18.04上安装EOS

在ubuntu18.04上安装EOS 在ubuntu18.04上安装EOS的目的: 把交易所的eos转到eos主网,防止交易所跑路或者交易所被黑客攻击 在不联网的安全环境下,用eos官方的命令行工具,创建自己的公钥和私钥(待续) 用eos官方的命令行工具,创建钱包,执行转账,购买RAM等(待续) 本笔记包括二部分 一, 在虚拟机vbox上安装ubuntu18.04 二, 在ubuntu18.04上编译eos源代码,再安装eos 第一部分:在虚拟机vbox上安装ubuntu18.04 1,根据自己

在Ubuntu18.04上安装Nvidia驱动

拿到了一台新机子,带显卡的那种,当然是各种倒腾了!于是我又一天装了三遍机子来进行各种尝试熟悉配置啥的. 所以首先是在裸机上安装Nvidia驱动. 环境:Ubuntu18.04 刚安装完系统,当然是把软件更新器提出的下载更新给下载一下了.所以首先应该是 1 sudo apt-get update 当然,上述是系统主动提出的更新,并没有输入指令啦~ 接下来,为了安装较新的驱动,先将ppa源加入 1 sudo add-apt-repository ppa:graphics-drivers/ppa 2