java操作Hbase实例

所用HBase版本为1.1.2,hadoop版本为2.4

/*
 * 创建一个students表,并进行相关操作
 */
import java.io.IOException;
import java.util.ArrayList;
import java.util.List;

import org.apache.hadoop.conf.Configuration;
import org.apache.hadoop.hbase.HBaseConfiguration;
import org.apache.hadoop.hbase.HColumnDescriptor;
import org.apache.hadoop.hbase.HTableDescriptor;
import org.apache.hadoop.hbase.KeyValue;
import org.apache.hadoop.hbase.client.Delete;
import org.apache.hadoop.hbase.client.Get;
import org.apache.hadoop.hbase.client.HBaseAdmin;
import org.apache.hadoop.hbase.client.HTable;
import org.apache.hadoop.hbase.client.Put;
import org.apache.hadoop.hbase.client.Result;
import org.apache.hadoop.hbase.client.ResultScanner;
import org.apache.hadoop.hbase.client.Scan;
import org.apache.hadoop.hbase.util.Bytes;

public class HBaseDBDao {
    // 声明静态配置
    private static Configuration conf = null;

    static {
        conf = HBaseConfiguration.create();
        conf.set("hbase.zookeeper.quorum", "192.168.1.154");
        conf.set("hbase.zookeeper.property.clientPort", "2181");
        conf.set("hbase.master", "192.168.1.154:6000");
    }

    //判断表是否存在
    private static boolean isExist(String tableName) throws IOException {
        HBaseAdmin hAdmin = new HBaseAdmin(conf);
        return hAdmin.tableExists(tableName);
    }

    // 创建数据库表
    public static void createTable(String tableName, String[] columnFamilys)
            throws Exception {
        // 新建一个数据库管理员
        HBaseAdmin hAdmin = new HBaseAdmin(conf);
        if (hAdmin.tableExists(tableName)) {
            System.out.println("表 "+tableName+" 已存在!");
            System.exit(0);
        } else {
            // 新建一个students表的描述
            HTableDescriptor tableDesc = new HTableDescriptor(tableName);
            // 在描述里添加列族
            for (String columnFamily : columnFamilys) {
                tableDesc.addFamily(new HColumnDescriptor(columnFamily));
            }
            // 根据配置好的描述建表
            hAdmin.createTable(tableDesc);
            System.out.println("创建表 "+tableName+" 成功!");
        }
    }

    // 删除数据库表
    public static void deleteTable(String tableName) throws Exception {
        // 新建一个数据库管理员
        HBaseAdmin hAdmin = new HBaseAdmin(conf);
        if (hAdmin.tableExists(tableName)) {
            // 关闭一个表
            hAdmin.disableTable(tableName);
            hAdmin.deleteTable(tableName);
            System.out.println("删除表 "+tableName+" 成功!");
        } else {
            System.out.println("删除的表 "+tableName+" 不存在!");
            System.exit(0);
        }
    }

    // 添加一条数据
    public static void addRow(String tableName, String row,
            String columnFamily, String column, String value) throws Exception {
        HTable table = new HTable(conf, tableName);
        Put put = new Put(Bytes.toBytes(row));// 指定行
        // 参数分别:列族、列、值
        put.add(Bytes.toBytes(columnFamily), Bytes.toBytes(column),
                Bytes.toBytes(value));
        table.put(put);
    }

    // 删除一条(行)数据
    public static void delRow(String tableName, String row) throws Exception {
        HTable table = new HTable(conf, tableName);
        Delete del = new Delete(Bytes.toBytes(row));
        table.delete(del);
    }

    // 删除多条数据
    public static void delMultiRows(String tableName, String[] rows)
            throws Exception {
        HTable table = new HTable(conf, tableName);
        List<Delete> delList = new ArrayList<Delete>();
        for (String row : rows) {
            Delete del = new Delete(Bytes.toBytes(row));
            delList.add(del);
        }
        table.delete(delList);
    }

    // 获取一条数据
    public static void getRow(String tableName, String row) throws Exception {
        HTable table = new HTable(conf, tableName);
        Get get = new Get(Bytes.toBytes(row));
        Result result = table.get(get);
        // 输出结果,raw方法返回所有keyvalue数组
        for (KeyValue rowKV : result.raw()) {
            System.out.print("行名:" + new String(rowKV.getRow()) + " ");
            System.out.print("时间戳:" + rowKV.getTimestamp() + " ");
            System.out.print("列族名:" + new String(rowKV.getFamily()) + " ");
            System.out.print("列名:" + new String(rowKV.getQualifier()) + " ");
            System.out.println("值:" + new String(rowKV.getValue()));
        }
    }

    // 获取所有数据
    public static void getAllRows(String tableName) throws Exception {
        HTable table = new HTable(conf, tableName);
        Scan scan = new Scan();
        ResultScanner results = table.getScanner(scan);
        // 输出结果
        for (Result result : results) {
            for (KeyValue rowKV : result.raw()) {
                System.out.print("行名:" + new String(rowKV.getRow()) + " ");
                System.out.print("时间戳:" + rowKV.getTimestamp() + " ");
                System.out.print("列族名:" + new String(rowKV.getFamily()) + " ");
                System.out
                        .print("列名:" + new String(rowKV.getQualifier()) + " ");
                System.out.println("值:" + new String(rowKV.getValue()));
            }
        }
    }

    // 主函数
    public static void main(String[] args) {
        try {
            String tableName = "student";
            // 第一步:创建数据库表:“student”
            String[] columnFamilys = { "info", "course" };
            HBaseDBDao.createTable(tableName, columnFamilys);
            // 第二步:向数据表的添加数据
            // 添加第一行数据
            if (isExist(tableName)) {
                HBaseDBDao.addRow(tableName, "zpc", "info", "age", "20");
                HBaseDBDao.addRow(tableName, "zpc", "info", "sex", "boy");
                HBaseDBDao.addRow(tableName, "zpc", "course", "china", "97");
                HBaseDBDao.addRow(tableName, "zpc", "course", "math", "128");
                HBaseDBDao.addRow(tableName, "zpc", "course", "english", "85");
                // 添加第二行数据
                HBaseDBDao.addRow(tableName, "henjun", "info", "age", "19");
                HBaseDBDao.addRow(tableName, "henjun", "info", "sex", "boy");
                HBaseDBDao.addRow(tableName, "henjun", "course", "china","90");
                HBaseDBDao.addRow(tableName, "henjun", "course", "math","120");
                HBaseDBDao.addRow(tableName, "henjun", "course", "english","90");
                // 添加第三行数据
                HBaseDBDao.addRow(tableName, "niaopeng", "info", "age", "18");
                HBaseDBDao.addRow(tableName, "niaopeng", "info", "sex","girl");
                HBaseDBDao.addRow(tableName, "niaopeng", "course", "china","100");
                HBaseDBDao.addRow(tableName, "niaopeng", "course", "math","100");
                HBaseDBDao.addRow(tableName, "niaopeng", "course", "english","99");
                // 第三步:获取一条数据
                System.out.println("**************获取一条(zpc)数据*************");
                HBaseDBDao.getRow(tableName, "zpc");
                // 第四步:获取所有数据
                System.out.println("**************获取所有数据***************");
                HBaseDBDao.getAllRows(tableName);

                // 第五步:删除一条数据
                System.out.println("************删除一条(zpc)数据************");
                HBaseDBDao.delRow(tableName, "zpc");
                HBaseDBDao.getAllRows(tableName);
                // 第六步:删除多条数据
                System.out.println("**************删除多条数据***************");
                String rows[] = new String[] { "henjun","niaopeng" };
                HBaseDBDao.delMultiRows(tableName, rows);
                HBaseDBDao.getAllRows(tableName);
                // 第七步:删除数据库
                System.out.println("***************删除数据库表**************");
                HBaseDBDao.deleteTable(tableName);
                System.out.println("表"+tableName+"存在吗?"+isExist(tableName));
            } else {
                System.out.println(tableName + "此数据库表不存在!");
            }

        } catch (Exception e) {
            e.printStackTrace();
        }
    }

}

项目所需jar包如下:

程序运行结果如下:

SLF4J: Failed to load class "org.slf4j.impl.StaticLoggerBinder".
SLF4J: Defaulting to no-operation (NOP) logger implementation
SLF4J: See http://www.slf4j.org/codes.html#StaticLoggerBinder for further details.
十一月 25, 2015 9:43:05 上午 org.apache.hadoop.util.NativeCodeLoader <clinit>
警告: Unable to load native-hadoop library for your platform... using builtin-java classes where applicable
十一月 25, 2015 9:43:06 上午 org.apache.hadoop.hbase.zookeeper.RecoverableZooKeeper <init>
信息: Process identifier=hconnection-0x1cdc2ce connecting to ZooKeeper ensemble=192.168.1.154:2181
十一月 25, 2015 9:43:11 上午 org.apache.hadoop.hbase.client.HBaseAdmin postOperationResult
信息: Created student
创建表 student 成功!
**************获取一条(zpc)数据*************
行名:zpc 时间戳:1448415791324 列族名:course 列名:china 值:97
行名:zpc 时间戳:1448415791333 列族名:course 列名:english 值:85
行名:zpc 时间戳:1448415791329 列族名:course 列名:math 值:128
行名:zpc 时间戳:1448415791285 列族名:info 列名:age 值:20
行名:zpc 时间戳:1448415791314 列族名:info 列名:sex 值:boy
**************获取所有数据***************
行名:henjun 时间戳:1448415791344 列族名:course 列名:china 值:90
行名:henjun 时间戳:1448415791360 列族名:course 列名:english 值:90
行名:henjun 时间戳:1448415791354 列族名:course 列名:math 值:120
行名:henjun 时间戳:1448415791336 列族名:info 列名:age 值:19
行名:henjun 时间戳:1448415791340 列族名:info 列名:sex 值:boy
行名:niaopeng 时间戳:1448415791377 列族名:course 列名:china 值:100
行名:niaopeng 时间戳:1448415791385 列族名:course 列名:english 值:99
行名:niaopeng 时间戳:1448415791381 列族名:course 列名:math 值:100
行名:niaopeng 时间戳:1448415791368 列族名:info 列名:age 值:18
行名:niaopeng 时间戳:1448415791374 列族名:info 列名:sex 值:girl
行名:zpc 时间戳:1448415791324 列族名:course 列名:china 值:97
行名:zpc 时间戳:1448415791333 列族名:course 列名:english 值:85
行名:zpc 时间戳:1448415791329 列族名:course 列名:math 值:128
行名:zpc 时间戳:1448415791285 列族名:info 列名:age 值:20
行名:zpc 时间戳:1448415791314 列族名:info 列名:sex 值:boy
************删除一条(zpc)数据************
行名:henjun 时间戳:1448415791344 列族名:course 列名:china 值:90
行名:henjun 时间戳:1448415791360 列族名:course 列名:english 值:90
行名:henjun 时间戳:1448415791354 列族名:course 列名:math 值:120
行名:henjun 时间戳:1448415791336 列族名:info 列名:age 值:19
行名:henjun 时间戳:1448415791340 列族名:info 列名:sex 值:boy
行名:niaopeng 时间戳:1448415791377 列族名:course 列名:china 值:100
行名:niaopeng 时间戳:1448415791385 列族名:course 列名:english 值:99
行名:niaopeng 时间戳:1448415791381 列族名:course 列名:math 值:100
行名:niaopeng 时间戳:1448415791368 列族名:info 列名:age 值:18
行名:niaopeng 时间戳:1448415791374 列族名:info 列名:sex 值:girl
**************删除多条数据***************
***************删除数据库表**************
十一月 25, 2015 9:43:11 上午 org.apache.hadoop.hbase.client.HBaseAdmin call
信息: Started disable of student
十一月 25, 2015 9:43:15 上午 org.apache.hadoop.hbase.client.HBaseAdmin postOperationResult
信息: Disabled student
十一月 25, 2015 9:43:18 上午 org.apache.hadoop.hbase.client.HBaseAdmin postOperationResult
信息: Deleted student
删除表 student 成功!
表student存在吗?false

参考链接:

新浪微博数据解析与java操作Hbase实例

Java对hbase的操作

HBase Java简单示例

我的HBase之旅

时间: 2024-10-13 09:39:57

java操作Hbase实例的相关文章

新浪微博数据解析与java操作Hbase实例

之前发过一篇开发新浪微博的文章,对于大家比较感兴趣的内容之一便是如何解析新浪微博的JSON. 其实一开始的时候,也遇过一些挫折,比如直接用JsonArray和JsonObject去解析JSON内容的话,是解析不了的. 因为JSON的格式比较固定,像新浪微博返回的JSON内容则是多了一个中括号及statues标签,如下: { "statuses": [ { "created_at": "Tue May 31 17:46:55 +0800 2011"

java操作hbase例子

hbase安装方法请参考:hbase-0.94安装方法详解 hbase常用的shell命令请参考:hbase常用的shell命令例子 java操作hbase,在eclipse中创建一个java项目,将hbase安装文件根目录的jar包和lib目录下jar包导入项目,然后就可以编写java代码操作hbase了.下面代码给出来一个简单的示例 /** * @date 2015-07-23 21:28:10 * @author sgl */ package com.songguoliang.hbase;

memcached—Java操作Memcached实例

前面博客介绍了如何在Windows操作系统中安装Memcached,总结一下如何使用Java操作Memcached实例: 代码一: package com.ghj.packageoftool; import java.io.BufferedWriter; import java.io.FileWriter; import java.io.IOException; import java.io.PrintWriter; import java.io.StringWriter; import jav

Hadoop之——Java操作HBase

转载请注明出处:http://blog.csdn.net/l1028386804/article/details/46463617 不多说,直接上代码,大家都懂得 package hbase; import java.io.IOException; import org.apache.hadoop.conf.Configuration; import org.apache.hadoop.hbase.HBaseConfiguration; import org.apache.hadoop.hbas

Java操作hbase总结

用过以后,总得写个总结,不然,就忘喽. 一.寻找操作的jar包. java操作hbase,首先要考虑到使用hbase的jar包. 因为咱装的是CDH5,比较方便,使用SecureCRT工具,远程连接到你安装的那台服务器上. jar包的存放位置在/opt/cloudera/parcels/CDH/lib/hbase,找到,下载下来. 在当前路径下,有一个lib包,里面是支持hbase的hadoop的jar包,根据需求,可以下载下来. 二.找一个API文档当成手册,哪里不会查哪里 百度分享,http

java操作hbase样例

hbase安装方法请參考:hbase-0.94安装方法具体解释 hbase经常使用的shell命令请參考:hbase经常使用的shell命令样例 java操作hbase,在eclipse中创建一个java项目.将hbase安装文件根文件夹的jar包和lib文件夹下jar包导入项目,然后就能够编写java代码操作hbase了. 以下代码给出来一个简单的演示样例 /** * @date 2015-07-23 21:28:10 * @author sgl */ package com.songguol

Java 操作Hbase 完整例子

开发工具:Eclipse,三步1.新建一个项目2.把hbase安装下的lib的文件都拷贝进来3.把lib目录下jar文件都引入4.lib下的client-facing-thirdparty 目录下的jar也都引入看图 package com.yue; import org.apache.hadoop.conf.Configuration;import org.apache.hadoop.hbase.;import org.apache.hadoop.hbase.client.; import j

Java操作Hbase进行建表、删表以及对数据进行增删改查,条件查询

1.搭建环境 新建JAVA项目,添加的包有: 有关Hadoop的hadoop-core-0.20.204.0.jar 有关Hbase的hbase-0.90.4.jar.hbase-0.90.4-tests.jar以及Hbase资源包中lib目录下的所有jar包 2.主要程序 Java代码 package com.wujintao.hbase.test; import java.io.IOException; import java.util.ArrayList; import java.util

HBase(2) Java 操作 HBase 教程

目录 一.简介 二.hbase-client 引入 三.连接操作 四.表操作 五.运行测试 FAQ 参考文档 一.简介 在上一篇文章 HBase 基础入门 中,我们已经介绍了 HBase 的一些基本概念,以及如何安装使用的方法. 那么,作为一名 Javaer,自然是希望用 Java 的方式来与 HBase 进行对话了. 所幸的是,HBase 本身就是用 Java 编写的,天生自带了 Java 原生API. 我们可以通过 hbase-client 来实现 HBase 数据库的操作. 所以,这次主要