sunny123456

  博客园 :: 首页 :: 博问 :: 闪存 :: 新随笔 :: 联系 :: 订阅 订阅 :: 管理 ::
  1796 随笔 :: 22 文章 :: 24 评论 :: 226万 阅读
< 2025年3月 >
23 24 25 26 27 28 1
2 3 4 5 6 7 8
9 10 11 12 13 14 15
16 17 18 19 20 21 22
23 24 25 26 27 28 29
30 31 1 2 3 4 5

java操作hbase查询数据 java操作hbase查询数据库


HBase java API访问HBase数据库

package com.hunan.hbase_options;


import org.apache.hadoop.conf.Configuration;

import org.apache.hadoop.hbase.;

import org.apache.hadoop.hbase.client.;

import org.apache.hadoop.hbase.util.Bytes;




import java.io.IOException;




/*

DDL:

1、判断表是否存在

2、创建命名空间

3、创建命名空间

4、删除表

DML:

5、插入数据

6、查数据(get)

7、查数据(scan)

8、删除数据

*/

public class HbaseDemo {

private static Connection connection = null;

private static Admin admin = null;



static {
    try {
        //1、获取配置文件信息
        Configuration configuration = HBaseConfiguration.create();
        configuration.set("hbase.zookeeper.quorum", "master");
        //hbase-site.xml配置文件中 hbase.zookeeper.quorum 的值

        //2、创建连接对象
        connection = ConnectionFactory.createConnection(configuration);

        //2、获取admin对象
        admin = connection.getAdmin();
    } catch (IOException e) {
        e.printStackTrace();
    }
}
//判断表是否存在
public static boolean isTableExist(String tableName) throws IOException {




//        //1、获取配置文件信息

//        //HBaseConfiguration configuration=new HBaseConfiguration();

//        Configuration configuration = HBaseConfiguration.create();

//        configuration.set("hbase.zookeeper.quorum","master");

//        //2、获取管理员对象

//        //HBaseAdmin admin=new HBaseAdmin(configuration);

//        Connection connection = ConnectionFactory.createConnection(configuration);

//        Admin admin = connection.getAdmin();

//第1步和第2步封装到static方法中

//3、判断表是否存在

boolean exists = admin.tableExists(TableName.valueOf(tableName));

//        //4、关闭连接

//        admin.close();

//5、返回结果

return exists;

}



//创建表
public static void createTable(String tableName, String... cfs) throws IOException// ... 传参数个数不确定,可以为0
{
    //1、判断列族信息是否存在
    if (cfs.length &lt;= 0) {
        System.out.println("请设置列族信息");
        return;
    }

    //2、判断表是否存在
    if (isTableExist(tableName)) {
        System.out.println(tableName + "表已经存在");
        return;
    }

    //3、创建表描述器
    HTableDescriptor hTableDescriptor = new HTableDescriptor(TableName.valueOf(tableName));

    //4、循环添加列族信息
    for (String cf : cfs) {
        //5、创建列族描述器
        HColumnDescriptor hColumnDescriptor = new HColumnDescriptor(cf);
        //6、添加具体列族
        hTableDescriptor.addFamily(hColumnDescriptor);
    }
    //7、创建表
    admin.createTable(hTableDescriptor);
}

//删除表
public static void dropTable(String tableName) throws IOException {
    //1、判断表是否存在
    if (!isTableExist(tableName)) {
        System.out.println(tableName + "表不存在");
        return;
    }
    //2、使表下线
    admin.disableTable(TableName.valueOf(tableName));
    //3、删除表
    admin.deleteTable(TableName.valueOf(tableName));
}

//创建命名空间
public static void createNameSpace(String ns) {
    //1、创建命名空间描述器
    NamespaceDescriptor.Builder builder = NamespaceDescriptor.create(ns);
    NamespaceDescriptor namespaceDescriptor = builder.build();
    //2、创建命名空间
    try {
        admin.createNamespace(namespaceDescriptor);
    } catch (NamespaceExistException e)
    {
        System.out.println(ns+"命名空间已经存在");
    } catch (IOException e) {
        e.printStackTrace();
    }
}
//向表插入数据
public static void putData(String tableName, String rowKey, String cf,String cn,String value) throws IOException {
    //1.获取表对象
    Table table = connection.getTable(TableName.valueOf(tableName));
    //2.创建put对象
    Put put = new Put(Bytes.toBytes(rowKey));
    //3.给Put对象赋值
    put.addColumn(Bytes.toBytes(cf),Bytes.toBytes(cn),Bytes.toBytes(value));
    //4.插入数据
    table.put(put);
    //5.关闭表,不要放在connection中一起关闭
    table.close();
}
//6.获取数据(get)
public static void getData(String tableName, String rowKey,String cf,String cn) throws IOException {
    //1、获取表对象
    Table table = connection.getTable(TableName.valueOf((tableName)));
    //2.创建get对象
    Get get=new Get(Bytes.toBytes(rowKey));
    //2.1 指定获取的列族
    //get.addFamily(Bytes.toBytes(cf));
    //2.2 指定获取的列族和列
    //get.addColumn(Bytes.toBytes(cf),Bytes.toBytes(cn));
    //2.3 设置获取数据的版本数
    //get.setMaxVersions();//默认最大版本,即获取所有版本数据
    //get.setMaxVersions(2);//获取最新的两个版本数据
    //3.获取数据
    Result result =table.get(get);
    //4.解析result数据
    for (Cell cell : result.rawCells()) {
        //5.打印数据
        System.out.println("CF:"+Bytes.toString(CellUtil.cloneFamily(cell))
                +",CN:"+Bytes.toString(CellUtil.cloneQualifier(cell))
                +",Value:"+Bytes.toString(CellUtil.cloneValue(cell)));
    }
    //5.关闭表连接
    table.close();

}
//获取数据(scan)
public static void scanTable(String tableName) throws IOException {
    //1.获取表对象
    Table table = connection.getTable(TableName.valueOf(tableName));
    //2.创建Scanner对象
    Scan scan = new Scan();//空参扫描全表
    //2.1 指定rowkey范围
    //Scan scan=new Scan(Bytes.toBytes("002"),Bytes.toBytes("002"));//左闭右开
    //3.扫描表
    ResultScanner resultScanner = table.getScanner(scan);
    //4.解析表
    for (Result result : resultScanner) {
        //5.解析result并打印数据
        for (Cell cell : result.rawCells()) {
            System.out.println("CF:"+Bytes.toString(CellUtil.cloneFamily(cell))
                    +",CN:"+Bytes.toString(CellUtil.cloneQualifier(cell))
                    +",Value:"+Bytes.toString(CellUtil.cloneValue(cell)));
        }
    }
    //6.关闭表连接
    table.close();
}
//删除数据
public static void deleteData(String tableName,String rowKey,String cf,String cn) throws IOException {
    //1.获取表
    Table table = connection.getTable(TableName.valueOf(tableName));
    //2.构建删除对象
    Delete delete = new Delete(Bytes.toBytes(rowKey));
    //2.1 设置删除的列
    //删除最新版本,如果添加时间戳,删除指定时间戳的版本,如果没有则不删除(不符合日常实际应用,少用)
    delete.addColumn(Bytes.toBytes(cf),Bytes.toBytes(cn));//添加删除标记
    //删除所有版本 ,如果添加时间戳。删除小于时间戳的版本
    delete.addColumns(Bytes.toBytes(cf),Bytes.toBytes(cn));//直接删除
    //2.2 设置删除的列族
    delete.addFamily(Bytes.toBytes(cf));
    //3.执行删除操作
    table.delete(delete);
    //4.关闭连接
    table.close();
}
public static void close() throws IOException {
    if(admin!=null)
    {
        admin.close();
    }
    if(connection!=null)
    {
        connection.close();
    }
}
public static void main(String[] args) throws IOException {
    //1、测试表是否存在
    //System.out.println(isTableExist("student"));
    //2、创建表测试
    //createTable("student","info1","info2");
    //3、删除表测试
    //dropTable("student");
    //4、创建命名空间测试
    //createNameSpace("0202");
    //createTable("0202:student","info1","info2");//(在命名空间0202上创建表)
    //5.表插入数据测试
    //putData("student","001","info1","school","whut");
    //6.获取单行数据(根据RowKey)
    //getData("student","001","info1","school");
    //7.测试scan表
    scanTable("student");
    //8.测试删除
    deleteData("student","001","info1","school");
    //关闭资源
    close();
}


static {
    try {
        //1、获取配置文件信息
        Configuration configuration = HBaseConfiguration.create();
        configuration.set("hbase.zookeeper.quorum", "master");
        //hbase-site.xml配置文件中 hbase.zookeeper.quorum 的值

        //2、创建连接对象
        connection = ConnectionFactory.createConnection(configuration);

        //2、获取admin对象
        admin = connection.getAdmin();
    } catch (IOException e) {
        e.printStackTrace();
    }
}
//判断表是否存在
public static boolean isTableExist(String tableName) throws IOException {
//创建表
public static void createTable(String tableName, String... cfs) throws IOException// ... 传参数个数不确定,可以为0
{
    //1、判断列族信息是否存在
    if (cfs.length &lt;= 0) {
        System.out.println("请设置列族信息");
        return;
    }

    //2、判断表是否存在
    if (isTableExist(tableName)) {
        System.out.println(tableName + "表已经存在");
        return;
    }

    //3、创建表描述器
    HTableDescriptor hTableDescriptor = new HTableDescriptor(TableName.valueOf(tableName));

    //4、循环添加列族信息
    for (String cf : cfs) {
        //5、创建列族描述器
        HColumnDescriptor hColumnDescriptor = new HColumnDescriptor(cf);
        //6、添加具体列族
        hTableDescriptor.addFamily(hColumnDescriptor);
    }
    //7、创建表
    admin.createTable(hTableDescriptor);
}

//删除表
public static void dropTable(String tableName) throws IOException {
    //1、判断表是否存在
    if (!isTableExist(tableName)) {
        System.out.println(tableName + "表不存在");
        return;
    }
    //2、使表下线
    admin.disableTable(TableName.valueOf(tableName));
    //3、删除表
    admin.deleteTable(TableName.valueOf(tableName));
}

//创建命名空间
public static void createNameSpace(String ns) {
    //1、创建命名空间描述器
    NamespaceDescriptor.Builder builder = NamespaceDescriptor.create(ns);
    NamespaceDescriptor namespaceDescriptor = builder.build();
    //2、创建命名空间
    try {
        admin.createNamespace(namespaceDescriptor);
    } catch (NamespaceExistException e)
    {
        System.out.println(ns+"命名空间已经存在");
    } catch (IOException e) {
        e.printStackTrace();
    }
}
//向表插入数据
public static void putData(String tableName, String rowKey, String cf,String cn,String value) throws IOException {
    //1.获取表对象
    Table table = connection.getTable(TableName.valueOf(tableName));
    //2.创建put对象
    Put put = new Put(Bytes.toBytes(rowKey));
    //3.给Put对象赋值
    put.addColumn(Bytes.toBytes(cf),Bytes.toBytes(cn),Bytes.toBytes(value));
    //4.插入数据
    table.put(put);
    //5.关闭表,不要放在connection中一起关闭
    table.close();
}
//6.获取数据(get)
public static void getData(String tableName, String rowKey,String cf,String cn) throws IOException {
    //1、获取表对象
    Table table = connection.getTable(TableName.valueOf((tableName)));
    //2.创建get对象
    Get get=new Get(Bytes.toBytes(rowKey));
    //2.1 指定获取的列族
    //get.addFamily(Bytes.toBytes(cf));
    //2.2 指定获取的列族和列
    //get.addColumn(Bytes.toBytes(cf),Bytes.toBytes(cn));
    //2.3 设置获取数据的版本数
    //get.setMaxVersions();//默认最大版本,即获取所有版本数据
    //get.setMaxVersions(2);//获取最新的两个版本数据
    //3.获取数据
    Result result =table.get(get);
    //4.解析result数据
    for (Cell cell : result.rawCells()) {
        //5.打印数据
        System.out.println("CF:"+Bytes.toString(CellUtil.cloneFamily(cell))
                +",CN:"+Bytes.toString(CellUtil.cloneQualifier(cell))
                +",Value:"+Bytes.toString(CellUtil.cloneValue(cell)));
    }
    //5.关闭表连接
    table.close();

}
//获取数据(scan)
public static void scanTable(String tableName) throws IOException {
    //1.获取表对象
    Table table = connection.getTable(TableName.valueOf(tableName));
    //2.创建Scanner对象
    Scan scan = new Scan();//空参扫描全表
    //2.1 指定rowkey范围
    //Scan scan=new Scan(Bytes.toBytes("002"),Bytes.toBytes("002"));//左闭右开
    //3.扫描表
    ResultScanner resultScanner = table.getScanner(scan);
    //4.解析表
    for (Result result : resultScanner) {
        //5.解析result并打印数据
        for (Cell cell : result.rawCells()) {
            System.out.println("CF:"+Bytes.toString(CellUtil.cloneFamily(cell))
                    +",CN:"+Bytes.toString(CellUtil.cloneQualifier(cell))
                    +",Value:"+Bytes.toString(CellUtil.cloneValue(cell)));
        }
    }
    //6.关闭表连接
    table.close();
}
//删除数据
public static void deleteData(String tableName,String rowKey,String cf,String cn) throws IOException {
    //1.获取表
    Table table = connection.getTable(TableName.valueOf(tableName));
    //2.构建删除对象
    Delete delete = new Delete(Bytes.toBytes(rowKey));
    //2.1 设置删除的列
    //删除最新版本,如果添加时间戳,删除指定时间戳的版本,如果没有则不删除(不符合日常实际应用,少用)
    delete.addColumn(Bytes.toBytes(cf),Bytes.toBytes(cn));//添加删除标记
    //删除所有版本 ,如果添加时间戳。删除小于时间戳的版本
    delete.addColumns(Bytes.toBytes(cf),Bytes.toBytes(cn));//直接删除
    //2.2 设置删除的列族
    delete.addFamily(Bytes.toBytes(cf));
    //3.执行删除操作
    table.delete(delete);
    //4.关闭连接
    table.close();
}
public static void close() throws IOException {
    if(admin!=null)
    {
        admin.close();
    }
    if(connection!=null)
    {
        connection.close();
    }
}
public static void main(String[] args) throws IOException {
    //1、测试表是否存在
    //System.out.println(isTableExist("student"));
    //2、创建表测试
    //createTable("student","info1","info2");
    //3、删除表测试
    //dropTable("student");
    //4、创建命名空间测试
    //createNameSpace("0202");
    //createTable("0202:student","info1","info2");//(在命名空间0202上创建表)
    //5.表插入数据测试
    //putData("student","001","info1","school","whut");
    //6.获取单行数据(根据RowKey)
    //getData("student","001","info1","school");
    //7.测试scan表
    scanTable("student");
    //8.测试删除
    deleteData("student","001","info1","school");
    //关闭资源
    close();
}
}


原文链接:https://blog.51cto.com/u_16099176/7260853

posted on   sunny123456  阅读(179)  评论(0编辑  收藏  举报
相关博文:
阅读排行:
· DeepSeek 开源周回顾「GitHub 热点速览」
· 物流快递公司核心技术能力-地址解析分单基础技术分享
· .NET 10首个预览版发布:重大改进与新特性概览!
· AI与.NET技术实操系列(二):开始使用ML.NET
· .NET10 - 预览版1新功能体验(一)
点击右上角即可分享
微信分享提示