Hive中的数据库、表、数据与HDFS的对应关系

1、hive数据库

　　我们在hive终端，查看数据库信息，可以看出hive有一个默认的数据库default，而且我们还知道hive数据库对应的是hdfs上面的一个目录，那么默认的数据库default到底对应哪一个目录呢？我们可以通过hive配置文件hive-site.xml中的一个hive.metastore.warehouse.dir配置项看到信息。

　　如上图，它告诉了我们默认数据库default在hdfs的目录。

　　在我们的metastore中，我们可以查阅表DBS来获知对应关系。

2、hive表

　　查看所有数据库：

　　使用kong这个数据库：

　　创建表：举简单的例子，create table t1(id int);

　　查看所有表：show tables;

　　查看表结构：desc t1;

　　查看表的详细信息：desc extended t1;

　　查看表的创建信息：show create table t1;

　　表在hdfs中的位置：

　　表在元数据metastore中的体现：

时间： 2024-10-10 10:06:55

Hive中的数据库、表、数据与HDFS的对应关系的相关文章

定时器中实现数据库表数据移动的功能，Exception in thread "Timer-0" isExist java.lang.NullPointerException定时器中线程报错。

1 package com.shawnway.trade.marketdata.constants; 2 import java.sql.SQLException; 3 import java.util.Calendar; 4 import java.util.Date; 5 import java.util.Timer; 6 import java.util.TimerTask; 7 8 import javax.persistence.EntityManager; 9 import java

MySQL数据库中查询数据库表、字段总数量，查询数据总量

最近要查询一些数据库的基本情况,由于以前用oracle数据库比较多,现在换了MySQL数据库,就整理了一部分语句记录下来. 1.查询数据库表数量 1 #查询MySQL服务中数据库表数据量 2 SELECT COUNT(*) TABLES, table_schema FROM information_schema.TABLES GROUP BY table_schema; 3 #查询指定数据库表数量 4 SELECT COUNT(*) TABLES, table_schema FROM infor

mssql sqlserver 使用sql脚本清空所有数据库表数据的方法分享

摘要: 下文讲述清空数据库中所有表信息的方法分享,如下所示: 实验环境:sql server 2008 实现思路: 1.禁用所有约束,外键 2.禁用所有触发器 3.删除表数据 4.开启触发器 5.开启约束 CREATE PROCEDURE proc_deleteDateSql /* 生成清除数据库表数据的脚本方法分享 */ AS EXEC sp_MSForEachTable 'ALTER TABLE ? NOCHECK CONSTRAINT ALL' EXEC sp_MSForEachTable

MO拆分计划行程序中写入PRODUCTIONORDERS表数据出现重复导致报错（BUG）20180502

错误提示:ORA-00001: 违反唯一约束条件 (ABPPMGR.C0248833319_6192)ORA-06512: 在 "STG.FP_MO_SPLIT", line 199 ORA-06512: 在 "STG.FP_MO_SPLIT", line 1318 错误描述:MO拆分计划行程序中写入PRODUCTIONORDERS表数据出现重复导致报错(BUG) 存储过程:FP_MO_SPLIT 解决方法: 原文地址:https://www.cnblogs.co

hive编程指南--employees表数据定义

hive编程指南中有个employees表,默认的分隔符比较繁杂,编辑起来不太方便(普通编辑器编辑的控制字符^A等被当成字符串处理了,没有起到分隔符的作用).收集的解决方案如下: http://www.myexception.cn/software-architecture-design/1351552.html http://blog.csdn.net/lichangzai/article/details/18703971 切记,简单的文本编辑器编辑如下的内容,分隔符是没被识别的,^A^B^C

python读取数据库表数据并写入excel

一个简单的使用python读取mysql数据并写入excel中实例 1.python连接mysql数据库 conn = pymysql.connect(user='root',host='127.0.0.1',port=3306,passwd='root',db='python',charset='utf8') #连接数据库 cur = conn.cursor() 2.读取mysql数据库中表数据 1 sql = 'select * from %s;' %table_name #需要写入exce

mysql工具导出数据库表数据

步骤1:首先,打开数据库工具,mysql的可视化工具navicat for mysql工具.进入到源数据库系统中. 步骤二:找到对应的数据库表步骤三:找到要导出来的表,右击该表,再点击[导出向导] 步骤四:选择你导出的告格式,点击下一步步骤五: 点击下一步步骤六:一直点击下一步,直达步骤七:点击开启,看到success就表示你导出数据成功了原文地址:https://www.cnblogs.com/zhouyuqiu/p/12186530.html

Python 读取MySQL数据库表数据

环境 Python 3.6 ,Window 64bit 目的从MySQL数据库读取目标表数据,并处理代码 # -*- coding: utf-8 -*- import pandas as pd import pymysql ## 加上字符集参数,防止中文乱码 dbconn=pymysql.connect( host="**********", database="kimbo", user="kimbo_test", password=&quo

SQL2008将服务器的数据库表数据插入到本地数据库

一,配置参数 exec sp_configure 'show advanced options',1 reconfigure exec sp_configure 'Ad Hoc Distributed Queries',1 RECONFIGURE 若不配置参数会出现,提示这个错误: SQL Server 阻止了对组件 'Ad Hoc Distributed Queries' 的 STATEMENT'OpenRowset/OpenDatasource' 的访问,因为此组件已作为此服务器安全配置的一