Hive 时间操作

Hive 时间转换

UNIX时间戳概念:因为UNIX时间戳只是一个秒数,一个UNIX时间戳在不同时区看来,时间是不同的。
如UNIX时间戳0,在0时区看来是1970-01-01 00:00:00,在东八区看来是1970-01-01 08:00:00。

hive常用时间操作示例

-- 返回UNIX时间戳代表的(格林威治零时区)时间,默认格式如下。

select from_unixtime(1);

  1970-01-01 00:00:01

select from_unixtime(1 ,‘yyyyMMdd hh:mm:ss‘);

  19700101 12:00:01

-- 获取当前时间的UNIX时间戳(时区无关的),返回值bigint(对应spark中Long)。

select unix_timestamp();

  1579508709

-- 获取日期部分

select to_date(‘2020-01-20 11:40:03‘);

  2020-01-20

-- 同样还有返回年、月、日、时、分、秒、周的函数

select year(‘2020-01-20 11:40:03‘);

  2020

select year(‘2020-01-20‘);

  2020

-- 获取月份数

select month(‘2020-01-20 11:40:03‘);

  1

select month(‘2020-01-20‘);

  1

-- 获取月份中的天数

select day(‘2020-01-20 10:03:01‘);

  20

select day(‘2020-01-20‘);

  20

select hour(‘2020-01-20 11:40:01‘);

  11

select hour(‘11:40:01‘);

  11

-- 获取时间中的分钟数

select minute(‘2020-01-20 11:40:01‘);

  40

-- 获取时间中的秒数

select second(‘2020-01-20 11:40:01‘);

  1

-- 获取当天在一年中的周数

select weekofyear(‘2020-01-20 11:40:01‘);

  31

--返回两个日期相隔天数

select datediff(‘2020-01-20‘,‘2019-12-09‘);

  42

--增加天数

select date_add(‘2020-01-20‘,10);

  2020-01-30

--减少天数

select date_sub(‘2020-01-20‘,10);

  2020-01-10

-- 1、hive取得当前日期时间:

  -- 1.1) 取得当前日期:

select current_date();

  2020-01-20

  -- 1.2) 取得当前日期时间:

select current_timestamp();

  2020-01-20 08:37:45.076

  -- 1.3) hive取得当前时间戳:

select unix_timestamp();

  1579509477

  -- 1.4) 时间戳转日期:

select from_unixtime(1579509477,‘yyyy-MM-dd HH:dd:ss‘);

  2020-01-20 08:20:57

  -- 1.5) hive取得当前时间(0时区):

select from_unixtime(unix_timestamp(),‘yyyy-MM-dd HH:dd:ss‘);

  2020-01-20 08:20:00

-- 2、hive自动计算其他日期(昨天,今天):

  -- hive中日期加减函数:date_add(start_date,num_days)

  -- 2.1) 取得昨天日期:

select date_add(from_unixtime(unix_timestamp(),‘yyyy-MM-dd‘),-1);
select date_sub(from_unixtime(unix_timestamp(),‘yyyy-MM-dd‘),1);
select date_format(date_add(from_unixtime(unix_timestamp(),‘yyyy-MM-dd‘),-1),‘yyyy-MM-dd‘);

  2020-01-19

  -- 2.2) 取得明天日期:

select date_add(from_unixtime(unix_timestamp(),‘yyyy-MM-dd‘),1);
select date_sub(from_unixtime(unix_timestamp(),‘yyyy-MM-dd‘),-1);

  2020-01-21

  -- 2.3)hive取得两个日期之间差值(差值为天数):
  -- datediff(date1,date2):date1大于date2,返回值为正,否则,返回值为负。

select datediff(from_unixtime(unix_timestamp(),‘yyyy-MM-dd‘),date_add(from_unixtime(unix_timestamp(),‘yyyy-MM-dd‘),-10));

  10

select datediff(from_unixtime(unix_timestamp(),‘yyyy-MM-dd‘),date_add(from_unixtime(unix_timestamp(),‘yyyy-MM-dd‘),10));

  -10

  -- 2.4) 字符串转时间(字符串必须为:yyyy-MM-dd格式)

select to_date(‘2020-01-20 12:12:12‘);

  2020-01-20

  -- 2.5) 日期、时间戳、字符串类型格式化输出标准时间格式:

select date_format(current_timestamp(),‘yyyy-MM-dd HH:mm:ss‘);

  2020-01-20 09:00:13

select date_format(current_date(),‘yyyyMMdd‘);

  20200120

select date_format(‘2020-01-20‘,‘yyyy-MM-dd HH:mm:ss‘); --字符串必须满足yyyy-MM-dd格式

  2020-01-20 00:00:00

  -- 2.6) utc时间转换:

select from_utc_timestamp(current_timestamp(),8);

  2020-01-20 09:00:51.749

select to_utc_timestamp(current_timestamp(),8);

  2020-01-20 09:01:06.89

备注:
作者:Jason Zeng
博客:http://www.cnblogs.com/zengming/ 
GItHub:https://github.com/lovelifeming
严正声明:
1.由于本博客部分资源来自互联网,版权均归原作者所有。转载的目的是用于学术交流与讨论学习,将不对任何资源负法律责任。
2.若无意中侵犯到您的版权利益,请来信联系我,我会在收到信息后会尽快给予处理!
3.所有资源内容仅供学习交流之用,请勿用作商业用途,谢谢。
4.如有转发请注明出处,来源于http://www.cnblogs.com/zengming/,谢谢合作。

原文地址:https://www.cnblogs.com/zengming/p/12218793.html

时间: 2024-11-11 00:42:35

Hive 时间操作的相关文章

Hive时间操作[转]

时间字段格式化 from_unixtime(unix_timestamp(VisitTime),'yyyy-MM-dd') 日期函数UNIX时间戳转日期函数: from_unixtime语法:   from_unixtime(bigint unixtime[, string format]) 返回值: string 说明: 转化UNIX时间戳(从1970-01-01 00:00:00 UTC到指定时间的秒数)到当前时区的时间格式 举例: hive>   select from_unixtime(

HIVE入门操作

1      HIVE入门操作 1.1      连接环境 输入 hive;进入hive环境 输入 quit;退出hive环境 1.2      查看数据库 show databases; 1.3      创建数据库 create database mng; 1.4      链接数据库 use mng; 成功显示如下: 1.5      查看表 show tables; 1.6      创建表注意点 l  数据类型对比 NUMBER(14) -- BIGINT NUMBER(m,n) –

hive高级操作(优化,数据倾斜优化)

2019/2/21 星期四 hive高级操作(优化,数据倾斜优化) 分区表/桶表应用,skew,map-join //见hive的基本语法行列转换 hive 优化hive 优化思想Explain 的使用经典案例(distinct count) 数据倾斜的原因操作:关键词 情形 后果1.Join 其中一个表较小,但是key 集中分发到某一个或几个Reduce 上的数据远高于平均值 :2.大表与大表,但是分桶的判断字段0 值或空值过多这些空值都由一个reduce 处理,非常慢:3.group by

java 时间操作

记录一些时间常用操作 public class DateCa { public static void main(String[] args) throws ParseException { /** 时间操作首推Calendar 格里高利历 **/ Calendar ca = Calendar.getInstance(); //获取日期的单个属性:年,月,周,日,时,分 System.out.println(ca.get(Calendar.YEAR)); System.out.println(c

140926●日期时间操作、数学函数操作、表单验证

日期时间操作:var d=new Date();var d=new Date(1999,3,5); //时间是:1999-4-5 d.getFullYear();年d.getMonth();月(正常-1)d.getDate();天d.getDay();星期几d.getHours();d.getMinutes();d.getSeconds(); 数学函数操作:Math.ceil();Math.floor();Math.round();Math.random();Math.sqrt(); 表单验证:

javascript 时间操作

javascript时间函数 javascript提供了Date对象来进行时间和日期的计算.Date对象有多种构造函数: 1.dateObj=new Date() //当前时间 2.dateObj=new Date(milliseconds) //距离起始时间1970年1月1日的毫秒数 3.dateObj=new Date(datestring) //字符串代表的日期与时间.此字符串可以使用Date.parse()转换,比如"Jannuary 1, 1998 20:13:15" 4.d

Java学习(十一):Java中的常用时间操作

java中的时间操作不外乎这四种情况:获取当前时间,获取某个时间的某种格式,设置时间和时间的运算. 1.获取当前时间 有两种方式可以获得,第一种,使用java.util.Date类. Date date = new Date(); date.getTime(); 还有一种方式,使用System.currentTimeMillis(); 这两种方式获得的结果是一样的,都是得到一个当前的时间的long型的时间的毫秒值,这个值实际上是当前时间值与1970年一月一号零时零分零秒相差的毫秒数. 2.获取某

JavaScript日期时间操作

js日期操作: var myDate = new Date(); myDate.getYear(); //获取当前年份(2位)myDate.getFullYear(); //获取完整的年份(4位,1970-????)myDate.getMonth(); //获取当前月份(0-11,0代表1月)myDate.getDate(); //获取当前日(1-31)myDate.getDay(); //获取当前星期X(0-6,0代表星期天)myDate.getTime(); //获取当前时间(从1970.1

PHP 时间操作

日期操作很常用.下面是一个简单的功能.主要是需要区分PHP中常用的时间结构.请看下面的一段代码,涉及到了大部分的时间操作函数,相信会有帮助. <?php error_reporting(7); ini_set('display_errors', 1); ini_set('date.timezone','Asia/Shanghai'); $start_str = '2015-01-01 23:00:00'; $end_str = '2015-01-30 23:00:00'; for($i = 0;