Hive之变量和属性

首先看一下hive cli工具对于变量的定义规定的几项功能:

$ bin/hive -h

usage: hive

-d,--define <key=value>          Variable subsitution to apply to hive

commands. e.g. -d A=B or --define A=B

--database <databasename>     Specify the database to use

-e <quoted-query-string>         SQL from command line

-f <filename>                    SQL from files

-H,--help                        Print help information

-h <hostname>                    connecting to Hive Server on remote host

--hiveconf <property=value>   Use value for given property

--hivevar <key=value>         Variable subsitution to apply to hive

commands. e.g. --hivevar A=B

-i <filename>                    Initialization SQL file

-p <port>                        connecting to Hive Server on port number

-S,--silent                      Silent mode in interactive shell

-v,--verbose                     Verbose mode (echo executed SQL to the

console)

从上面输出可以看到,其中选项(-d,--define <key=value>),(--hiveconf <property=value>),(--hivevar <key=value>)都用于指定hive变量和属性。在cli中我们可以通过set命令修改或显示变量内容。

使用(-d,--define <key=value>)和(--hivevar <key=value>)是等价的,这两个属性都可以在cli定义用户自定义变量,并且将变量放置在hivevar命令空间内,这样和其他3种系统内置命令空间进行区分。

Hive中的变量和属性相关命令空间:

例1:

$ bin/hive --define foo=bar

hive (default)> set foo;

foo=bar

hive (default)> set hivevar:foo;

hivevar:foo=bar

hive (default)> set hivevar:foo=bar1;

hive (default)> set foo;

foo=bar1

hive (default)> set hivevar:foo;

hivevar:foo=bar1

hive (default)> set foo=bar2;

hive (default)> set foo;

foo=bar2

hive (default)> set hivevar:foo;

hivevar:foo=bar1

例2:

$ bin/hive --hivevar foo=bar

hive (default)> set foo;

foo=bar

hive (default)> set hivevar:foo;

hivevar:foo=bar

hive (default)> set hivevar:foo=bar1;

hive (default)> set foo;

foo=bar1

hive (default)> set hivevar:foo;

hivevar:foo=bar1

hive (default)> set foo=bar2;

hive (default)> set foo;

foo=bar2

hive (default)> set hivevar:foo;

hivevar:foo=bar1

通过以上两个例子可以发现,--define和--hivevar结果是等价的。

例3:--hiveconf在hive启动cli时指定参数值

$ bin/hive --hiveconf hive.cli.print.current.db=false

hive> set hive.cli.print.current.db;

hive.cli.print.current.db=false

hive> set hiveconf:hive.cli.print.current.db;

hiveconf:hive.cli.print.current.db=false

hive> set hiveconf:hive.cli.print.current.db=true;

hive (default)> set hive.cli.print.current.db=false;

hive> set hiveconf:hive.cli.print.current.db;

hiveconf:hive.cli.print.current.db=false

hive> set hive.cli.print.current.db;

hive.cli.print.current.db=false

注意:system和env变量前的system:和env:不能省略。

修改hive参数的方法:

方法一:

在Hive中,所有的默认配置都在${HIVE_HOME}/conf/hive-default.xml文件中,如果需要对默认的配置进行修改,可以创建一个hive-site.xml文件,放在${HIVE_HOME}/conf目录下。里面可以对一些配置进行个性化设定。Hive也会读入Hadoop的配置,因为Hive是作为Hadoop的客户端启动的,Hive的配置会覆盖Hadoop的配置。在hive-site.xml的格式如下:


1


<configuration>


2


<property>


3


<name>hive.metastore.warehouse.dir</name>


4


<value>/user/hive/warehouse</value>


5


<description>location of


6


default database for the warehouse</description>


7


</property>


8


</configuration>

方法二:

在启动Hive cli的时候进行配置,可以在命令行添加-hiveconf param=value来设定参数,例如:


1


$ hive --hiveconf mapreduce.job.queuename=queue1

这样在Hive中所有MapReduce作业都提交到队列queue1中。这一设定对本次启动的会话有效,下次启动需要重新配置。

方法三:

在已经进入cli时进行参数声明,可以在HQL中使用SET关键字设定参数,例如:


1


hive> set mapreduce.job.queuename=queue1;

这样也能达到方法二的效果。这种配置也是对本次启动的会话有效,下次启动需要重新配置。

上述三种设定方式的优先级依次递增。即参数声明覆盖命令行参数,命令行参数覆盖配置文件设定。

时间: 2024-11-11 15:09:31

Hive之变量和属性的相关文章

Hive中变量的使用

1.Hive配置属性 (1)命令行方式 Hive配置属性存储于 hiveconf 命名空间中,该命名空间中的属性是可读写的.在查询语句中插入 '${hiveconf:变量名}',就可以通过 hive -hiveconf来替换变量.例如,查询语句和执行方式如下: [root]$cat test.sql #查看该文件 SELECT * FROM ${hiveconf:tablename} limit ${hiveconf:var_rows}; [root]$hive -hiveconf tablen

iOS 成员变量,实例变量,属性变量的区别,联系

在ios第一版中: 我们为输出口同时声明了属性和底层实例变量,那时,属性是oc语言的一个新的机制,并且要求你必须声明与之对应的实例变量,例如: 注意:(这个是以前的用法) @interface MyViewController :UIViewController { UIButton *myButton; } @property (nonatomic, retain) UIButton *myButton; @end 在现在iOS版本中: 苹果将默认编译器从GCC转换为LLVM(low leve

JS_ 垃圾回收、变量与属性、作用域链

1.垃圾回收 js的垃圾回收机制不同于java,c等语言需要手工回收,js中的垃圾回收是自动启动的,大致过程:js解释器会判断一个对象是否是可达的,即是否有变量指向它,没有,则启动回收机制,释放该对象占用的内存,eg: 1 var s = "hello world"; 2 var s2 = s.toUpperCase();//创建新字符串:"HELLO WORLD" 3 s2 = s;//"hello world"没有变量指向,占用内存被释放 这

Objective-C Runtime 运行时之二:成员变量与属性

类型编码(Type Encoding) 作为对Runtime的补充,编译器将每个方法的返回值和参数类型编码为一个字符串,并将其与方法的selector关联在一起.这种编码方案在其它情况下也是非常有用的,因此我们可以使用@encode编译器指令来获取它.当给定一个类型时,@encode返回这个类型的字符串编码.这些类型可以是诸如int.指针这样的基本类型,也可以是结构体.类等类型.事实上,任何可以作为sizeof()操作参数的类型都可以用于@encode(). 在Objective-C Runti

Objective-C 实例变量与属性的区别

记得刚学习OC时,对实例变量和属性总是不太清楚. 比如下面代码中在打印Person类对象的名字时,什么时候用带“_”的name,NSLog(@"%@",p1->_name); 什么时候用不带“_”的name,NSLog(@"%@",p1.name); 现在回想起来也是挺有意思的过往,写下自己曾经的迷惘,纪念一下青春?.... 首先,使用实例变量编写代码.以及实例变量赋值要用到getter.setter方法. @interface Person : NSObje

实例变量和属性

实例变量和属性 声明 Person 文件中 @interface Person : NSObject { NSString *_name; //实例变量 } @property(copy) NSString *firstName; //属性 @property(copy) NSString *lastName; @end _name 是实例变量,实例变量是类私有的变量,其他类对象无法直接访问: 写在头文件中的 firstName是属性,public,其他类对象可以直接访问:写在m文件中的属性是p

【转截】iOS成员变量、实例变量、属性变量三者的联系与区别

一.类Class中的属性property 在ios第一版中: 我们为输出口同时声明了属性和底层实例变量,那时,属性是oc语言的一个新的机制,并且要求你必须声明与之对应的实例变量,例如: 注意:(这个是以前的用法) @interface MyViewController :UIViewController { UIButton *myButton; } @property (nonatomic, retain) UIButton *myButton; @end 在现在iOS版本中: 苹果将默认编译

iOS开发中 类、对象、实例变量、成员变量、属性变量等区别和关系

类(class):具有相同属性和行为等同一类元素等总称,类是一个抽象的概念. 区分是类还是对象,看它能否继续被细分. 在OC中,类是表示对象类型的结构体,对象通过类来获取自身的各种信息.类由两个部分组成:*.h和*.m文件组成. *.m文件中 implemention部分是类的实现部分,内部包含类中的各种信息,包括各种实例方法或类方法. 类别( category):是为现有的类添加新方法的方式,通常以"类名称+类别名称"来命名. 类别中不能添加新的实例变量.但是可以在类别中添加属性.

runtime第二部分成员变量和属性

接上一篇 http://www.cnblogs.com/ddavidXu/p/5912306.html 转载来源http://www.jianshu.com/p/6b905584f536 http://southpeak.github.io/2014/10/30/objective-c-runtime-2/ 比较实用的内容都用颜色的字标记,并配有代码,并在末尾放上代码demo. 类型编码(Type Encoding) Objective-C不支持long double类型.@encode(lon