本文主要介绍了shell命令执行hive脚本(hive交互),文中通过示例代码介绍的非常详细,具有一定的参考价值,感兴趣的小伙伴们可以参考一下

打开网易新闻 查看精彩图片

Hive执行方式

Hive的hql命令执行方式有三种:

1、CLI 方式直接执行

2、作为独立文件,通过shell调用 hive –f或hive –i执行执行

3、作为字符串通过shell调用hive –e执行(-S开启静默,去掉”OK”,”Time taken”)

方式1

键入“hive”,启动hive的cli交互模式。Set可以查看所有环境设置参数,并可以重设。其他命令如,
Use database 选择库
quit/exit 退出Hive的交互模式
set –v 显示Hive中的所有变量
set

设置参数 执行本地shell :!

交互模式下可执行shell命令,例如(查看linux根目录下文件列表:"!ls -l /;") 操作云命令:dfs < command> 交互模式下直接操作hadoop命令如 dfs fs –ls Hql语句 执行查询并输出到标准输出 add [FILE|JAR|ARCHIVE]

]* 增加一个文件到资源列表 list FILE 列出所有已经添加的资源

方式二

hql语句保存为独立文件,后缀名不限制,可以用.q或者.hql作为标识:

A,这个文件在cli模式下,用source命令执行,如:source ./mytest.hql

B,在shell中执行命令,如:hive -f mytest.sql

Hive指定预执行文件命令“hive –i”(或叫初始化文件)

命令:hive -i hive-script.sql
在hive启动cli之前,先执行指定文件(hive-script.sql)中的命令。
也就是说,允许用户在cli启动时预先执行一个指定文件,比如,有一些常用的环境参数设置,频繁执行的命令,可以添加在初始化文件中,比如,
某些参数设置
set mapred.queue.names=queue3;
SET mapred.reduce.tasks=14;
添加udf文件
add JAR ./playdata-hive-udf.jar;
设置Hive的日志级别
hive -hiveconf hive.root.logger=INFO;

到此这篇关于shell命令执行hive脚本(hive交互)的文章就介绍到这了。

  • 原文来自:https://www.jb51.net/article/238877.htm
  • 本文地址:https://www.linuxprobe.com/shell-hive-linux.html编辑:吴向平,审核员:逄增宝
  • Linux命令大全:https://www.linuxcool.com/
  • Linux系统大全:https://www.linuxdown.com/
  • 红帽认证RHCE考试心得:https://www.rhce.net/