减少蜂巢启动时间为许多蜂巢-e调用

Question

我调用蜂巢-e数百次在命令行中这样说：

cat hive_script.hql | parallel --gnu hive -e '{}' 

其中hive_script.hql每行可以独立运行，并在任何订购。

是否有任何--hiveconf参数可以减少启动时间？ Apache的网页似乎表明有可能是在

https://cwiki.apache.org/confluence/display/Hive/LanguageManual+VariableSubstitution

"This is frustrating as Hive becomes closely coupled with scripting languages. The Hive startup time of a couple seconds is non-trivial when doing thousands of manipulations such as multiple hive -e invocations." 

Answer 1

你不能加快蜂巢-e起来，但你可以把多个查询在一个脚本中。

如果这不起作用，您需要查看HiveServer2并调用JDBC客户端的查询。