【发布时间】:2019-10-25 15:10:05
【问题描述】:
我使用 hive(2.1.1) 钩子,如下所示:
set hive.exec.post.hooks=com.test.HiveTestHook;create table tmp.hive_hook_test(x int);
我还想在 spark sql(2.4.0) 中运行这个 sql,但是我发现 hook 没有被调用。 我像这样运行 spark sql:
spark-sql -e 'set spark.hadoop.hive.exec.post.hooks=com.test.HiveTestHook;create table tmp.hive_hook_test(x int);'
所以我想知道如何在spark sql中使用hive hook?
【问题讨论】:
标签: apache-spark hadoop hive apache-spark-sql