【发布时间】:2018-01-04 20:01:35
【问题描述】:
我刚刚在端口 10016(默认)上使用 Hive 和 Spark Thrift Server 构建了一个 Hortonworks 集群,并通过直线到 STS 测试了 SELECT 语句
https://spark.apache.org/docs/1.6.0/sql-programming-guide.html#running-the-thrift-jdbcodbc-server
beeline> !connect jdbc:hive2://localhost:10016/default
select * from table1;
我可以得到结果,一切都很好。但我的问题是查询为什么根本不显示在 Spark History Server UI 中?我怎么知道它是否真的是 Spark 做计算工作还是通过 HiveServer2?
更新 1
这是我所拥有的,并且默认情况下已经启用日志:
【问题讨论】:
标签: apache-spark hive apache-spark-sql beeline spark-thriftserver