【问题标题】:Apache Spark logging extended planApache Spark 日志记录扩展计划
【发布时间】:2016-12-11 09:44:32
【问题描述】:

我想登录df.explain(true) 我想看看物理和逻辑计划。 我在文档中没有找到如何使用log4j.properties 执行此操作的任何地方,查看源代码似乎他们使用println() 进行打印,这意味着他们使用标准输出。

我怎样才能做到这一点?

【问题讨论】:

    标签: apache-spark spark-dataframe


    【解决方案1】:

    我在 spark JIRA 上打开了一个问题:SPARK-18829 用于此问题。 现在您可以使用打印解释计划,

    df.queryExecution.toString 
    

    此代码返回一个带有物理/分析/逻辑计划的字符串

    【讨论】:

      猜你喜欢
      • 2015-05-26
      • 2015-11-25
      • 1970-01-01
      • 2021-10-04
      • 2013-12-29
      • 1970-01-01
      • 2018-01-24
      • 1970-01-01
      • 1970-01-01
      相关资源
      最近更新 更多