【问题标题】:Deeplearning4j Disable LoggingDeeplearning4j 禁用日志记录
【发布时间】:2018-02-23 21:29:56
【问题描述】:

我有一个针对 Java 的深度学习项目,它在 STDO 上产生了大量的记录器输出。我想禁用它,但我似乎不知道该怎么做。

我的 src/main/resources 文件夹中有一个 log4j.properties 文件,如下所示:

log4j.rootLogger=ERROR, Console
log4j.logger.play=WARN
log4j.appender.Console=org.apache.log4j.ConsoleAppender
log4j.appender.Console.layout=org.apache.log4j.PatternLayout
log4j.appender.Console.layout.ConversionPattern=%d{ABSOLUTE} %-5p ~ %m%n

log4j.appender.org.springframework=WARN
log4j.appender.org.nd4j=WARN
log4j.appender.org.canova=WARN
log4j.appender.org.datavec=WARN
log4j.appender.org.deeplearning4j=WARN
log4j.appender.opennlp.uima=OFF
log4j.appender.org.apache.uima=OFF
log4j.appender.org.cleartk=OFF

log4j.logger.org.springframework=WARN
log4j.logger.org.nd4j=WARN
log4j.logger.org.canova=WARN
log4j.logger.org.datavec=WARN
log4j.logger.org.deeplearning4j=WARN
log4j.logger.opennlp.uima.util=OFF
log4j.logger.org.apache.uima=OFF
log4j.logger.org.cleartk=OFF
log4j.logger.org.deeplearning4j.optimize.solvers.BaseOptimizer=OFF
slf4j.logger.org.deeplearning4j.optimize.solvers.BaseOptimizer=OFF

太多的具体输出是:

21:26:34.860 [main] DEBUG o.d.optimize.solvers.BaseOptimizer - Hit termination condition on iteration 0: score=1.2894165074915344E19, oldScore=1.2894191699433697E19, condition=org.deeplearning4j.optimize.terminations.EpsTermination@55f111f3

在训练时每秒发生多次。

【问题讨论】:

  • 您是否尝试将log4j.appender.org.deeplearning4j=WARN 添加到您的log4j.properties
  • @DanW 已经在里面了

标签: java logging log4j slf4j deeplearning4j


【解决方案1】:

您提供的日志条目的输出看起来非常像 Logback 格式的 SLF4J 输出(不是 LOG4J 输出)。

deeplearning4j-core 建议 SLF4J 的依赖项也用于日志记录。

因此,您的 log4j.properties 对 deeplearning4j 日志记录没有影响。尝试将logback.xml 配置也添加到资源中并切换到根记录器的WARN 或ERROR 级别,请参阅https://logback.qos.ch/manual/configuration.html

【讨论】:

    【解决方案2】:

    框架 DL4J (1.0.0-beta7) 中有一些属性可以激活/停用日志。我找到了一些:

    import org.nd4j.common.config.ND4JSystemProperties;
    
    System.setProperty(ND4JSystemProperties.LOG_INITIALIZATION, "false");
    System.setProperty(ND4JSystemProperties.ND4J_IGNORE_AVX, "true");
    System.setProperty(ND4JSystemProperties.VERSION_CHECK_PROPERTY, "false");
    

    请注意,这是一个非常规的解决方案。另一方面,有些信息是无法避免的:

    MultiLayerNetwork.init()
    

    在这个方法中你可以找到一个没有验证的 OneTimeLogger:

        OneTimeLogger.info(log, "Starting MultiLayerNetwork with WorkspaceModes set to [training: {}; inference: {}], cacheMode set to [{}]",
                layerWiseConfigurations.getTrainingWorkspaceMode(),
                layerWiseConfigurations.getInferenceWorkspaceMode(),
                layerWiseConfigurations.getCacheMode());
    

    如果您找到更好的方法来禁用 DL4J 中的日志消息,请分享。 DL4J 库之外还有其他一些方法。

    【讨论】:

      猜你喜欢
      • 2018-07-17
      • 2011-06-22
      • 2015-04-21
      • 2015-02-01
      • 2012-09-21
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      相关资源
      最近更新 更多