【问题标题】:TFX / Tensorflow Data Validation (TFDV) throws overflow encountered in float_scalars errorTFX / Tensorflow 数据验证 (TFDV) 抛出 float_scalars 错误中遇到的溢出
【发布时间】:2019-04-20 09:01:17
【问题描述】:

按照基本教程,并尝试为 TFRecord 生成统计信息,我收到一个溢出错误:

import tensorflow_data_validation as tfdv
stats = tfdv.generate_statistics_from_tfrecord(data_location='/path/tfrec-train-00067-of-00100')

Error:
basic_stats_generator.py:221: RuntimeWarning: overflow encountered in float_scalars
  self.sum_of_squares += v * v

数据集是音频示例 (float32)

是否需要做一些不同的事情来处理这些类型的示例?

【问题讨论】:

  • 我通过在“for v in value:”循环之前将 v 变量初始化为 float128:v = np.float128(0.0) 实现了一个解决方法。

标签: tensorflow-data-validation


【解决方案1】:

此问题已修复(GitHub commit)

【讨论】:

    猜你喜欢
    • 2023-04-02
    • 1970-01-01
    • 2021-12-13
    • 2021-10-08
    • 2017-11-19
    • 1970-01-01
    • 1970-01-01
    • 2020-05-21
    • 1970-01-01
    相关资源
    最近更新 更多