【发布时间】:2019-04-20 09:01:17
【问题描述】:
按照基本教程,并尝试为 TFRecord 生成统计信息,我收到一个溢出错误:
import tensorflow_data_validation as tfdv
stats = tfdv.generate_statistics_from_tfrecord(data_location='/path/tfrec-train-00067-of-00100')
Error:
basic_stats_generator.py:221: RuntimeWarning: overflow encountered in float_scalars
self.sum_of_squares += v * v
数据集是音频示例 (float32)
是否需要做一些不同的事情来处理这些类型的示例?
【问题讨论】:
-
我通过在“for v in value:”循环之前将 v 变量初始化为 float128:v = np.float128(0.0) 实现了一个解决方法。
标签: tensorflow-data-validation