【问题标题】:Pandas does not recognise a column of floats when importing a csv导入 csv 时,Pandas 无法识别一列浮点数
【发布时间】:2013-12-18 19:50:26
【问题描述】:

我正在尝试将 IMF 统计数据读入 pandas 数据框:

import pandas as pd
df = pd.read_table("http://www.imf.org/external/pubs/ft/weo/2013/02/weodata/WEOOct2013all.xls",
                   na_values=['n/a','--'],thousands=',')

除一列外,所有列都有 dtype 对象:

In [5]: df
Out[5]:
<class 'pandas.core.frame.DataFrame'>
Int64Index: 8318 entries, 0 to 8317
Data columns (total 49 columns):
...
dtypes: float64(1), object(48)

我手动检查了文件,在大多数列中找不到任何不是数字的值,或者代码中明确提到的 NaN 值之一。

我在 Wakari.io 上的 Anaconda 1.5.0 上使用 Python 2.7.5、numpy 1.7.1、pandas 0.11.0。

【问题讨论】:

  • 尝试编写代码来迭代每列中的值并在每个列上调用float,看看在哪里/是否引发了异常。
  • 我不能,因为这些值有千位分隔符。 read_table 应该删除它们(参数数千个函数)
  • 好的,然后编写删除千位分隔符的代码,然后调用float。或者,逐渐缩减您的数据文件,直到它开始工作,然后将导致其停止工作的差异归零。
  • IIRC 这是一个在 0.12 中修复的错误......虽然不记得 ref ATM

标签: python pandas


【解决方案1】:

正如 Jeff 所说,这是 a bug in <=0.12(但在 0.13 中已修复)。

In [11]: s = '''A;B
1;2,000
3;4'''

In [12]: pd.read_csv(StringIO(s), sep=';', thousands=',')
Out[12]: 
   A     B
0  1  2000
1  3     4

[2 rows x 2 columns]

In [13]: pd.version.version
Out[13]: '0.13.0rc1-82-g66934c2'

【讨论】:

    猜你喜欢
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    • 2022-10-17
    • 1970-01-01
    • 2020-04-22
    • 1970-01-01
    • 2022-12-08
    • 2023-03-31
    相关资源
    最近更新 更多