从csv读取数字时出现python错误

Question

我有一个 csv 文件，例如 - order_id,name,address
当我尝试通过 python 将数据从 csv 插入到 postgresql 表时，它没有正确读取数字。

例如让数据成为

order_id  |  name  |  address
----------+--------+----------
5432548543| Manish | Dummy Address

它像 5.43E+9 一样读取 order_id 而不是整数。我的代码是这样的：

filename.encode('utf-8')
with open(filename) as file:
    data = csv.DictReader(file)
    cur.executemany("""Insert into temp_unicom values(%(Order Id)s,%(Name)s,%(Address)s)""", data)

这里的订单 ID、名称、地址是我的 csv 文件的标题。

如何正确格式化数据？ 编辑：：
链接到csv文件CSV File

Answer 1

当我将您提供的示例更改为 csv 时：

order_id,name,address
5432548543,Manish,Dummy Address

只需遍历行，将它们打印出来：

with open('./data.txt') as f:
    data = csv.DictReader(f)
    for row in data:
            print(l)

我明白了：

{'order_id': '5432548543', 'name': 'Manish', 'address': 'Dummy Address'}

这表明问题不在 csv 解析步骤中 - 但您应该在数据集上尝试相同的操作以仔细检查。

那么问题是 - 您的 postgres 驱动程序在做什么可能会导致问题？你用的是psycopg2吗？它会在某处进行自动投射吗？

编辑所以问题是 src 数据。有时你有科学计数法的整数。您需要在将数据传递给executemany 之前对其进行清理：

data = csv.DictReader(f)

clean_data = []
for d in data:
    clean_data.append(d)
    try:
        d['Order Id'] = str(int(float(d['Order Id'])))
    except ValueError:
        pass

cur.executemany("""Insert into temp_unicom values (%(Order Id)s, %(Name)s, %(Address)s)""", clean_data)

Answer 2

在发送字典之前尝试将浮点数格式化为字符串。

例子-

cur.executemany("""Insert into temp_unicom values(%(Order Id)f,%(Name)s,%(Address)s)""",dict((k,v )if k != "Order Id" else (k,'%f'%(v)) for k,v in dict1.iteritems()))

另外，将字典重命名为其他名称（例如，我重命名为 dict1 ，否则它将替换内置的 dict 函数。