上传python数据帧时出现Unicode编码错误

Question

我有一个读取 csv 或 excel 文件的 python pandas 数据框，如下所示：

if fileType == 'csv':
            df = pd.read_csv( templateFilePath, converters=converters )
        else:
            df = pd.read_excel( templateFilePath, sheetname=sheetName, converters=converters )

        df.fillna( '', inplace=True )

在我尝试上传的文件之一中，它具有值：Banque des Règlements Internationaux (BRI) - Bâle / Bank for International Settlements

因此我不断收到此错误：UnicodeEncodeError: 'ascii' codec can't encode characters in position 12-15: ordinal not in range(128)

我该如何解决这个问题？

更新：

这样做：

        if fileType == 'csv':
            df = pd.read_csv( templateFilePath, converters=converters )
        else:
            df = pd.read_excel( templateFilePath, sheetname=sheetName, converters=converters )

        df.fillna( '', inplace=True )
       # for col in colNames:
        df['COUNTRY_NAME']=df['COUNTRY_NAME'].map(lambda x: x.encode('unicode-escape').decode('utf-8'))

它修复了上传文件时出现的错误。但我不想指定任何列名（就像这里我指定'country_name'），因为 unicode 可以出现在任何列中。我该怎么做？

Answer 1

我遇到了UnicodeEncodeError 并使用encoding=latin-1 修复了代码：

if fileType == 'csv':
    try:
        df = pd.read_csv( templateFilePath, converters=converters )
    except UnicodeDecodeError:
        df = pd.read_csv( templateFilePath, converters=converters, encoding='latin-1' )

编辑：

我认为这个问题不再有意义。无论如何，这是对您的其他（看似无关）问题的回答：

def re_encode(x):
    try:
        x_ = x.encode('unicode-escape').decode('utf-8')
    except:
        x_ = x
    return x_

df = df.applymap(re_encode)