UnicodeDecodeError：“ascii”编解码器无法解码位置 47 中的字节 0x92：序号不在范围内（128）

我正在尝试使用 Python 在 StringIO 对象中写入数据，然后最终使用 psycopg2 的 copy_from() 函数将此数据加载到 postgres 数据库中。

首先，当我这样做时，copy_from()抛出错误：错误：编码“UTF8”的字节序列无效：0xc92所以我遵循这个问题.

我发现我的 Postgres 数据库有 UTF8 编码。

我正在写入数据的文件/StringIO 对象显示其编码如下： setgid 非 ISO 扩展 ASCII 英文文本，行很长，带有 CRLF 行终止符

我尝试将写入中间文件/StringIO 对象的每个字符串编码为 UTF8 格式。为此，对每个字符串使用 .encode(encoding='UTF-8',errors='strict')) 。

这是我现在得到的错误： UnicodeDecodeError：“ascii”编解码器无法解码位置 47 中的字节 0x92：序号不在范围内（128）

这是什么意思？我如何解决它？

编辑： 我正在使用Python 2.7 我的一些代码：

我从 MySQL 数据库读取数据，该数据库按照 MySQL Workbench 以 UTF-8 编码的数据。 这是几行代码，用于将我的数据（从 MySQL 数据库获取）写入 StringIO 对象：

# Populate the table_data variable with rows delimited by \n and columns delimited by \t
row_num=0
for row in cursor.fetchall() :

    # Separate rows in a table by new line delimiter
    if(row_num!=0):
        table_data.write("\n")

    col_num=0
    for cell in row:    
        # Separate cells in a row by tab delimiter
        if(col_num!=0):
            table_data.write("\t") 

        table_data.write(cell.encode(encoding='UTF-8',errors='strict'))
        col_num = col_num+1

    row_num = row_num+1   

这是从我的 StringIO 对象 table_data 写入 Postgres 数据库的代码：

cursor = db_connection.cursor()
cursor.copy_from(table_data, <postgres_table_name>)

问题是你正在打电话encode on a str object.

A str是一个字节字符串，通常表示以某种方式编码的文本，例如 UTF-8。你打电话时encode为此，首先必须将其解码回文本，以便可以对文本进行重新编码。默认情况下，Python 通过调用来做到这一点s.decode(sys.getgetdefaultencoding()), and getdefaultencoding()通常会返回'ascii'.

因此，您所说的是 UTF-8 编码的文本，将其解码为 ASCII，然后以 UTF-8 重新编码。

一般的解决方案是显式调用decode使用正确的编码，而不是让Python使用默认的编码，然后encode结果。

但是，当正确的编码已经是您想要的编码时，更简单的解决方案是跳过.decode('utf-8').encode('utf-8')只需使用 UTF-8str作为 UTF-8str已经是这样了。

或者，如果您的 MySQL 包装器具有允许您指定编码并返回的功能unicode值CHAR/VARCHAR/TEXT列而不是str值（例如，在 MySQLdb 中，您传递use_unicode=True to the connect致电，或charset='UTF-8'如果您的数据库太旧而无法自动检测），就这样做。然后你就会有unicode对象，你可以调用.encode('utf-8')在他们。

一般来说，处理 Unicode 问题的最佳方法是最后一种 - 尽早解码所有内容，以 Unicode 进行所有处理，然后尽可能晚地编码。但无论哪种方式，你都必须保持一致。不要打电话str在某件事上可能是unicode;不要连接str字面意思是unicode或将一个传递给它replace方法;任何时候你混合和匹配时，Python 都会使用你的默认编码为你隐式转换，这几乎不是你想要的。

附带说明一下，这是 Python 3.x 的 Unicode 更改所提供的众多帮助之一。第一的，str现在是 Unicode 文本，而不是编码字节。更重要的是，如果你have编码字节，例如，在bytes对象，调用encode会给你一个AttributeError而不是尝试静默解码以便重新编码。并且，类似地，尝试混合和匹配 Unicode 和字节会给你一个明显的结果TypeError，而不是在某些情况下成功的隐式转换，并给出有关您在其他情况下未要求的编码或解码的神秘消息。