如何在Python中读取带有重音字符的UTF8 CSV文件？

使用 Python 读取 UTF8 CSV 文件

由于 Python 的 ASCII 支持有限，因此在 Python 中读取包含重音字符的 CSV 文件可能具有挑战性。本文探讨了此问题的解决方案，解决尝试读取此类文件时遇到的“UnicodeDecodeError”。

Unicode 友好的 CSV 阅读器

要处理重音字符，我们需要一个 CSV 阅读器支持Unicode编码。以下代码修改了标准 CSV 读取器：

<code class="python">def unicode_csv_reader(unicode_csv_data, dialect=csv.excel, **kwargs):
    # Decode UTF-8 data into Unicode strings
    csv_reader = csv.reader(unicode_csv_data, dialect=dialect, **kwargs)
    for row in csv_reader:
        yield [unicode(cell, 'utf-8') for cell in row]</code>

UTF-8 编码器

原始解决方案错误地将编码应用于字节字符串而不是 Unicode 字符串。下面的代码纠正了这个错误：

<code class="python">import csv

def unicode_csv_reader(utf8_data, dialect=csv.excel, **kwargs):
    csv_reader = csv.reader(utf8_data, dialect=dialect, **kwargs)
    for row in csv_reader:
        yield [unicode(cell, 'utf-8') for cell in row]</code>

示例用法

现在我们可以自信地读取 UTF8 编码的 CSV 文件，如下所示：

<code class="python">filename = 'output.csv'
reader = unicode_csv_reader(open(filename))

# Iterate through the rows, fields
for field1, field2, field3 in reader:
    print field1, field2, field3 </code>

输入数据注意事项编码

请记住，提供的解决方案假设输入数据已经采用 UTF8 编码。如果不是这种情况，您可以使用decode方法将其转换为UTF8，然后再将其传递给CSV阅读器。

以上是如何在Python中读取带有重音字符的UTF8 CSV文件？的详细内容。更多信息请关注PHP中文网其他相关文章！