如何正确将CSV文件读取为字典格式并避免索引越界错误

秋浩同学_6302

秋浩同学_6302

2026-06-01

430人浏览

原创

本文详解python中用csv.reader将csv转为列式字典时常见的indexerror原因(如换行符处理不当、行字段数不匹配),提供安全读取、类型转换与绘图的完整解决方案。

本文详解python中用csv.reader将csv转为列式字典时常见的indexerror原因(如换行符处理不当、行字段数不匹配),提供安全读取、类型转换与绘图的完整解决方案。

在将CSV文件按列组织为字典(如 {"DATE": [...], "OPEN": [...], ...})时,出现 IndexError: list index out of range 是典型但可规避的问题。根本原因往往不是循环逻辑错误,而是CSV解析异常导致某一行实际字段数少于表头数量——例如空行、隐藏字符、换行符未正确处理,或手动拼接数据时遗漏字段。

你代码中的核心问题出现在这一段:

for row in csv_reader:
    for i, title in enumerate(headers):
        data[title].append(row[i])  # ← 当 row 长度 <p>即使 headers = ["DATE","OPEN","HIGH","LOW","CLOSE","SPREAD"](6列),若某行因格式问题只被解析为5个元素(如末尾缺失SPREAD值),row[5] 就会越界。</p><div class="aritcle_card flexRow artxards">
											<div class="artcardd flexRow">
												<a class="aritcle_card_img" rel="nofollow" href="/xiazai/skill6686" title="QuickBooks Mileage CSV"><img
														src="https://img.php.cn/upload/skill/000/000/081/179108649715165.jpg" alt="QuickBooks Mileage CSV" onerror="this.onerror='';this.src='/static/lhimages/moren/morentu.png'" ></a>
												<div class="aritcle_card_info flexColumn">
													<a rel="nofollow" href="/xiazai/skill6686" title="QuickBooks Mileage CSV" class="overflowclass">QuickBooks Mileage CSV</a>
													<p class="overflowclass">使用 qbo-mileage CLI 及用户凭证,从 Airtable、Outlook 或 Google Calendar 记录生成 QuickBooks Online 里程 CSV 文件。</p>
												</div>
												<a rel="nofollow" href="/xiazai/skill6686" title="QuickBooks Mileage CSV" class="aritcle_card_btn flexRow flexcenter"><b></b><span>下载</span>
												</a>
											</div>
										</div><p>✅ <strong>关键修复点一:启用 newline=''</strong><br>
根据Python官方csv文档,<strong>以文本模式打开CSV文件时,必须显式指定 newline=''</strong>,否则在Windows等系统上可能因\r\n处理异常导致行截断或字段错位:</p><pre class="brush:php;toolbar:false;">with open(filename, newline='') as file:  # ✅ 必须添加
    csv_reader = csv.reader(file)
    headers = next(csv_reader)
    # ...

✅ 关键修复点二:增加行长度校验与容错处理
在追加数据前检查 len(row) == len(headers),跳过异常行并给出提示:

for row in csv_reader:
    if len(row) != len(headers):
        print(f"Warning: Skipping malformed row {row} (expected {len(headers)} fields, got {len(row)})")
        continue
    for i, title in enumerate(headers):
        data[title].append(row[i])

✅ 关键修复点三:修正后续类型转换与绘图逻辑
原代码中存在多处语法/逻辑错误:

  • float(["OPEN"][i]) → 应为 float(data["OPEN"][i])
  • ax.plot(["DATE"], ["OPEN"]) → 传入的是字符串列表,非数据;应传入 data["DATE"] 和 data["OPEN"]

完整修正版代码如下:

import csv
import datetime
import matplotlib.pyplot as plt

filename = "pathtocsv.csv"

# ✅ 正确打开CSV:指定 newline=''
with open(filename, newline='') as file:
    csv_reader = csv.reader(file)
    headers = next(csv_reader)  # 读取表头

    # 初始化字典:每个键对应一个空列表
    data = {title: [] for title in headers}

    # ✅ 安全读取每一行,跳过字段数不匹配的行
    for row_num, row in enumerate(csv_reader, start=2):  # start=2 因为第1行是header
        if len(row) != len(headers):
            print(f"Warning (line {row_num}): {len(row)} fields ≠ {len(headers)} headers. Row skipped: {row}")
            continue
        for i, title in enumerate(headers):
            data[title].append(row[i])

# ✅ 安全类型转换(带异常捕获)
for i in range(len(data["DATE"])):
    try:
        data["DATE"][i] = datetime.datetime.strptime(data["DATE"][i], '%Y-%m-%d %H:%M')
    except ValueError as e:
        print(f"Date parse error at index {i}: {data['DATE'][i]} — {e}")
        data["DATE"][i] = None

for col in ["OPEN", "HIGH", "LOW", "CLOSE", "SPREAD"]:
    for i in range(len(data[col])):
        try:
            data[col][i] = float(data[col][i])
        except (ValueError, TypeError) as e:
            print(f"{col} conversion error at index {i}: {data[col][i]} — {e}")
            data[col][i] = float('nan')

# ✅ 正确绘图:传入数值列表,而非字符串
fig, ax = plt.subplots(figsize=(10, 6))
ax.plot(data["DATE"], data["OPEN"], label="Open Price", alpha=0.8)
ax.plot(data["DATE"], data["CLOSE"], label="Close Price", alpha=0.8)
ax.set_xlabel("Time")
ax.set_ylabel("Price")
ax.legend()
ax.grid(True, alpha=0.3)
fig.autofmt_xdate()
plt.show()

? 注意事项总结:

  • 始终使用 open(..., newline='') 打开CSV文件,这是Python csv模块的硬性要求;
  • 不要假设CSV文件“绝对规范”,务必校验每行字段数;
  • 类型转换务必包裹 try/except,避免单条脏数据中断整个流程;
  • matplotlib.pyplot.plot() 接收的是两个同长度的序列(如 list[datetime] 和 list[float]),切勿传入字符串如 ["DATE"];
  • 对于更复杂的CSV操作(如自动类型推断、缺失值填充),推荐直接使用 pandas.read_csv(),它已内置健壮的解析与容错机制。

遵循以上实践,即可稳定、清晰地将时间序列CSV转化为结构化字典,并安全用于分析与可视化。

相关文章

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

csv

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
python打包成可执行文件
python打包成可执行文件

本专题为大家带来python打包成可执行文件相关的文章,大家可以免费的下载体验。

2023.07.20

1651

4

python能做什么
python能做什么

python能做的有:可用于开发基于控制台的应用程序、多媒体部分开发、用于开发基于Web的应用程序、使用python处理数据、系统编程等等。本专题为大家提供python相关的各种文章、以及下载和课程。

2023.07.25

4124

7

format在python中的用法
format在python中的用法

Python中的format是一种字符串格式化方法,用于将变量或值插入到字符串中的占位符位置。通过format方法,我们可以动态地构建字符串,使其包含不同值。php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

2023.07.31

1669

3

python教程
python教程

Python已成为一门网红语言,即使是在非编程开发者当中,也掀起了一股学习的热潮。本专题为大家带来python教程的相关文章,大家可以免费体验学习。

2023.08.03

23837

23

python环境变量的配置
python环境变量的配置

Python是一种流行的编程语言,被广泛用于软件开发、数据分析和科学计算等领域。在安装Python之后,我们需要配置环境变量,以便在任何位置都能够访问Python的可执行文件。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

2023.08.04

2927

5

python eval
python eval

eval函数是Python中一个非常强大的函数,它可以将字符串作为Python代码进行执行,实现动态编程的效果。然而,由于其潜在的安全风险和性能问题,需要谨慎使用。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

2023.08.04

2947

5

scratch和python区别
scratch和python区别

scratch和python的区别:1、scratch是一种专为初学者设计的图形化编程语言,python是一种文本编程语言;2、scratch使用的是基于积木的编程语法,python采用更加传统的文本编程语法等等。本专题为大家提供scratch和python相关的文章、下载、课程内容,供大家免费下载体验。

2023.08.11

1143

5

python合并两个列表
python合并两个列表

Python是一种强大的编程语言,具有许多方便的功能和工具。在Python中,有多种方法可以合并两个列表。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

2023.08.10

596

4

python是前端还是后端
python是前端还是后端

Python属于前端也属于后端,其灵活性和丰富的生态系统使得开发人员能够在不同的领域中灵活运用。本专题为大家提供python相关的文章、下载、课程内容,供大家免费下载体验。

2023.08.11

2283

5

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
热门推荐
/
最新课程
phpStudy极速入门视频教程
phpStudy极速入门视频教程

共6课时 | 54.6万人学习

独孤九贱(4)_PHP视频教程
独孤九贱(4)_PHP视频教程

共89课时 | 133.4万人学习