c++处理csv数据 _ C++中解析csv数据并进行数据清洗与格式转换的方法

酷墨同学_1936

酷墨同学_1936

2026-03-28

494人浏览

原创

csv解析应优先用std::getline按行读取,再手动分割字段并处理引号、空格及空值;数字转换避免std::stoi/std::stod,改用std::from_chars;中文路径用std::filesystem::u8path,utf-8 bom需手动跳过。

c++处理csv数据 _ c++中解析csv数据并进行数据清洗与格式转换的方法

csv解析用 std::getline 按行读,别用 fscanf 或正则硬刚

CSV 看似简单,但字段含逗号、换行、引号嵌套时,fscanf 会直接崩;正则在 C++ 里写起来又长又难维护。标准库的 std::getline 配合字符串流最稳,核心是「按行读 → 按逗号切 → 逐字段去引号/空格」三步。

常见错误现象:std::getline(file, line) 后直接 std::stringstream(line) >> field —— 这会把带引号的 "John, Jr." 截成 "John 和 Jr." 两段。

  • 先用 std::getline(file, line) 读整行,确保不丢换行符
  • 再用自定义函数拆分字段:跳过引号包围的逗号,只在非引号区域按逗号切
  • 每个字段用 std::string::find_first_not_of(" \t") 去首尾空白,再检查是否以 " 开头结尾,是则用 substr(1, len-2) 去引号

处理空值和类型转换失败时,别让程序直接 std::stoi 崩掉

C++ 没有内置的“可空数字类型”,遇到空字符串或非数字内容时,std::stoi 抛 std::invalid_argument,std::stod 同理。数据清洗阶段必须预判这些情况,而不是靠 try-catch 兜底。

使用场景:CSV 中某列本该是整数,但存在 ""、"N/A"、"-" 等占位符。

  • 先用 field.empty() 或 field == "N/A" || field == "-" 判断空值,转成你定义的默认值(如 -1 或 std::nullopt)
  • 再用 std::from_chars(C++17 起)做无异常转换:它返回 std::errc::invalid_argument 而非抛异常,更轻量
  • 避免用 std::stringstream 转数字——它对前导空格敏感,且失败后需手动 clear() 状态位

中文路径或 UTF-8 BOM 导致乱码?用 std::ifstream + std::locale 不顶用

Windows 下用记事本保存的 CSV 常带 UTF-8 BOM(\xEF\xBB\xBF),而 std::ifstream 默认当 ANSI 读,第一行字段名直接变乱码;Linux/macOS 下中文路径用 std::ifstream 构造会失败(std::filesystem::path 才支持宽字符)。

C++14
C++14

C++14 对 C++11 的修正与增强版本,适合旧系统维护和较老工具链兼容。

下载

性能影响:加 locale 有时反而让读取变慢,且不能解决 BOM 问题。

  • 打开文件前,先用 std::ifstream::peek() 检查前三个字节是否为 BOM,是则 ignore(3)
  • 路径含中文时,不要传 raw std::string 给 std::ifstream 构造函数;改用 std::filesystem::u8path("中文.csv")(C++20)或平台 API(如 Windows 的 CreateFileW)
  • 不依赖 std::locale 处理编码——C++ 标准库不解析 UTF-8,BOM 和编码转换得自己做

数据清洗后要导出新 CSV?别手写引号和转义逻辑

导出时字段含逗号、双引号、换行符,就得按 RFC 4180 规则加引号并转义双引号(" → "")。手写容易漏边界 case,比如字段末尾是 " 却没配对,或换行符没被包进引号里。

容易踩的坑:用 os 简单包裹,但没处理字段内原有的 <code>",导致 Excel 打开错列。

  • 判断字段是否需要引号:含 ,、"、\n 或首尾空格时必须引号
  • 需要引号时,先用 std::replace(field.begin(), field.end(), '"', '"') 把每个 " 替成 "",再整体包上 "
  • 换行符统一用 \n(不是 \r\n),Excel 和 LibreOffice 都认;若目标明确是 Windows,再考虑行尾替换

真正麻烦的从来不是“怎么切 CSV”,而是字段里藏着多少个没声明的隐式规则——比如某列数值实际是科学计数法字符串,清洗时当成整数转就丢精度;或者时间字段格式混着 2023/01/01 和 01-Jan-2023。这些没法靠一个 parser 解决,得在清洗逻辑里留钩子做 per-column 自定义处理。

C++免费学习笔记(深入):立即使用
在学习笔记中,你将探索 C++ 的入门与实战技巧!

相关文章

c++速学教程(入门到精通)
c++速学教程(入门到精通)

c++怎么学习?c++怎么入门?c++在哪学?c++怎么学才快?不用担心,这里为大家提供了c++速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

c++

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
string转int
string转int

在编程中,我们经常会遇到需要将字符串(str)转换为整数(int)的情况。这可能是因为我们需要对字符串进行数值计算,或者需要将用户输入的字符串转换为整数进行处理。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

2023.08.02

6639

3

js 字符串转数组
js 字符串转数组

js字符串转数组的方法:1、使用“split()”方法;2、使用“Array.from()”方法;3、使用for循环遍历;4、使用“Array.split()”方法。本专题为大家提供js字符串转数组的相关的文章、下载、课程内容,供大家免费下载体验。

2023.08.03

1778

5

js截取字符串的方法
js截取字符串的方法

js截取字符串的方法有substring()方法、substr()方法、slice()方法、split()方法和slice()方法。本专题为大家提供字符串相关的文章、下载、课程内容,供大家免费下载体验。

2023.09.04

2804

5

java基础知识汇总
java基础知识汇总

java基础知识有Java的历史和特点、Java的开发环境、Java的基本数据类型、变量和常量、运算符和表达式、控制语句、数组和字符串等等知识点。想要知道更多关于java基础知识的朋友,请阅读本专题下面的的有关文章,欢迎大家来php中文网学习。

2023.10.24

6144

49

字符串介绍
字符串介绍

字符串是一种数据类型,它可以是任何文本,包括字母、数字、符号等。字符串可以由不同的字符组成,例如空格、标点符号、数字等。在编程中,字符串通常用引号括起来,如单引号、双引号或反引号。想了解更多字符串的相关内容,可以阅读本专题下面的文章。

2023.11.24

5869

6

java读取文件转成字符串的方法
java读取文件转成字符串的方法

Java8引入了新的文件I/O API,使用java.nio.file.Files类读取文件内容更加方便。对于较旧版本的Java,可以使用java.io.FileReader和java.io.BufferedReader来读取文件。在这些方法中,你需要将文件路径替换为你的实际文件路径,并且可能需要处理可能的IOException异常。想了解更多java的相关内容,可以阅读本专题下面的文章。

2024.03.22

7494

16

php中定义字符串的方式
php中定义字符串的方式

php中定义字符串的方式:单引号;双引号;heredoc语法等等。想了解更多字符串的相关内容,可以阅读本专题下面的文章。

2024.04.29

11114

11

go语言字符串相关教程
go语言字符串相关教程

本专题整合了go语言字符串相关教程,阅读专题下面的文章了解更多详细内容。

2025.07.29

5719

17

c++字符串相关教程
c++字符串相关教程

本专题整合了c++字符串相关教程,阅读专题下面的文章了解更多详细内容。

2025.08.07

6247

13

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
C++ Core Guidelines
C++ Core Guidelines

共0课时 | 0人学习

C++ Reference
C++ Reference

共0课时 | 0人学习

C++ 官方标准说明
C++ 官方标准说明

共0课时 | 0人学习