go数据导出需分层设计：小数据用标准库，中等量用excelize流式写入，大数据必加限流/中断/进度反馈；csv须边读边写并flush；excel百万行禁用setcellvalue循环，改用writesheetrows分批；mysql插入需控制每批500–1000行并预处理；json零值字段慎用omitempty；编码须显式处理gbk等非utf-8。
Go 数据导出系统不是“写完一个 ExportToXLSX 就完事”，而是要按数据量、格式、下游用途分层设计：小数据走标准库直写，中等量用 excelize 流式控制，大数据必须带限流+中断+进度反馈——否则一跑就 OOM 或卡死。
csv.Writer 写大文件为啥内存暴涨甚至 panic
因为 csv.Writer 默认带缓冲（通常 4KB），但如果你不调 writer.Flush()，所有未刷出的数据都堆在内存里；更危险的是，有人用 records, _ := reader.ReadAll() 先全读进内存再导出，百万行 CSV 直接吃光 2GB RAM。
- 大文件导出必须边读边写：开一个
for循环，每次读一行、处理一行、writer.Write()一行，然后手动writer.Flush()（或设更大缓冲但别省这步） - 别用
csv.WriteAll()或reader.ReadAll()处理 >10MB 的源数据 - 导出前检查字段是否含逗号/换行符：没加引号的
"张三,北京"会被 Excel 拆成两列，得用writer.Comma = ','+ 确保csv.Write()自动包裹字符串
excelize 导出百万行 Excel 怎么不卡死
excelize 默认把整张 Sheet 加载进内存建树状结构，百万行直接触发 GC 频繁或 OOM。真正能扛住的姿势是流式写入（f.WriteSheetRow() 或 f.WriteSheetRows()），它绕过内存模型，直接写二进制流。
- 不要用
f.SetCellValue("Sheet1", "A1", v)循环百万次——那是为小报表设计的 - 改用
f.WriteSheetRow("Sheet1", []interface{}{"ID", "Name", "Email"})写表头，再用f.WriteSheetRows("Sheet1", data)批量写数据切片（每批 ≤ 5000 行） - 写完立刻调
f.Close()，它会强制 flush 并释放底层 zip writer 资源，漏掉这步文件可能损坏 - 需要样式（如日期列）？先用
f.NewStyle()定义好 styleID，再批量f.SetCellStyle("Sheet1", "C1", "C100000", styleID)，别每行都新建样式
导出到 MySQL 时 INSERT VALUES (),() 报 ERROR 1153
这不是 Go 的错，是 MySQL 的 max_allowed_packet 在拦截你拼的超长 SQL。本地开发看着快，但生产环境单条 INSERT 带 10 万行，大概率被截断并报 ERROR 1153 (0x): Got a packet bigger than 'max_allowed_packet' bytes。
- 安全上限是每条
INSERT不超过 500–1000 行（按平均每行 2KB 算） - 用
db.Prepare("INSERT INTO t (a,b,c) VALUES (?, ?, ?)")+ 循环stmt.Exec()，比手拼 SQL 更稳且防注入 - 别依赖
database/sql的多值占位符——它不支持VALUES (?,?),(?,?)这种语法，得自己拼(?, ?, ?)模板再exec - 每 500 行 commit 一次事务，避免锁表太久；失败时只回滚当前批次，不影响后续
JSON 导出时零值字段消失，业务却要区分“0”和“空”
json:"amount,omitempty" 会让 Amount: 0 字段直接从输出里消失，但财务场景中 “金额为 0” 和 “金额未填写” 是两种语义，不能混为一谈。
- 关键数值字段（如
Amount、Stock、Score）一律去掉omitempty - 真正该忽略的，是业务上明确表示“未设置”的指针字段，比如
UpdatedAt *time.Time `json:"updated_at,omitempty"` - 如果结构体嵌套深，又想部分字段保留零值，就别用全局
omitempty，改用自定义MarshalJSON()方法控制序列化逻辑
最常被跳过的其实是编码一致性：Go 标准库只认 UTF-8，但 Excel 或旧系统导出的 CSV 常是 GBK。不加转码直接读，中文全变 ???，而这个错误在日志里往往只体现为字段为空——得在 os.Open 后立刻用 golang.org/x/text/encoding 套一层解码器，不是靠“试试看”。
golang免费学习笔记（深入）：立即使用
在学习笔记中，你将探索golang的核心概念和高级技巧！
