顺序写入多个文件不能用for循环+os.WriteFile,因其原子覆盖而非追加;应使用os.OpenFile配O_APPEND模式逐个打开、写入并关闭,失败时需回滚或临时文件策略保障一致性。

为什么顺序写入多个文件不能简单用 for 循环 + os.WriteFile
因为 os.WriteFile 是原子写入,每次调用都会先清空目标文件再写入新内容。如果你本意是“把 A 文件内容追加到 B、C、D 文件末尾”,直接循环调用 os.WriteFile 会覆盖而非追加——这不是顺序写入,而是重复覆盖。
用 os.OpenFile 配合 os.O_APPEND 实现真·顺序追加
要让多个文件按指定顺序接收同一份数据(比如日志分发、备份镜像),必须打开每个文件时显式启用追加模式,并复用写入逻辑。关键点:
-
os.OpenFile(path, os.O_WRONLY|os.O_CREATE|os.O_APPEND, 0644)才能确保不覆盖已有内容 - 必须手动
Close()每个文件句柄,否则可能丢数据或触发“too many open files”错误 - 写入失败时应中断流程并返回错误,避免部分成功导致状态不一致
data := []byte("log entry: 2024-06-15T10:30:00Z\n")
files := []string{"a.log", "b.log", "c.log"}
for _, path := range files {
f, err := os.OpenFile(path, os.O_WRONLY|os.O_CREATE|os.O_APPEND, 0644)
if err != nil {
return err // 不要忽略
}
_, err = f.Write(data)
f.Close() // 必须 close,Write 后不 flush 不保证落盘
if err != nil {
return err
}
}
并发写入多个文件?小心竞态和磁盘 I/O 瓶颈
表面上看 goroutine 能加速,但实际多数场景下反而更慢甚至出错:
- 同一块机械硬盘上并发写多个文件,磁头频繁寻道,吞吐下降明显
- 若多个 goroutine 写同一个文件且未加锁,
os.O_APPEND虽保证单次写原子性,但多 goroutine 仍可能因调度导致行序错乱 - Linux 下单进程默认最多打开 1024 个文件,100 个 goroutine 同时
OpenFile容易触发too many open files
真需要并发,建议用带缓冲的 channel 控制并发数(如 semaphore := make(chan struct{}, 5)),且每个 goroutine 单独处理一个文件路径。
顺序写入失败时如何回滚已写文件?Go 没有内置事务机制
文件系统本身不支持跨文件原子提交,所以“全部成功才生效”只能靠应用层补救:
- 写入前先检查所有目标路径是否可写(
os.Stat+ 权限判断) - 记录已成功写入的文件列表,失败后遍历该列表执行
os.Truncate(f, 0)清空或os.Remove删除(视业务而定) - 更稳妥的做法是写入临时文件(如
a.log.tmp),全部成功后再os.Rename覆盖原文件——但注意Rename跨分区会失败
没有银弹。顺序写入本身简单,难的是失败后的状态一致性——这往往比写入逻辑本身更值得花时间设计。
golang免费学习笔记(深入):立即使用
在学习笔记中,你将探索golang的核心概念和高级技巧!











