Linux如何合并多个文本文件 cat命令重定向技巧

雨萱姑娘_3504

雨萱姑娘_3504

2026-04-10

826人浏览

原创

cat合并文件时出现空行是因posix要求文件以换行符结尾,末尾的\n被保留;若某文件无结尾换行,则与下一文件首行连在一起。重定向用>会覆盖原文件,需用临时文件替换或写入新名。

linux如何合并多个文本文件 cat命令重定向技巧

用 cat 合并文件时,为什么新文件里多出空行?

常见现象是执行 cat file1.txt file2.txt > merged.txt 后,merged.txt 开头或结尾有意外空行。这通常不是 cat 的问题,而是源文件本身以换行符结尾(POSIX 要求),而最后一个文件末尾的换行被当成“内容的一部分”保留下来——看起来像多余空行,其实是标准行为。

真正要注意的是:如果某个文件不以换行符结尾(比如用 echo -n "hello" > broken.txt 生成),cat 会把它和下一个文件首行连在一起,导致格式错乱。

  • 检查文件是否规范结尾:hexdump -C file.txt | tail,末尾应为 0a(即 \n)
  • 强制补换行:printf '\n' >> file.txt(仅对无结尾换行的文件)
  • 避免手动拼接:不要用 cat a b c > out 处理含二进制或非文本内容的文件

合并时想跳过某些文件或按特定顺序读取

cat 本身不支持通配符过滤或排序,它只是按命令行给出的顺序依次输出。如果你写 cat *.log,shell 展开顺序取决于文件系统排序(通常是字典序),不可靠。

更可控的做法是显式列出或用 find + xargs 控制顺序:

  • 按修改时间升序合并:find . -name "*.log" -type f -print0 | xargs -0 ls -t | xargs -I{} cat {}
  • 排除临时文件:cat $(ls *.log | grep -v '\.swp$')(注意:含空格路径会崩,慎用;推荐用 find -not -name "*~")
  • 需要去重或筛选内容?别在 cat 这层做,后续接 sort -u 或 grep

cat 重定向到已有文件时,为什么原内容全没了?

因为 > 是覆盖写入,不是追加。cat a b > out 会清空 out 再写入,哪怕 out 原本就在参与合并列表里(比如误写成 cat a out b > out),结果一定是空或损坏。

Linux installer
Linux installer

先解析安全源,运行本地CLI安装、启动、卸载Linux桌面应用。用户请求时使用。

下载

安全做法只有两种:

  • 始终写到新文件名:cat a b c > merged_new.txt
  • 真要就地更新,先用临时文件再替换:cat a b c > merged.tmp && mv merged.tmp merged.txt
  • 用 >> 追加时,确认目标文件不参与输入列表,否则会无限循环增长

大文件合并卡住或内存爆掉?不是 cat 的锅

cat 是流式处理,不缓存全文,内存占用恒定。所谓“卡住”,大概率是磁盘 I/O 瓶颈、目标文件系统满、或者重定向目标是管道/设备(如 /dev/stdout 被阻塞)。

排查方向:

  • 看磁盘空间:df -h .,尤其注意 /tmp(部分 shell 重定向会经由此)
  • 检查目标是否可写:ls -l merged.txt,权限和父目录都得允许写
  • 合并超大文件(>10GB)时,避免用 cat 加管道再进 gzip,改用 dd 或专用工具如 pv 监控进度

真正容易被忽略的是:当多个终端同时往同一个文件用 >> 追加,会出现内容交叉错乱——cat 不负责同步,那是应用层该管的事。

相关文章

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

linux

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
sort排序函数用法
sort排序函数用法

sort排序函数的用法:1、对列表进行排序,默认情况下,sort函数按升序排序,因此最终输出的结果是按从小到大的顺序排列的;2、对元组进行排序,默认情况下,sort函数按元素的大小进行排序,因此最终输出的结果是按从小到大的顺序排列的;3、对字典进行排序,由于字典是无序的,因此排序后的结果仍然是原来的字典,使用一个lambda表达式作为key参数的值,用于指定排序的依据。

2023.09.04

1118

7

printf用法大全
printf用法大全

php中文网为大家提供printf用法大全,以及其他printf函数的相关文章、相关下载资源以及各种相关课程,供大家免费下载体验。

2023.06.20

708

5

fprintf和printf的区别
fprintf和printf的区别

fprintf和printf的区别在于输出的目标不同,printf输出到标准输出流,而fprintf输出到指定的文件流。根据需要选择合适的函数来进行输出操作。更多关于fprintf和printf的相关文章详情请看本专题下面的文章。php中文网欢迎大家前来学习。

2023.11.28

1009

10

磁盘配额是什么
磁盘配额是什么

磁盘配额是计算机中指定磁盘的储存限制,就是管理员可以为用户所能使用的磁盘空间进行配额限制,每一用户只能使用最大配额范围内的磁盘空间。php中文网为大家提供各种磁盘配额相关的内容,教程,供大家免费下载安装。

2023.06.21

3890

4

如何安装LINUX
如何安装LINUX

本站专题提供如何安装LINUX的相关教程文章,还有相关的下载、课程,大家可以免费体验。

2023.06.29

3353

10

linux find
linux find

find是linux命令,它将档案系统内符合 expression 的档案列出来。可以指要档案的名称、类别、时间、大小、权限等不同资讯的组合,只有完全相符的才会被列出来。find根据下列规则判断 path 和 expression,在命令列上第一个 - ( ) , ! 之前的部分为 path,之后的是 expression。还有指DOS 命令 find,Excel 函数 find等。本站专题提供linux find相关教程文章,还有相关

2023.06.30

2493

5

linux修改文件名
linux修改文件名

本专题为大家提供linux修改文件名相关的文章,这些文章可以帮助用户快速轻松地完成文件名的修改工作,大家可以免费体验。

2023.07.05

6010

7

linux系统安装教程
linux系统安装教程

linux系统是一种可以免费使用,自由传播,多用户、多任务、多线程、多CPU的操作系统。本专题提供linux系统安装教程相关的文章,大家可以免费体验。

2023.07.06

5662

7

linux查看文件夹大小
linux查看文件夹大小

Linux是一种自由和开放源码的类Unix操作系统,存在着许多不同的Linux版本,但它们都使用了Linux内核。Linux可安装在各种计算机硬件设备中,比如手机、平板电脑、路由器、视频游戏控制台、台式计算机、大型机和超级计算机。linux怎么查看文件夹大小呢?php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

2023.07.20

3313

8

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
Buffalo框架快速入门指南
Buffalo框架快速入门指南

共0课时 | 0人学习

Valgrind支持平台说明
Valgrind支持平台说明

共0课时 | 0人学习