grep中怎么查找两个文本文件中完全相同的交集行以进行数据对齐

梦雪君_2981

梦雪君_2981

2026-08-16

652人浏览

原创

推荐用 comm 找两文件完全相同交集行,需先排序去重,再执行 comm -12;次选 grep -fxf(小文件适用)或 join(要求严格排序且无空格);注意处理换行符、空白和大小写等干扰。

grep中怎么查找两个文本文件中完全相同的交集行以进行数据对齐

用 grep 直接找两个文件的**完全相同交集行**并不高效,也不推荐——grep 本质是“在文件中匹配模式”,不是集合运算工具。但如果你坚持用 grep,可以配合 sort 和 uniq 实现;更稳妥、清晰的做法是用 comm 或 join。下面分几种实用方式说明:

用 comm 找交集(最推荐)

comm 是专为比较已排序文件设计的命令,能精准提取共有的行(即交集)。前提是两文件必须先排序且无重复(或按需保留重复):

  • 先排序去重(若允许去重):
    sort file1.txt | uniq > file1_sorted.txt
    sort file2.txt | uniq > file2_sorted.txt
  • 再用 comm -12 输出只在两文件都出现的行:
    comm -12 file1_sorted.txt file2_sorted.txt
    (-1 屏蔽第1列(仅 file1 有),-2 屏蔽第2列(仅 file2 有),-12 就只剩第3列——交集)

用 grep 模拟交集(适合小文件或临时操作)

如果必须用 grep,可将一个文件每行当作模式去匹配另一个文件。注意:要加 -F(固定字符串匹配,避免正则干扰)和 -x(整行匹配,防止子串误中):

Boxy
Boxy

Boxy是一款AI开发辅助工具,CodeSandbox推出的AI编程助手。

下载
  • grep -Fxf file1.txt file2.txt → 找出 file2 中与 file1 完全相同的行
  • grep -Fxf file2.txt file1.txt → 找出 file1 中与 file2 完全相同的行
  • 两者结果一致(交集满足对称性),任选其一即可

⚠️ 注意:若某行在 file1 中重复多次,grep -f 会在 file2 中匹配一次就输出一次,可能造成重复。如需去重,结尾加 | sort -u。

用 join 找交集(要求严格排序+无空格干扰)

join 默认按第一列合并,但可用于单列文件的交集(需确保两文件都已排序,且无前导/尾随空格):

  • join
  • 若文件含空格或制表符,建议先用 sed 's/^[[:space:]]*//; s/[[:space:]]*$//' 清理空白

补充提醒:处理常见干扰项

实际中交集不准,常因以下原因:

  • 行尾换行符不一致:Windows(CRLF)vs Unix(LF)→ 用 dos2unix 或 tr -d '\r' 统一
  • 首尾空白不同:用 sed 's/^[[:space:]]*//; s/[[:space:]]*$//' 标准化后再比较
  • 大小写敏感:加 -i 参数(如 grep -Fxfi 或 sort -f 配合 comm)

相关文章

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
磁盘配额是什么
磁盘配额是什么

磁盘配额是计算机中指定磁盘的储存限制,就是管理员可以为用户所能使用的磁盘空间进行配额限制,每一用户只能使用最大配额范围内的磁盘空间。php中文网为大家提供各种磁盘配额相关的内容,教程,供大家免费下载安装。

2023.06.21

4170

4

如何安装LINUX
如何安装LINUX

本站专题提供如何安装LINUX的相关教程文章,还有相关的下载、课程,大家可以免费体验。

2023.06.29

3533

10

linux find
linux find

find是linux命令,它将档案系统内符合 expression 的档案列出来。可以指要档案的名称、类别、时间、大小、权限等不同资讯的组合,只有完全相符的才会被列出来。find根据下列规则判断 path 和 expression,在命令列上第一个 - ( ) , ! 之前的部分为 path,之后的是 expression。还有指DOS 命令 find,Excel 函数 find等。本站专题提供linux find相关教程文章,还有相关

2023.06.30

2753

5

linux修改文件名
linux修改文件名

本专题为大家提供linux修改文件名相关的文章,这些文章可以帮助用户快速轻松地完成文件名的修改工作,大家可以免费体验。

2023.07.05

6750

7

linux系统安装教程
linux系统安装教程

linux系统是一种可以免费使用,自由传播,多用户、多任务、多线程、多CPU的操作系统。本专题提供linux系统安装教程相关的文章,大家可以免费体验。

2023.07.06

6402

7

linux查看文件夹大小
linux查看文件夹大小

Linux是一种自由和开放源码的类Unix操作系统,存在着许多不同的Linux版本,但它们都使用了Linux内核。Linux可安装在各种计算机硬件设备中,比如手机、平板电脑、路由器、视频游戏控制台、台式计算机、大型机和超级计算机。linux怎么查看文件夹大小呢?php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

2023.07.20

3693

8

linux查看ip命令
linux查看ip命令

本专题为大家提供linux查看ip命令相关文章内容,感兴趣的朋友可以免费下载体验试试。

2023.07.20

3185

4

linux查看cpu使用率
linux查看cpu使用率

在linux的系统维护中,可能需要经常查看cpu使用率,分析系统整体的运行情况。本专题为大家带来了linux查看cpu使用率的相关文章,感兴趣的朋友千万不要错过了。

2023.07.25

3419

6

linux查找文件命令
linux查找文件命令

Linux是一种自由和开放源码的类Unix操作系统,存在着许多不同的Linux版本,但它们都使用了Linux内核。Linux可安装在各种计算机硬件设备中,比如手机、平板电脑、路由器、视频游戏控制台、台式计算机、大型机和超级计算机。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

2023.07.31

297

3

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
Perl 入门教程
Perl 入门教程

共29课时 | 31.4万人学习