Sublime Text如何删除重复行_Sublime Text去重复行教程【简明】

千明吖_5715

千明吖_5715

2026-04-14

294人浏览

原创

Sublime Text无原生保序去重功能:Remove Duplicate Lines仅删相邻重复,Sort Lines: Unique必打乱顺序;真正保序需用正则^(.*$)\n(?=.*^\1$)或外部命令如awk '!seen[$0]++'。

sublime text如何删除重复行_sublime text去重复行教程【简明】

Sublime Text 没有真正意义上的“一键保序去重”功能,所有自带命令要么只删相邻重复(Remove Duplicate Lines),要么必然打乱顺序(Sort Lines + unique)。你要的其实是“删掉后面出现的重复行,首行不动”,这得靠正则或外部工具。

为什么 Remove Duplicate Lines 总是删不干净?

它只比对「当前行」和「上一行」是否完全一致,中间插一行别的,就彻底失效。比如:

apple
banana
apple

第二个 apple 不会被删——因为它前面是 banana,不是 apple。

  • 对空格、制表符、BOM、零宽字符(如 \u200B)零容忍:哪怕末尾多一个空格,就判为不同行
  • 不支持忽略大小写,不能跳过空行,也不能按列匹配
  • 快捷键默认未绑定,得手动在命令面板里搜 Remove Duplicate Lines 才能调用

为什么 Sort Lines: Unique 会乱序?

它本质是 sort | uniq 的封装:先按字典序重排全文,再合并相邻重复。所以 zebra 一定跑到 apple 前面,不管原文谁先出现。

Wordtune
Wordtune

一款AI写作和文本编辑助手,可帮助用户改写句子、调整语气、扩展或缩短内容,让文字表达更加清晰自然。

下载
  • 保留的是排序后每组重复里的第一行,不是原文中第一次出现的那行
  • 要启用它,必须手动加快捷键配置:{"keys": ["ctrl+alt+u"], "command": "sort_lines", "args": {"unique": true}}
  • 对含数字的字符串(如 log2.txt、log10.txt)会错序,需 Natural Sort 插件补零

怎么真正保序去重?用正则 ^(.*$)\n(?=.*^\1$)

这个正则能精准匹配「后面还有相同行」的所有重复行(除第一个),适合代码、配置项等依赖原始顺序的文本。

  • 打开查找面板(Ctrl+F),勾选 Regular Expression 和 Whole Line
  • 输入:^(.*$)\n(?=.*^\1$),点击 Find All
  • 按 Ctrl+Shift+L 转为多光标,再按 Delete ——首行自动跳过,只删后续重复
  • Windows 文件若混用 \r\n 和 \n,可能匹配失败;建议先统一换行符:File → Line Endings → Unix

大文件(>5 万行)别硬扛,换系统命令

Sublime 在处理大文本时,正则和排序都会明显卡顿,内存占用飙升。这时候直接甩给终端更稳:

  • Linux/macOS:awk '!seen[$0]++' file.txt > dedup.txt(保序) 或 sort -u file.txt > dedup.txt(排序后去重)
  • Windows PowerShell:Get-Content file.txt | ForEach-Object {$seen{$_.Trim()}++ -eq 1} | Set-Content dedup.txt(保序,需手动 Trim())
  • 跨平台 Python 一行:python3 -c "import sys; seen=set(); [print(l.rstrip()) for l in sys.stdin if l not in seen and not seen.add(l)]" dedup.txt

真正容易被忽略的是:很多“重复”其实源于末尾空格或不可见字符。处理前先跑一遍 \s+$ 清理尾部空白,比纠结用哪个命令更关键。

相关文章

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

sublime

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
python中print函数的用法
python中print函数的用法

python中print函数的语法是“print(value1, value2, ..., sep=' ', end='\n', file=sys.stdout, flush=False)”。本专题为大家提供print相关的文章、下载、课程内容,供大家免费下载体验。

2023.09.27

3380

5

python print用法与作用
python print用法与作用

本专题整合了python print的用法、作用、函数功能相关内容,阅读专题下面的文章了解更多详细教程。

2026.02.03

269

24

sort排序函数用法
sort排序函数用法

sort排序函数的用法:1、对列表进行排序,默认情况下,sort函数按升序排序,因此最终输出的结果是按从小到大的顺序排列的;2、对元组进行排序,默认情况下,sort函数按元素的大小进行排序,因此最终输出的结果是按从小到大的顺序排列的;3、对字典进行排序,由于字典是无序的,因此排序后的结果仍然是原来的字典,使用一个lambda表达式作为key参数的值,用于指定排序的依据。

2023.09.04

1158

7

php中foreach用法
php中foreach用法

本专题整合了php中foreach用法的相关介绍,阅读专题下面的文章了解更多详细教程。

2025.12.04

838

13

js 字符串转数组
js 字符串转数组

js字符串转数组的方法:1、使用“split()”方法;2、使用“Array.from()”方法;3、使用for循环遍历;4、使用“Array.split()”方法。本专题为大家提供js字符串转数组的相关的文章、下载、课程内容,供大家免费下载体验。

2023.08.03

1898

5

js截取字符串的方法
js截取字符串的方法

js截取字符串的方法有substring()方法、substr()方法、slice()方法、split()方法和slice()方法。本专题为大家提供字符串相关的文章、下载、课程内容,供大家免费下载体验。

2023.09.04

3104

5

java基础知识汇总
java基础知识汇总

java基础知识有Java的历史和特点、Java的开发环境、Java的基本数据类型、变量和常量、运算符和表达式、控制语句、数组和字符串等等知识点。想要知道更多关于java基础知识的朋友,请阅读本专题下面的的有关文章,欢迎大家来php中文网学习。

2023.10.24

6344

49

字符串介绍
字符串介绍

字符串是一种数据类型,它可以是任何文本,包括字母、数字、符号等。字符串可以由不同的字符组成,例如空格、标点符号、数字等。在编程中,字符串通常用引号括起来,如单引号、双引号或反引号。想了解更多字符串的相关内容,可以阅读本专题下面的文章。

2023.11.24

6429

6

java读取文件转成字符串的方法
java读取文件转成字符串的方法

Java8引入了新的文件I/O API,使用java.nio.file.Files类读取文件内容更加方便。对于较旧版本的Java,可以使用java.io.FileReader和java.io.BufferedReader来读取文件。在这些方法中,你需要将文件路径替换为你的实际文件路径,并且可能需要处理可能的IOException异常。想了解更多java的相关内容,可以阅读本专题下面的文章。

2024.03.22

7974

16

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程