html文件格式转换_html如何批量转换成txt文本

大涛酱_9437

大涛酱_9437

2026-04-13

1142人浏览

原创

html2text命令行工具最稳,因它专为html转文本设计,保留语义结构、自动过滤干扰块、支持utf-8及gbk转码,而“另存为文本”会乱码丢结构,正则删标签易崩,动态内容需puppeteer预渲染。

html文件格式转换_html如何批量转换成txt文本

直接用 html2text 命令行工具批量转,比 GUI 工具稳、比 Python 脚本快,且默认行为就适合大多数网页文本提取场景。

为什么别用浏览器“另存为文本”或正则删标签

浏览器右键“另存为文本”会丢掉语义结构(比如标题变普通段落)、乱码、换行错乱;document.body.innerText 在控制台执行看似快,但对动态渲染内容不可靠,且无法过滤广告、导航栏、脚注等干扰块。更危险的是用正则匹配 <.></.> 删除标签——HTML 允许属性值含 >、注释含 -->、CDATA 含任意字符,正则必漏删或误删。

常见错误现象包括:

  • 转换后整页粘成一行
  • 中文显示为 或空格
  • 链接变成 [1] 却找不到对应地址
  • 表格内容挤在单行里无法阅读

html2text 批量转换的实操要点

html2text 是专为 HTML → plain text 设计的命令行工具,不依赖浏览器,也不解析 CSS,但能识别语义块(如 <h1></h1>、<ul></ul>、<blockquote></blockquote>)并转为可读格式。

安装后执行批量转换(Linux/macOS):

for f in *.html; do html2text -utf8 "$f" > "${f%.html}.txt"; done

关键参数说明:

  • -utf8:强制按 UTF-8 解码,避免中文乱码(尤其当源文件无 charset 声明时)
  • -ss(smart script removal):自动跳过 JS 渲染生成的广告、推荐位等干扰块
  • -b 2:设置列表缩进为 2 空格,提升可读性
  • 不加 -nobs(no bullet list),否则 <ul><li></ul> 会失去符号标记

如果 HTML 来自 curl 抓取,先检查响应头:curl -I url | grep charset。若为 gbk,得先用 iconv -f gbk -t utf-8 转码再喂给 html2text。

Html2md
Html2md

使用 Readability + Turndown 将 HTML 页面转换为干净的、Agent 友好的 Markdown。去除导航栏、广告、页脚、Cookie 横幅、社交按钮等干扰元素。支持 URL...

下载

Python + BeautifulSoup 更适合需要精细控制的场景

当你必须删特定区块(如 <footer></footer>、<nav></nav>)、保留表格结构、或处理多个模板不一致的页面时,BeautifulSoup 更可控。

核心代码片段(非教程式写法):

from bs4 import BeautifulSoup

with open("input.html", "r", encoding="utf-8") as f:
    soup = BeautifulSoup(f, "lxml")

for tag in soup.find_all(["script", "style", "nav", "footer", "aside"]):
    tag.decompose()

text = soup.get_text(separator=" ", strip=True)
text = "\n".join(line.strip() for line in text.splitlines() if line.strip())

注意点:

  • soup.get_text(separator=" ") 防止相邻 <p></p> 的文字被压成一坨
  • 表格需单独处理:soup.find_all("table") 后遍历 tr/td,否则默认压成单行
  • lxml 解析器比 html.parser 更鲁棒,尤其对 malformed HTML
  • Shadow DOM 或 Web Component 页面,BeautifulSoup 无法读取,得先用 Puppeteer 渲染出静态 HTML

GUI 工具和在线转换器只适合一次性救急

所谓“一键批量转换”的桌面工具或网页服务,底层多数调用 html2text 或 BeautifulSoup 封装,但隐藏了编码、过滤、异常处理逻辑。你无法知道它是否跳过了 <noscript></noscript> 内容,也无法确认它把 <code> 块是原样保留还是全删了。

典型问题:

  • 拖入 GBK 编码 HTML,输出 TXT 乱码却无提示
  • 批量转换中途某文件报错,整个流程中断,也不告诉你哪一文件失败
  • 广告模块未过滤,导致每份 TXT 开头都是“欢迎访问 XXX 网站”

真正需要稳定批量处理时,命令行或脚本才是可审计、可复现、可集成进 CI/CD 的路径。最易被忽略的一点:所有方案都假设原始 HTML 是 well-formed 的;而现实中大量网页存在嵌套错误、未闭合标签、编码声明缺失——这时候 html2text 的容错能力,远强于多数 GUI 工具内置的解析器。

前端入门到VUE实战笔记:立即使用
在学习笔记中,你将探索 前端 的入门与实战技巧!

相关专题

更多
html版权符号
html版权符号

html版权符号是“©”,可以在html源文件中直接输入或者从word中复制粘贴过来,php中文网还为大家带来html的相关下载资源、相关课程以及相关文章等内容,供大家免费下载使用。

2023.06.14

6495

7

html在线编辑器
html在线编辑器

html在线编辑器是用于在线编辑的工具,编辑的内容是基于HTML的文档。它经常被应用于留言板留言、论坛发贴、Blog编写日志或等需要用户输入普通HTML的地方,是Web应用的常用模块之一。php中文网为大家带来了html在线编辑器的相关教程、以及相关文章等内容,供大家免费下载使用。

2023.06.21

3612

4

html网页制作
html网页制作

html网页制作是指使用超文本标记语言来设计和创建网页的过程,html是一种标记语言,它使用标记来描述文档结构和语义,并定义了网页中的各种元素和内容的呈现方式。本专题为大家提供html网页制作的相关的文章、下载、课程内容,供大家免费下载体验。

2023.07.31

3290

5

html空格
html空格

html空格是一种用于在网页中添加间隔和对齐文本的特殊字符,被用于在网页中插入额外的空间,以改变元素之间的排列和对齐方式。本专题为大家提供html空格的相关的文章、下载、课程内容,供大家免费下载体验。

2023.08.01

3319

5

html是什么
html是什么

HTML是一种标准标记语言,用于创建和呈现网页的结构和内容,是互联网发展的基石,为网页开发提供了丰富的功能和灵活性。本专题为大家提供html相关的各种文章、以及下载和课程。

2023.08.11

4999

6

html字体大小怎么设置
html字体大小怎么设置

在网页设计中,字体大小的选择是至关重要的。合理的字体大小不仅可以提升网页的可读性,还能够影响用户对网页整体布局的感知。php中文网将介绍一些常用的方法和技巧,帮助您在HTML中设置合适的字体大小。

2023.08.11

3261

3

html转txt
html转txt

html转txt的方法有使用文本编辑器、使用在线转换工具和使用Python编程。本专题为大家提供html转txt相关的文章、下载、课程内容,供大家免费下载体验。

2023.08.31

3069

3

html文本框代码怎么写
html文本框代码怎么写

html文本框代码:1、单行文本框【<input type="text" style="height:..;width:..;" />】;2、多行文本框【textarea style=";height:;"></textare】。

2023.09.01

2688

6

HTML嵌入CSS样式的方法
HTML嵌入CSS样式的方法

HTML嵌入CSS样式的方法有内联样式、内部样式表和外部样式表。本专题为大家提供CSS样式相关的文章、下载、课程内容,供大家免费下载体验。

2023.09.20

2788

5

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
GDB 17.2 官方文档集合
GDB 17.2 官方文档集合

共0课时 | 0人学习

Bootstrap 入门安装配置
Bootstrap 入门安装配置

共0课时 | 0人学习

38+ PhpStorm 提示和技巧
38+ PhpStorm 提示和技巧

共1课时 | 225人学习