如何从HTML页面提取文本并排除样式内容-html教程-PHP中文网

应优先用 textcontent 替代 innertext 提取文本，因其不依赖样式渲染、直接读取 dom 原始文本节点；提取前需移除 script/style/注释节点，再统一空白、归一化字符以支持语义去重。

如何从html页面提取文本并排除样式内容

用 `textContent` 替代 `innerText` 避免样式干扰

innerText 会受 CSS 渲染影响：跳过 display: none、visibility: hidden 元素，还可能因字体或排版压缩空格、吞掉换行。而 textContent 直接读取 DOM 树中的原始文本节点，不触发布局计算，也不理会样式规则——它只管“HTML里写了什么”，不管“浏览器怎么画”。

实操建议：

对目标元素调用 el.textContent，不是 el.innerText
若需排除 <script></script>、<style></style>、注释等非内容节点，先用 querySelectorAll 精准选中语义容器（如 article、.content），再遍历其子元素提取 textContent
注意：textContent 会保留标签间的换行和缩进，后续可用 .replace(/\s+/g, ' ') 统一空白，但别在去重前就全压成单空格——段落边界信息可能影响语义判断

用 `get_text(strip=True, separator=' ')` 控制 BeautifulSoup 输出

Python 中用 BeautifulSoup 提取时，.text 属性本质是调用 get_text() 的简写，但默认不处理空白连接逻辑，容易把相邻 <p></p> 和 <h2></h2> 的文本粘连成一句。

实操建议：

显式调用 soup.get_text(strip=True, separator=' ')，避免默认空字符串拼接导致“标题正文”变“标题正文”
若需保留段落结构，把 separator 改成 '\n' 或 '\n\n'，后续再按行去重或分句
strip=True 仅清除每段首尾空白，不影响中间空格；若想彻底折叠内部多余空白，得额外加 .replace(/\s+/g, ' ')（JS）或 re.sub(r'\s+', ' ', text)（Python）

过滤 `<script></script>`、`<style></style>` 和注释节点再提取

即使用了 textContent 或 get_text()，如果直接对 document.body 或整个 soup 操作，脚本/样式块里的字符串仍可能被当作文本提取出来——比如 <script>console.log("loading...")</script> 里的 "loading..." 会被算作“可见内容”。

Article To Html

文章转信息图。将文章/笔记转化为手机可读的 HTML 信息图，自动匹配视觉风格。触发场景：文章转图、笔记转图、信息图、转小红书图、做张图、可视化这篇文章、文生图。

下载

实操建议：

JS 端：提取前先移除无关节点：document.querySelectorAll('script, style, comment').forEach(el => el.remove())，再取 textContent
Python 端：用 soup.find_all(['script', 'style']) 找出并 .decompose()，再调用 get_text()
不要依赖正则从 HTML 字符串里删标签——HTML 嵌套不规则，<script></script> 可能含字符串，正则易误杀

去重前必须做语义归一化，否则 `Set` 毫无意义

直接 new Set(text.split(/\s+/)) 或 set(text.split()) 得到的不是“去重文本”，而是“字面量不同的字符串集合”。"北京" 和 "北京市"、"user_id" 和 "userId"、带零宽空格的 "hello" 和正常 "hello" 全部被当成不同项。

实操建议：