怎么提取并保存网页HTML源码?代码备份实用方法

夜晨君_5597

夜晨君_5597

2026-10-18

293人浏览

原创

最可靠方式是直接用浏览器“查看页面源代码”(ctrl+u)后手动保存为utf-8编码的.html文件;requests保存需用response.content.decode('utf-8')而非response.text,写入时显式指定encoding='utf-8',避免乱码;完整保存html应跳过beautifulsoup解析,直接写入response.content。

怎么提取并保存网页html源码?代码备份实用方法

直接用浏览器“查看页面源代码”最可靠

多数人写脚本前没试过这个——右键网页空白处选「查看页面源代码」(或 Ctrl+U),新标签页打开后直接 Ctrl+S 保存,文件类型选「所有文件」,后缀写 .html,编码选 UTF-8。这是唯一能拿到服务器原始响应、不经过 JS 渲染的干净 HTML 的方式。

常见错误:在原网页标签页里点「另存为」→ 选「网页,全部」,结果生成一堆文件夹和资源,主 HTML 文件还被浏览器自动补全了 <meta>、<script></script> 标签,甚至把动态插入的内容也塞进去了。这不是源码,是渲染快照。

注意:Firefox 的「查看页面源代码」页保存时默认是 UTF-8;Chrome 有时会用系统编码(如 Windows 的 cp1252),手动指定编码更稳妥。

requests.get() 保存 HTML 容易乱码?关键在 content 而非 text

response.text 依赖响应头里的 Content-Type,而很多网站压根不写 charset,或写错成 ISO-8859-1,导致中文变 。别碰 response.text,改用 response.content:

  • 用 response.content.decode('utf-8', errors='ignore') 强制按 UTF-8 解码(适合已知页面是 utf-8)
  • 不确定编码时,装 chardet:encoding = chardet.detect(response.content)['encoding'] or 'utf-8',再 decode
  • 写入文件必须显式指定 encoding='utf-8',否则 Windows 下默认用 cp1252,一写中文就报 UnicodeEncodeError

想保存完整 HTML(含 script/style/注释)?别过 BeautifulSoup

用 BeautifulSoup(html, 'lxml') 解析后再 soup.prettify() 或 str(soup) 输出,会丢 <script></script>、<style></style>、HTML 注释,甚至重排属性顺序——本地双击打开可能白屏或样式错乱。

HTML汇报生成器
HTML汇报生成器

🚀 不用写一行代码!把项目总结、工作汇报、研究报告、技术文档、提案、数据看板直接变精美HTML。12种主题 × 11种背景动效 × 9种鼠标特效 × 10种边框样式 × 实时调色器 × 毛玻璃卡片 × PDF导出,生成后还能自由调色,零门槛AI直出。触发词:项目总结、工作汇报、PPT、生成报告、做个总结、HTML文档、数据报告、流程文档、会议纪要、技术文档、研究报告、数据看板、提案、做个展示页、帮我做个汇报、文档生成。

下载

实操建议:

  • 目标是「备份源码」:跳过解析,直接 open('page.html', 'wb').write(response.content)
  • 必须用 BS 做简单清洗(比如删广告 div):初始化加参数 preserve_whitespace_tags=['script','style'],再用 str(soup) 输出
  • 如果用了 lxml 解析器但没装 lxml 包,BS 会静默降级到 html.parser,输出结构可能不一致,检查日志或打印 soup.original_encoding

动态 SPA 页面怎么办?别用 requests,换 Playwright 或 Puppeteer

requests 只拿得到初始 HTML,像 React/Vue 构建的页面,关键内容在 JS 执行后才注入 DOM。这时 response.content 里只有空容器,比如 <div id="root"></div>。

解决路径很明确:

  • 用 Playwright 启动无头 Chromium:page.content() 返回 JS 渲染后的完整 HTML(含动态插入内容)
  • 需要等某个元素出现再截图或取 HTML?用 page.wait_for_selector('main .article')
  • 不想装大依赖?curl + 浏览器 DevTools 的「Copy as cURL」也能拿到带 Cookie 和 UA 的请求,但无法执行 JS

注意:Playwright 默认超时 30 秒,如果页面 JS 加载慢,要设 timeout=60000;导出前最好 page.evaluate('window.scrollTo(0, document.body.scrollHeight)') 确保懒加载内容已触发。

前端入门到VUE实战笔记:立即使用
在学习笔记中,你将探索 前端 的入门与实战技巧!

相关文章

HTML速学教程(入门课程)
HTML速学教程(入门课程)

HTML怎么学习?HTML怎么入门?HTML在哪学?HTML怎么学才快?不用担心,这里为大家提供了HTML速学教程(入门课程),有需要的小伙伴保存下载就能学习啦!

下载

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
html版权符号
html版权符号

html版权符号是“©”,可以在html源文件中直接输入或者从word中复制粘贴过来,php中文网还为大家带来html的相关下载资源、相关课程以及相关文章等内容,供大家免费下载使用。

2023.06.14

6235

7

html在线编辑器
html在线编辑器

html在线编辑器是用于在线编辑的工具,编辑的内容是基于HTML的文档。它经常被应用于留言板留言、论坛发贴、Blog编写日志或等需要用户输入普通HTML的地方,是Web应用的常用模块之一。php中文网为大家带来了html在线编辑器的相关教程、以及相关文章等内容,供大家免费下载使用。

2023.06.21

3492

4

html网页制作
html网页制作

html网页制作是指使用超文本标记语言来设计和创建网页的过程,html是一种标记语言,它使用标记来描述文档结构和语义,并定义了网页中的各种元素和内容的呈现方式。本专题为大家提供html网页制作的相关的文章、下载、课程内容,供大家免费下载体验。

2023.07.31

3170

5

html空格
html空格

html空格是一种用于在网页中添加间隔和对齐文本的特殊字符,被用于在网页中插入额外的空间,以改变元素之间的排列和对齐方式。本专题为大家提供html空格的相关的文章、下载、课程内容,供大家免费下载体验。

2023.08.01

3179

5

html是什么
html是什么

HTML是一种标准标记语言,用于创建和呈现网页的结构和内容,是互联网发展的基石,为网页开发提供了丰富的功能和灵活性。本专题为大家提供html相关的各种文章、以及下载和课程。

2023.08.11

4919

6

html字体大小怎么设置
html字体大小怎么设置

在网页设计中,字体大小的选择是至关重要的。合理的字体大小不仅可以提升网页的可读性,还能够影响用户对网页整体布局的感知。php中文网将介绍一些常用的方法和技巧,帮助您在HTML中设置合适的字体大小。

2023.08.11

3121

3

html转txt
html转txt

html转txt的方法有使用文本编辑器、使用在线转换工具和使用Python编程。本专题为大家提供html转txt相关的文章、下载、课程内容,供大家免费下载体验。

2023.08.31

2929

3

html文本框代码怎么写
html文本框代码怎么写

html文本框代码:1、单行文本框【<input type="text" style="height:..;width:..;" />】;2、多行文本框【textarea style=";height:;"></textare】。

2023.09.01

2588

6

HTML嵌入CSS样式的方法
HTML嵌入CSS样式的方法

HTML嵌入CSS样式的方法有内联样式、内部样式表和外部样式表。本专题为大家提供CSS样式相关的文章、下载、课程内容,供大家免费下载体验。

2023.09.20

2668

5

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
千锋PHP-HTML入门及实战视频教程
千锋PHP-HTML入门及实战视频教程

共18课时 | 3.8万人学习

GDB 17.2 官方文档集合
GDB 17.2 官方文档集合

共0课时 | 0人学习

Bootstrap 入门安装配置
Bootstrap 入门安装配置

共0课时 | 0人学习