新手必看:快速保存任意网页HTML源码的方法

阿雪小哥_3454

阿雪小哥_3454

2026-09-19

990人浏览

原创

直接用response.text写html文件大概率乱码,因requests自动解码常出错;应改用response.content手动decode(如utf-8或gbk),再以encoding='utf-8'写入文件。

新手必看:快速保存任意网页html源码的方法

直接用 requests.get() 拿到的 response.text 写入 .html 文件,大概率打开是乱码、空白或样式错乱——不是代码写错了,而是编码没对上、JS没执行、或文件写法不匹配系统默认行为。

为什么 response.text 不能直接写文件

requests 默认按响应头里的 Content-Type 解码,但很多网站不写 charset,或写错(比如声明 utf-8 却返回 GBK 字节),这时 response.text 就是错误解码后的字符串,再写入文件只会固化乱码。

  • Windows 上用 open(..., 'w') 不指定 encoding,会走系统默认 cp1252,中文直接报 UnicodeEncodeError
  • 即使没报错,response.text 可能已被 requests 错误转义(比如把   变成空格),破坏原始 HTML 结构
  • 网页含 <script></script> 或动态加载内容时,response.text 里根本没那些 DOM 节点,本地打开自然为空

推荐做法:用 response.content + 显式 decode

跳过 requests 的自动解码,自己控制字节流处理,是最稳的起点。

html-ppt-to-pdf
html-ppt-to-pdf

将使用 `

` 约定的 HTML 幻灯片转换为高保真、矢量文本 PDF(使用 Playwright + Chromium 原生 PDF 功能)。

下载
  • 先用 response.content 拿原始字节,避免中间转码污染
  • 手动 decode:优先试 utf-8,失败用 errors='replace' 容错;更准的做法是装 chardet 探测:chardet.detect(response.content)['encoding']
  • 写文件时必须加 encoding='utf-8',哪怕你 decode 用的是 GBK——因为写入目标是 HTML 文件,浏览器只认 meta 或 HTTP 头声明的编码,统一用 utf-8 最省事
import requests
url = 'https://example.com'
response = requests.get(url)
html = response.content.decode('utf-8', errors='replace')
with open('page.html', 'w', encoding='utf-8') as f:
    f.write(html)

遇到 JS 渲染页面怎么办

如果打开保存的 page.html 缺少正文、按钮或列表,大概率是内容由 JS 动态注入。此时 requests 天然无解,得换工具。

  • 先去浏览器开发者工具的 Network 面板,过滤 XHR/Fetch,看关键数据是不是从独立接口返回——如果是,直接 requests.get() 那个 URL,比渲染整页快得多
  • 必须等 JS 执行才出结果?用 seleniumplaywright,但注意:driver.page_source 返回的是渲染后 HTML,不含原始 <script></script> 标签逻辑,且启动慢、易被反爬识别
  • 别用 BeautifulSoup 处理后再保存——soup.prettify() 会重排标签、删注释、剥离 <style></style>,导致本地打开样式崩坏

保存路径和文件名要注意什么

写入前不检查目录是否存在,或用了非法字符,会导致 FileNotFoundError 或静默失败。

  • 路径用 os.makedirs('./output', exist_ok=True) 提前建好目录
  • 文件名里避免 / \ : * ? " |,Windows 下这些是保留符;建议用 urllib.parse.quote 或简单替换为下划线
  • 不要用 open(..., 'w+') ——+ 模式在某些系统上可能触发意外截断,纯写就用 'w'

最常被忽略的一点:你以为保存的是“完整网页”,其实只是初始 HTML 响应体。图片、CSS、字体等外部资源链接仍是相对路径,本地双击打开时全部 404——这不是 Python 的问题,是网页本身的设计逻辑。

前端入门到VUE实战笔记:立即使用
在学习笔记中,你将探索 前端 的入门与实战技巧!

相关文章

HTML速学教程(入门课程)
HTML速学教程(入门课程)

HTML怎么学习?HTML怎么入门?HTML在哪学?HTML怎么学才快?不用担心,这里为大家提供了HTML速学教程(入门课程),有需要的小伙伴保存下载就能学习啦!

下载

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
html版权符号
html版权符号

html版权符号是“©”,可以在html源文件中直接输入或者从word中复制粘贴过来,php中文网还为大家带来html的相关下载资源、相关课程以及相关文章等内容,供大家免费下载使用。

2023.06.14

4795

7

html在线编辑器
html在线编辑器

html在线编辑器是用于在线编辑的工具,编辑的内容是基于HTML的文档。它经常被应用于留言板留言、论坛发贴、Blog编写日志或等需要用户输入普通HTML的地方,是Web应用的常用模块之一。php中文网为大家带来了html在线编辑器的相关教程、以及相关文章等内容,供大家免费下载使用。

2023.06.21

2812

4

html网页制作
html网页制作

html网页制作是指使用超文本标记语言来设计和创建网页的过程,html是一种标记语言,它使用标记来描述文档结构和语义,并定义了网页中的各种元素和内容的呈现方式。本专题为大家提供html网页制作的相关的文章、下载、课程内容,供大家免费下载体验。

2023.07.31

2470

5

html空格
html空格

html空格是一种用于在网页中添加间隔和对齐文本的特殊字符,被用于在网页中插入额外的空间,以改变元素之间的排列和对齐方式。本专题为大家提供html空格的相关的文章、下载、课程内容,供大家免费下载体验。

2023.08.01

2499

5

html是什么
html是什么

HTML是一种标准标记语言,用于创建和呈现网页的结构和内容,是互联网发展的基石,为网页开发提供了丰富的功能和灵活性。本专题为大家提供html相关的各种文章、以及下载和课程。

2023.08.11

4519

6

html字体大小怎么设置
html字体大小怎么设置

在网页设计中,字体大小的选择是至关重要的。合理的字体大小不仅可以提升网页的可读性,还能够影响用户对网页整体布局的感知。php中文网将介绍一些常用的方法和技巧,帮助您在HTML中设置合适的字体大小。

2023.08.11

2461

3

html转txt
html转txt

html转txt的方法有使用文本编辑器、使用在线转换工具和使用Python编程。本专题为大家提供html转txt相关的文章、下载、课程内容,供大家免费下载体验。

2023.08.31

2229

3

html文本框代码怎么写
html文本框代码怎么写

html文本框代码:1、单行文本框【<input type="text" style="height:..;width:..;" />】;2、多行文本框【textarea style=";height:;"></textare】。

2023.09.01

2068

6

HTML嵌入CSS样式的方法
HTML嵌入CSS样式的方法

HTML嵌入CSS样式的方法有内联样式、内部样式表和外部样式表。本专题为大家提供CSS样式相关的文章、下载、课程内容,供大家免费下载体验。

2023.09.20

2008

5

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
HTML教程
HTML教程

共500课时 | 9.9万人学习

HTML 基础教程
HTML 基础教程

共45课时 | 20.3万人学习

GDB 17.2 官方文档集合
GDB 17.2 官方文档集合

共0课时 | 0人学习