直接请求ajax接口常失败，因现代网页依赖js生成的动态参数（如token、sign、timestamp）及dom提取值，单纯requests易返回空数据或403/401错误。
为什么直接请求Ajax接口经常失败？
因为多数现代网页的Ajax请求依赖前端JavaScript运行时生成的参数，比如 token、timestamp、sign，或者从页面DOM中动态提取的 data-id、csrf_token。单纯用 requests 拼URL发GET/POST，大概率返回空数据或403/401错误。
常见现象：抓到的HTML里有“加载中…”占位符，但用浏览器开发者工具能看到Network里后续发了若干XHR请求并带回真实数据——这些请求你没复现，就等于没抓到核心内容。
- 检查XHR请求的Headers，特别关注
Referer、Cookie、X-Requested-With是否缺失或过期 - 观察请求参数是否含时间戳（如
ts=1715823491234）或哈希值（如sign=abc123...），这类值通常由JS实时计算 - 确认目标接口是否校验
User-Agent或要求特定浏览器指纹（比如检测navigator.webdriver === false）
用Playwright模拟点击比Selenium更稳的原因
Playwright内置对现代JS框架（React/Vue）的异步等待支持，能自动等元素可点击、等XHR完成、等DOM更新，而Selenium常需手动加 WebDriverWait + expected_conditions，稍不留神就超时或误判。
实操建议：
- 优先用
page.click("button#load-more")而非page.evaluate("document.querySelector(...).click()")——前者触发真实事件链（mousedown→mouseup→click），后者只调用方法，不触发监听器 - 点击后加
page.wait_for_response("https://api.example.com/data")等待对应XHR完成，比固定time.sleep(2)更可靠 - 启用
headless=False初期调试，观察点击是否真被触发（有时按钮被遮挡、未渲染完成、或CSS禁用了pointer-events）
如何从页面中提取Ajax请求所需的动态参数？
不要硬编码或猜参数，而是让浏览器执行JS提取。Playwright的 page.eval_on_selector 和 page.evaluate 是关键工具。
Python 3.14.2是Python编程语言在2025年12月5日发布的稳定版本，属于3.14系列的第二个维护更新。该版本包含了18项修复，重点解决了多进程、数据类及正则表达式等模块的回归问题，并修复了CVE-2025-12084等安全漏洞。此版本标志着自由线程模式（移除GIL）正式获得官方支持，是Python发展的重要里程碑。
例如某电商商品页的“加载评论”按钮点击后，会发一个带 itemId 和 sellerId 的请求：
item_id = page.eval_on_selector("meta[name='item-id']", "el => el.getAttribute('content')")
seller_id = page.evaluate("() => window.__INITIAL_STATE__.seller.id")
注意点：
- 用
eval_on_selector提取DOM属性最安全；用evaluate读全局变量前，先确认该变量已注入（可加page.wait_for_function("window.__INITIAL_STATE__")） - 避免在Python层拼接URL参数，把整个请求逻辑（含签名生成）写进JS里执行，再把结果传回Python，减少跨语言计算误差
- 某些参数（如加密sign）可能来自闭包函数，此时需用
page.evaluate执行原始JS片段，而非试图反编译算法
什么时候该放弃模拟点击，直接逆向Ajax接口？
当页面结构稳定、Ajax请求规律性强、且JS逻辑不复杂时，逆向接口反而更快更轻量。典型场景：分页列表、搜索结果、详情页基础字段。
操作路径：
- 在开发者工具Network中筛选
XHR，找到目标请求，右键 → “Copy as cURL”，粘贴到在线转换工具（如curlconverter.com）转成requests代码 - 对比多页请求，找出变化参数（如
page=1、keyword=python），用Python循环构造 - 若接口带加密，先定位JS中生成加密逻辑的位置（搜索
md5、HmacSHA256、base64等关键词），用execjs或pycryptodome复现，别硬刚JS引擎
真正麻烦的是那些每次打开页面都刷新token、且token生成依赖Canvas指纹或WebGL特征的站点——这时候模拟点击+Playwright是唯一现实选择，但得接受启动慢、内存占用高、需要维护浏览器版本兼容性。
Python免费学习笔记（深入）：立即使用
在学习笔记中，你将探索 Python 的核心概念和高级技巧！
