全部分类
Scrapy 2.18.0 是 Scrapy 当前官方发布的新版本,面向 Python 网页抓取、选择器解析、Item Pipeline、异步请求调度和数据导出场景,适合新爬虫项目安装和旧项目升级测试。 官方网站:https://scrapy.org/
Scrapy必备开发工具
专栏首页
历史版本
学习视频
手册
专题
资讯
文章
更新时间:2026-09-03
立即下载
DETAILED INTRODUCTION
Scrapy 是由 Scrapy developers 维护、Zyte 持续支持的开源 Python 爬虫框架,基于异步事件驱动架构,内置 Spider、Selectors、Item Pipeline、Requests/Responses、Feed exports、扩展与部署能力,适合网页采集、结构化数据抽取、监控抓取和爬虫工程化开发。
社区
大V推荐
Scrapy 官方X
Scrapy版本
2026-08-18
本专题整理 Scrapy 项目目录结构、核心文件作用、命令行用法、Spider 创建流程和项目运行方式,帮助开发者快速理解 Scrapy 工程化开发。
本专题整理 Scrapy 的 Request 和 Response 机制、回调函数、链接跟进、分页抓取、详情页抓取和请求流程控制,帮助开发者完成完整的页面抓取链路。
本专题围绕 Scrapy 框架展开,系统讲解分布式爬虫架构、数据抓取流程、Pipeline 处理机制以及反爬策略应对方法。通过真实数据采集项目,帮助开发者构建高效、稳定的大规模数据采集系统。
共16课时 | 384人学习
Scrapy 官方文档覆盖安装、Tutorial、Selectors、Item Pipeline、Requests/Responses、asyncio 与部署等内容,适合从入门到进阶查阅。
0
2026.08.18