通过 Firecrawl API 进行网页搜索与抓取。适用于搜索网络、抓取网站(包括重度JS页面)、爬取全站或从网页提取结构化数据。需要配置 FIRECRAWL_API_KEY 环境变量。
Firecrawl是一项面向实际任务的技能,主要用于网络搜索和刮刮通过 Firecrawl API.. . pricesites.;SSet FIRECRAWL API KEY 在您环境中或.env 文件: QQQ快速启动. 搜索网页. 搜索一个单一的页面. 抓取一个完整的网站.;
从功能定位来看,该技能强调把分散的操作要求整理成清晰、可复用的处理流程,使用户能够围绕既定目标快速准备输入、选择执行方式并获得结构化结果。实际使用前应先确认任务范围、数据来源、运行环境、必要权限和关键参数,再依据技能说明逐步执行;若输入条件不完整,应先补齐信息或采用保守配置,避免因错误假设导致结果偏离需求。
执行过程中需要关注工具调用是否成功、接口或依赖是否可用、输出格式是否符合预期,并对异常提示、缺失字段和边界情况进行处理;涉及批量任务时,还应保存进度,避免中断后重复操作。该技能适合用于一次性任务,也可以接入自动化工作流,与其他技能或上层代理配合完成更完整的业务链路;在组合使用时,应明确每一步的输入输出关系,并避免不同步骤之间出现参数冲突。
通过 Firecrawl API 进行网页搜索与爬取。
在环境变量或 .env 文件中设置 FIRECRAWL_API_KEY:
export FIRECRAWL_API_KEY=fc-xxxxxxxxxx
firecrawl_search "your search query" --limit 10
firecrawl_scrape "https://example.com"
firecrawl_crawl "https://example.com" --max-pages 50
详细 API 文档及高级选项请参见 references/api.md。
scripts/search.py — 使用 Firecrawl 搜索网页scripts/scrape.py — 爬取单个 URLscripts/crawl.py — 爬取整个网站相关专题
热门下载
相关下载
精品课程
共6课时 | 54.7万人学习
共89课时 | 134万人学习
共49课时 | 82.5万人学习
最新文章