firecrawl scrape

抓取一个或多个 URL。返回干净、面向大语言模型优化的 Markdown 内容。多个 URL 将并发抓取。

适用场景

• 你已知具体 URL，仅需获取其页面内容
• 目标页面为静态页面或由 JavaScript 渲染的单页应用（SPA）
• 工作流升级模式中的第二步：search → scrape → map → crawl → interact

快速开始

# 基础 Markdown 提取
firecrawl scrape "" -o .firecrawl/page.md

# 仅提取主体内容（排除导航栏、页脚等）
firecrawl scrape "" --only-main-content -o .firecrawl/page.md

# 等待 JavaScript 渲染完成后再抓取（等待 3000 毫秒）
firecrawl scrape "" --wait-for 3000 -o .firecrawl/page.md

# 并发抓取多个 URL（每个 URL 的结果分别保存至 .firecrawl/ 目录下）
firecrawl scrape https://example.com https://example.com/blog https://example.com/docs

# 同时获取 Markdown 内容与链接列表
firecrawl scrape "" --format markdown,links -o .firecrawl/page.json

# 就页面内容提出一个问题
firecrawl scrape "https://example.com/pricing" --query "What is the enterprise plan price?"

选项

使用提示

• 优先使用基础 scrape，而非 --query。 先将页面抓取为文件，再通过 grep、head 或直接阅读 Markdown 进行分析——你可以自主对完整内容进行搜索与推理。仅当无需保存页面、且仅需一个精准答案时才使用 --query（额外消耗 5 个积分）。
• 先尝试 scrape，再考虑 interact。 scrape 可处理静态页面及 JS 渲染的 SPA；仅当必须执行交互操作（如点击、填写表单、翻页等）时，才升级至 interact。
• 多个 URL 默认并发抓取，请运行 firecrawl --status 查看当前并发限制。
• 单一格式输出为原始内容（如纯 Markdown 文本）；若指定多个格式（例如 --format markdown,links），则统一输出 JSON 格式。
• 始终为 URL 加上英文双引号——Shell 会将 ? 和 & 解析为特殊字符。
• 推荐命名规范：.firecrawl/{site}-{path}.md

参见

• firecrawl-search —— 在没有明确 URL 时用于发现目标页面
• firecrawl-interact —— 当 scrape 无法获取所需内容时，使用 interact 执行点击、表单填写等交互操作
• firecrawl-download —— 批量下载整站内容至本地文件系统