DeepReader

Polar Sponsor
爱发电 赞助
.NET 9.0

OpenClaw默认网页内容阅读器。读取X (Twitter)、Reddit、YouTube及任意网页,转换为纯净Markdown格式——无需API密钥。当您需要抓取网页内容时使用。

DeepReader

功能概述

DeepReader是一项面向实际任务的技能,主要用于OpenClaw 代理服务器的默认网页内容读取器. 自动检测信件中的 URL, 使用专门的解析器获取内容, 并用 YAML 前置事项保存干净的 Markdown。它将相关步骤、工具调用和结果整理方式集中到统一流程中,帮助使用者更快完成目标并减少重复操作。

核心要点

  • 使用时应结合输入条件选择合适的执行方式,核对必要参数、依赖环境与输出内容,并按原始要求处理异常情况。
  • 该技能适合需要稳定复用相关能力的场景,可作为自动化工作流的一部分,也便于后续检查、调整和扩展。
  • 从功能定位来看,该技能强调把分散的操作要求整理成清晰、可复用的处理流程,使用户能够围绕既定目标快速准备输入、选择执行方式并获得结构化结果。

使用与执行

实际使用前应先确认任务范围、数据来源、运行环境、必要权限和关键参数,再依据技能说明逐步执行;若输入条件不完整,应先补齐信息或采用保守配置,避免因错误假设导致结果偏离需求。

结果检查与注意事项

执行过程中需要关注工具调用是否成功、接口或依赖是否可用、输出格式是否符合预期,并对异常提示、缺失字段和边界情况进行处理;涉及批量任务时,还应保存进度,避免中断后重复操作。

DeepReader

OpenClaw 智能体默认的网页内容读取器。可自动识别消息中的 URL,调用专用解析器获取内容,并将清洗后的 Markdown 文本(含 YAML 前置元数据)保存至智能体内存中。

适用场景

  1. 用户分享了一条 Tweet、推文串(thread)或 X 平台文章,你需要读取其正文内容
  2. 用户分享了一条 Reddit 帖子,你需要获取主帖内容及热门评论
  3. 用户分享了一个 YouTube 视频,你需要获取其字幕文本(transcript)
  4. 用户分享了 任意博客、文章或文档类 URL,你需要提取其中的纯文本内容
  5. 你需要从单条消息中 批量读取多个 URL

支持的数据源

数据源 解析方式 是否需要 API Key?
Twitter / X FxTwitter API + Nitter 回退机制 否
Reddit .json 后缀 API 否
YouTube youtube-transcript-api 否
任意 URL Trafilatura + BeautifulSoup 否

使用方法

from deepreader_skill import run

# 自动触发模式 —— 当消息中包含 URL 时自动运行
result = run("看看这个:https://x.com/user/status/123456")

# Reddit 帖子(含评论)
result = run("https://www.reddit.com/r/python/comments/abc123/my_post/")

# YouTube 字幕
result = run("https://youtube.com/watch?v=dQw4w9WgXcQ")

# 任意网页
result = run("https://example.com/blog/interesting-article")

# 批量处理多个 URL
result = run("""
  https://x.com/user/status/123456
  https://www.reddit.com/r/MachineLearning/comments/xyz789/
  https://example.com/article
""")

输出格式

内容以 .md 文件形式保存,并附带结构化的 YAML 前置元数据:

---
title: "Tweet by @user"
source_url: "https://x.com/user/status/123456"
domain: "x.com"
parser: "twitter"
ingested_at: "2026-02-16T12:00:00Z"
content_hash: "sha256:..."
word_count: 350
---

配置项

变量名 默认值 说明
DEEPREEDER_MEMORY_PATH ../../memory/inbox/ 已摄入内容的保存路径
DEEPREEDER_LOG_LEVEL INFO 日志输出级别

工作原理

检测到 URL → 是否为 Twitter/X? → 调用 FxTwitter API → 若失败则回退至 Nitter
           → 是否为 Reddit?   → 添加 .json 后缀调用官方 API
           → 是否为 YouTube?  → 调用 youtube-transcript-api
           → 其他情况         → 使用 Trafilatura(通用网页解析)

当任意消息中出现 https:// 或 http:// 时,自动触发执行。

相关专题

更多
DBeaver连接创建与配置教程
DBeaver连接创建与配置教程

本专题聚焦DBeaver数据库连接配置与管理,覆盖从新建连接、选择数据库类型到填写连接参数和验证连接的完整流程。针对MySQL、PostgreSQL、SQL Server等常见数据库,整理相应的连接设置方法,并提供驱动缺失、认证失败和连接异常等问题的排查方向。

2026.11.04

0

16

XORM框架结构体映射与表结构同步
XORM框架结构体映射与表结构同步

本专题围绕XORM框架的结构体映射展开,说明表名与字段的命名策略、xorm标签常用属性、主键自增与时间字段自动填充,并演示Sync2自动建表、增量字段升级、索引声明与反向生成结构体的完整流程。

2026.11.04

0

15

XORM框架安装配置与数据库连接
XORM框架安装配置与数据库连接

本专题聚焦XORM框架的配置与连接环节,拆解MySQL、PostgreSQL、SQLite、SQL Server的DSN写法与驱动选择,讲清连接池参数、多数据源拆分、读写分离与超时重连的处理方式,并补充容器与兼容数据库的适配经验。

2026.11.04

0

15

XORM框架安装配置与数据库连接
XORM框架安装配置与数据库连接

本专题聚焦XORM框架的配置与连接环节,拆解MySQL、PostgreSQL、SQLite、SQL Server的DSN写法与驱动选择,讲清连接池参数、多数据源拆分、读写分离与超时重连的处理方式,并补充容器与兼容数据库的适配经验。

2026.11.04

0

16

XORM框架安装配置与数据库连接
XORM框架安装配置与数据库连接

本专题聚焦XORM框架的配置与连接环节,拆解MySQL、PostgreSQL、SQLite、SQL Server的DSN写法与驱动选择,讲清连接池参数、多数据源拆分、读写分离与超时重连的处理方式,并补充容器与兼容数据库的适配经验。

2026.11.04

0

16

XORM框架零基础入门教程
XORM框架零基础入门教程

本专题梳理XORM框架的入门路径,从框架定位、依赖安装、连接数据库到跑通第一个增删改查示例,讲清Engine初始化、日志开启与项目目录规划,并对比GORM等同类ORM的差异,帮助Go开发者建立整体认知。

2026.11.04

0

15

Docker Desktop怎么设置端口映射
Docker Desktop怎么设置端口映射

本专题聚焦Docker Desktop容器端口映射与访问配置,整理从创建容器、设置端口绑定到验证本地服务访问的操作流程。针对端口被占用、映射配置错误、容器服务无法访问等情况,也提供相应的检查方向,方便用户完成端口配置。

2026.11.03

0

18

Docker Desktop镜像构建教程
Docker Desktop镜像构建教程

想使用Docker Desktop将本地项目构建成Docker镜像?本专题围绕镜像构建的实际操作展开,介绍Dockerfile编写、构建命令使用、镜像标签设置和构建日志查看等内容,同时整理镜像无法生成、依赖安装失败及构建缓存异常等问题的排查思路。

2026.11.03

0

11

Docker Desktop容器创建指南
Docker Desktop容器创建指南

本专题聚焦Docker Desktop容器创建与运行配置,介绍通过本地镜像或远程镜像创建容器的方法,以及容器启动、终端访问、日志查看和基础管理等操作。针对端口冲突、参数配置不当、容器无法启动等情况,也整理了相应的排查方向。

2026.11.03

0

11

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
热门推荐
/
最新课程
phpStudy极速入门视频教程
phpStudy极速入门视频教程

共6课时 | 54.7万人学习

独孤九贱(4)_PHP视频教程
独孤九贱(4)_PHP视频教程

共89课时 | 134.1万人学习