Security News Module

概述

本模块自动从 11 家韩国安全新闻源采集新闻，调用 Gemini API 生成摘要，并同步发布至 Notion 和 Tistory。

执行周期：每小时自动运行一次

工作流

11 家安全新闻源并行爬取
    ├─ KRCERT（韩国互联网振兴院）
    ├─ NCSC（国家网络安全中心）
    ├─ Boho（保护家园）
    ├─ Dailysec
    ├─ KISA
    ├─ K-shield
    ├─ KrCert
    ├─ Notice
    ├─ Boho2
    ├─ Krcert2
    └─ Ncsc2
    ↓
基于关键词的过滤（安全相关关键词）
    ↓
Gemini API 摘要生成（140 字简述 + 详细分析）
    ↓
保存至 Notion 数据库
    ↓
发布至 Tistory 博客（可选）

主要功能

1. 新闻采集（Collection）

11 家韩国安全新闻源：

2. 关键词过滤（Filtering）

安全相关关键词：

keywords = [
    "취약점", "악성코드", "해킹", "랜섬웨어",
    "보안", "침해", "공격", "암호화",
    "인증", "방화벽", "악성", "피싱",
    "스파이웨어", "트로이목마", "봇넷"
]

3. Gemini API 摘要生成（Summarization）

摘要结构：

[140 字简述]
- 核心内容三行摘要

[详细分析]
- 背景说明
- 主要内容
- 启示与影响
- 应对建议

4. Notion 发布（Notion Publishing）

• 自动保存：采集到的新闻自动存入数据库
• 标签分类：基于关键词自动打标
• 状态管理：New → Read → Archived

5. Tistory 发布（Tistory Publishing）

• 选择性发布：仅发布重要新闻
• 自动格式化：Markdown → HTML 转换
• 分类管理：自动分配文章类别

安装方法

1. 克隆仓库

git clone --recursive https://github.com/rebugui/OpenClaw.git
cd OpenClaw/submodules/security_news_aggregator

2. 安装依赖

pip install -r requirements.txt

3. 配置环境变量

cp .env.example .env

编辑 .env 文件：

# Gemini API
GEMINI_API_KEY=your_gemini_api_key

# Notion API（可选）
NOTION_API_KEY=your_notion_api_key
NOTION_DATABASE_ID=your_database_id

# Tistory API（可选）
TISTORY_ACCESS_TOKEN=your_access_token
TISTORY_BLOG_NAME=your_blog_name

使用方法

手动执行

# 单次运行
python security_news_aggregator.py --once

# 守护进程模式（持续运行）
python security_news_aggregator.py

# 仅采集指定来源
python security_news_aggregator.py --sources krcert,ncsc

注册调度器任务

在 OpenClaw 调度器中注册以实现自动执行：

# config.yaml
jobs:
  - id: "security_news_aggregator"
    name: "Security News Aggregator - 每 1 小时采集安全新闻"
    enabled: true
    module: "security_news_aggregator.security_news_aggregator"
    function: "main"
    is_async: false
    working_dir: "submodules/security_news_aggregator"
    trigger:
      type: "interval"
      hours: 1

配置文件

config.py

# 新闻源配置
NEWS_SOURCES = {
    'krcert': {
        'url': 'https://www.krcert.or.kr',
        'type': 'rss',
        'enabled': True
    },
    'ncsc': {
        'url': 'https://www.ncsc.go.kr',
        'type': 'web',
        'enabled': True
    },
    # ...
}

# 关键词过滤列表
KEYWORDS = [
    "취약점", "악성코드", "해킹", "랜섬웨어",
    "보안", "침해", "공격", "암호화"
]

# Gemini 配置
GEMINI_MODEL = "gemini-2.0-flash-exp"
GEMINI_MAX_TOKENS = 1000
GEMINI_TEMPERATURE = 0.7

# Notion 配置
NOTION_ENABLED = True
NOTION_DATABASE_ID = "your_database_id"

# Tistory 配置
TISTORY_ENABLED = False
TISTORY_BLOG_NAME = "your_blog_name"

文件结构

security_news_aggregator/
├── security_news_aggregator.py  # 主程序入口
├── config.py                    # 配置文件
├── .env.example                 # 环境变量示例
├── requirements.txt             # 依赖清单
│
├── modules/                     # 功能模块
│   ├── collectors/              # 新闻采集器
│   │   ├── krcert_collector.py
│   │   ├── ncsc_collector.py
│   │   └── ...
│   ├── summarizer.py            # Gemini 摘要模块
│   ├── notion_publisher.py      # Notion 发布模块
│   └── tistory_publisher.py     # Tistory 发布模块
│
├── data/                        # 数据存储目录
│   └── news_cache.json
│
└── logs/                        # 日志目录
    └── aggregator.log

Notion 数据库配置

字段结构

• Title（标题）
• Summary（140 字摘要）
• Content（详细分析）
• Source（来源）
• URL（原文链接）
• Tags（多选标签）
• Published（发布时间）
• Status（状态：New / Read / Archived）

示例输出

采集到的新闻

# 新型勒索软件开始攻击韩国企业

**摘要**: 一种新型勒索软件变种已开始针对韩国企业发起攻击...

**详细分析**:
- **背景**: 近期勒索软件攻击事件持续增加...
- **主要内容**: 该勒索软件采用...
- **启示与影响**: 企业亟需加强整体安全防护...
- **应对建议**: 定期备份、及时更新安全补丁...

**标签**: #랜섬웨어 #한국 #기업공격

**来源**: KRCERT
**原文**: https://www.krcert.or.kr/...

执行统计

最近一次执行结果（2026-03-08 11:58）

✅ 采集新闻数：169 篇
✅ URL 解析完成：137 条
✅ 关键词过滤处理：169 篇
✅ Gemini 摘要生成完成
✅ Notion 存储完成

故障排查

新闻采集失败

# 查看日志
tail -f logs/aggregator.log

# 测试特定来源
python security_news_aggregator.py --test krcert

Gemini API 错误

# 检查 API 密钥
echo $GEMINI_API_KEY

# 查询 API 配额
curl "https://generativelanguage.googleapis.com/v1beta/models/gemini-2.0-flash-exp?key=$GEMINI_API_KEY"

Notion 连接错误

# 检查 Notion API 密钥
curl -X POST https://api.notion.com/v1/databases/{database_id}/query 
  -H "Authorization: Bearer {token}" 
  -H "Notion-Version: 2022-06-28"

依赖项

• Python 3.11+
• Gemini API
• Notion API（可选）
• Tistory API（可选）
• BeautifulSoup4
• Requests

API 密钥获取方式

Gemini API

1. 访问 https://makersuite.google.com/app/apikey
2. 创建 API 密钥
3. 复制密钥

Notion API（可选）

1. 访问 https://www.notion.so/my-integrations
2. 新建集成
3. 复制 API 密钥
4. 将集成关联至目标数据库

Tistory API（可选）

1. 访问 https://www.tistory.com/guide/api/register
2. 注册应用
3. 获取 Access Token

许可证

MIT License

参考信息

• 本模块仓库: https://github.com/rebugui/security_news_aggregator
• 主仓库: https://github.com/rebugui/OpenClaw