empiricalwiki: Skill for Claude Code

/daily-arxiv

每日从 arXiv RSS 拉取新论文，基于 wiki 中的研究方向和概念自动判断相关性， 对高相关论文调用 /ingest 完整纳入 wiki，检测 SOTA 更新，生成 digest 日志。 支持 cron 调度自动执行，也可手动触发。

Inputs

• --hours N：拉取最近 N 小时的论文（默认 24）
• --max-ingest N：单次最多 ingest 篇数（默认 5，防止 wiki 过载）
• --dry-run：仅生成 digest，不执行 ingest
• --categories：覆盖默认 arXiv 分类（默认 cs.LG cs.CV cs.CL cs.AI stat.ML）

Outputs

• raw/discovered/{slug}/ 或 raw/discovered/{slug}.pdf — 每篇 auto-ingest 论文对应的抓取原始来源
• wiki/papers/{slug}.md — 高相关论文页面（通过 /ingest 创建）
• 相应的 concepts/、people/、claims/ 页面（通过 /ingest 创建）
• 更新的 wiki/topics/*.md — SOTA tracker 标注（若检测到 SOTA 更新）
• 更新的 wiki/graph/ — edges.jsonl, context_brief.md, open_questions.md（通过 /ingest 维护）
• 更新的 wiki/index.md 和 wiki/log.md

Wiki Interaction

Reads

• wiki/topics/*.md — 提取 Overview 关键词和 SOTA tracker，用于相关性判断和 SOTA 检测
• wiki/concepts/*.md — 提取 Definition 关键词，辅助相关性判断
• wiki/index.md — 检查论文是否已收录（按 arXiv URL 去重）
• wiki/papers/*.md — 检查 arxiv ID 是否已存在
• wiki/graph/open_questions.md — 优先 ingest 能填补知识缺口的论文

Writes

• wiki/papers/{slug}.md — 通过 /ingest CREATE
• wiki/concepts/{slug}.md — 通过 /ingest CREATE/EDIT
• wiki/people/{slug}.md — 通过 /ingest CREATE/EDIT
• wiki/claims/{slug}.md — 通过 /ingest CREATE/EDIT
• wiki/topics/{slug}.md — EDIT（SOTA tracker 标注）
• wiki/graph/edges.jsonl — 通过 /ingest APPEND
• wiki/graph/context_brief.md — REBUILD（最终一次）
• wiki/graph/open_questions.md — REBUILD（最终一次）
• wiki/index.md — 通过 /ingest EDIT
• wiki/log.md — APPEND

Graph edges created

• 通过 /ingest 创建的所有 edges（paper → concept, paper → claim 等）

Workflow

前置：确认工作目录为 wiki 项目根（包含 wiki/、raw/、tools/ 的目录）。 设 WIKI_ROOT=wiki/。

Step 1: 拉取 arXiv RSS + 热门论文

1. 运行 fetch_arxiv.py 获取新论文列表：

   python3 tools/fetch_arxiv.py --hours <hours> -o /tmp/arxiv_feed.json
   

2. 获取 DeepXiv 热门论文（过去 7 天）：

   python3 tools/fetch_deepxiv.py trending --days 7 --limit 20
   

   将热门论文合并到候选列表中（按 arxiv_id 去重），热门论文在后续评分中获得额外关注。 若 DeepXiv 不可用：跳过此子步骤，仅使用 RSS 结果。
3. 解析结果，获取论文列表（title, abstract, authors, arxiv_url, arxiv_id, category）
4. 去重：读取 wiki/index.md，跳过 arxiv URL 已在 wiki 中的论文。同时检查 wiki/papers/ 目录下已有的 arxiv ID。
5. 若无新论文，直接跳到 Step 6 生成空 digest。