开源AI前沿信息爬虫支持API RSS及SKILL多方式订阅

背景

在 AI 技术快速迭代的当下，获取前沿资讯的效率直接影响技术人员的竞争力。此前，作者在 LINUX DO 社区分享过一款 AI 前沿信息爬虫工具，该工具能够自动抓取 GitHub Trending、Linux do、Hacker News、OpenAI、Anthropic、InfoQ AI 等多个关键渠道的信息。

尽管该工具已初步验证了其在信息聚合方面的价值，但社区用户反馈显示，许多开发者希望获得更灵活、更通用的接入方式，特别是支持 RSS 订阅以及 AI 助手技能（Skill）集成，以便随时随地通过不同终端获取 AI 相关信息。基于这一需求，作者正式发布了完全开源的版本，旨在提供一套标准化的 API、RSS 和 Skill 解决方案，降低用户获取 AI 前沿信息的门槛。

核心内容

本项目是一个完全开源的 AI 前沿信息爬虫系统，支持通过 API、RSS 和 Skill 三种方式分发内容。所有代码、接口及配置均免费开放，无隐藏收费或未开源部分。

1. API 接口服务

项目提供了稳定的线上 RESTful API，方便开发者直接集成到自己的应用中。主要接口包括：

• 健康检查：GET https://www.gdufe888.top/api/health
• 获取数据源列表：GET https://www.gdufe888.top/api/sources
• 获取指定来源的最新内容：GET https://www.gdufe888.top/api/sources/{source_id}/latest

支持的 Source ID 示例：

• github-daily / github-weekly：GitHub 每日/每周热门趋势
• hacker-news：Hacker News 热门话题
• linux-do：LINUX DO 社区内容
• v2ex：V2EX 社区内容
• tldr-ai：TLDR AI 简报
• openai / anthropic：OpenAI 与 Anthropic 官方动态
• infoq：InfoQ AI 板块

2. RSS 订阅源

为了满足传统阅读器、自动化工作流（如 n8n、Zapier）或其他系统的需求，项目提供了一个聚合型的 RSS 订阅地址。该地址汇总了所有已注册来源的最新内容，用户只需订阅一个地址即可接收所有 AI 相关动态。

• 线上 RSS 地址：https://www.gdufe888.top/api/rss.xml

3. AI Skill 集成

项目仓库中提供了名为 tech-trend-spider 的 Skill。该 Skill 的设计目标是让 AI 助手能够通过只读 API 查询已采集好的技术趋势数据。

• 优势：安装该 Skill 的用户无需下载本仓库源码，也无需配置 Python 爬虫依赖环境。
• 工作方式：AI 助手在运行时通过调用线上 API 获取数据，实现了“即插即用”的体验，极大降低了 AI 辅助编程或研究场景下的配置复杂度。

关键要点

• 完全开源免费：项目承诺永久开源，无未开源部分，接受社区监督，所有 API、RSS 和 Skill 均免费使用。
• 多模态接入：同时支持 API（开发者集成）、RSS（阅读器/自动化）、Skill（AI 助手直接调用）三种主流数据消费方式，覆盖不同用户群体的需求。
• 数据源权威且广泛：覆盖了 GitHub Trending、Hacker News、OpenAI、Anthropic 等全球最核心的 AI 和技术社区，确保信息的时效性和权威性。
• 低门槛集成：通过 tech-trend-spider Skill，用户无需处理爬虫依赖和源码，即可让 AI 助手具备实时查询技术趋势的能力。
• 社区驱动：项目起源于 LINUX DO 社区需求，并在社区内完成推广与迭代，体现了开源社区互助共享的精神。

意义与影响

该项目的发布解决了 AI 开发者在信息过载时代的一个痛点：如何高效、结构化地获取多源异构的 AI 资讯。

1. 提升信息获取效率：通过自动化的爬虫和聚合服务，用户无需手动浏览多个网站，即可通过 RSS 或 API 集中获取最新技术动态，节省了大量时间成本。
2. 促进 AI 工作流自动化：提供 API 和 RSS 接口，使得该工具可以轻松嵌入到个人的知识管理系统（如 Notion、Obsidian）或自动化工作流中，实现信息的自动流转和处理。
3. 增强 AI 助手的实时性：通过 Skill 形式，让本地或云端 AI 助手能够访问实时数据，弥补了大模型训练数据截止日期的局限，提升了 AI 在技术问答和趋势分析场景下的实用性。
4. 开源生态的良性示范：项目严格遵循社区开源规范，透明化 AI 生成内容的处理过程，为社区内的开源推广提供了良好的范例，有助于建立更健康的开源协作氛围。