指南：用 API 把任意 URL 转成 RAG 可用的 Markdown

2026 年 10 月 3 日，DEV Community 发布了一篇指南，讲的是如何用 API 把任意 URL 转成可供 RAG 使用的 Markdown。指南使用的接口是 AgentSearch Web Extract，名称为 agentsearch-web-extract-v1。

指南给出的理由是，原始 HTML 并不是适合 LLM 的上下文：一个典型页面的大部分内容是导航、脚本、Cookie 横幅和页脚链接，把这些内容放进 embedding 模型或提示词里，会白白消耗 token，并且拉低检索质量。

按指南的说明，真正需要的是正文内容，也就是标题、段落、列表和链接，以 Markdown 的形式输出，同时还要带上足够的元数据，用来引用来源、判断内容什么时候会过期。报道没有提到这个接口的发布时间、价格或其他使用限制，也没有给出这份指南之外的任何评价。目前这件事停在这份指南的发布上。