指南:用 API 把任意 URL 轉成 RAG 可用的 Markdown
2026/10/03 — 10/03 08:11·1 個來源·1 篇報道
事件概覽
2026 年 10 月 3 日,DEV Community 釋出了一篇指南,講的是如何用 API 把任意 URL 轉成可供 RAG 使用的 Markdown。指南使用的介面是 AgentSearch Web Extract,名稱為 agentsearch-web-extract-v1。
指南給出的理由是,原始 HTML 並不是適合 LLM 的上下文:一個典型頁面的大部分內容是導航、指令碼、Cookie 橫幅和頁尾連結,把這些內容放進 embedding 模型或提示詞裡,會白白消耗 token,並且拉低檢索質量。
按指南的說明,真正需要的是正文內容,也就是標題、段落、列表和連結,以 Markdown 的形式輸出,同時還要帶上足夠的後設資料,用來引用來源、判斷內容什麼時候會過期。報道沒有提到這個介面的釋出時間、價格或其他使用限制,也沒有給出這份指南之外的任何評價。目前這件事停在這份指南的釋出上。
AI 綜合 1 篇報道生成 · 更新於 2 小時前
最新進展這份指南用 AgentSearch Web Extract(agentsearch-web-extract-v1)把任意 URL 轉成適合 RAG 的 Markdown。原始 HTML 裡大量導航、指令碼、Cookie 橫幅和頁尾連結會白白消耗 token 並拉低檢索質量,提取後的標題、段落、列表和連結,加上可引用來源、判斷過期的後設資料,才是餵給模型需要的部分。

- 熱度指數
- 94
- 獨立來源
- 1
- 報道數
- 1
- 首報
- 3 小時前
這件事的報道 點標題看原文
這份指南用 AgentSearch Web Extract(agentsearch-web-extract-v1)把任意 URL 轉成適合 RAG 的 Markdown。原始 HTML 裡大量導航、指令碼、Cookie 橫幅和頁尾連結會白白消耗 token 並拉低檢索質量,提取後的標題、段落、列表和連結,加上可引用來源、判斷過期的後設資料,才是餵給模型需要的部分。
教你用 API 把网页洗成 RAG 可用的 Markdown,可照做
DEV Community · AIAI 評分 66
同時在說的其他事
- 604發酵中輝達釋出 64GB 版 DGX Spark,售價 4999 美元8 個來源
- 588發酵中Apple 收緊 macOS 全盤訪問許可權,防範 AI Agent 風險7 個來源
- 437新Meta 開源 Muse Gadgets 韌體與 SDK5 個來源
- 248爆Anthropic 投 1 億美元啟動 Claude 工程師學院3 個來源
- 246爆Hugging Face 開源報告生成模型 AstaBrief3 個來源
- 227爆OpenAI DevDay 2026 釋出 Dots、Decisions API 等新品3 個來源
熱度怎麼算的?瞭解口徑收起
熱度按 48 小時內有多少個獨立來源在說這件事算:同一個來源發多條只算一次,並按 24 小時半衰期衰減,所以排前面的是很多人在說的事。
本頁彙總公開訂閱源,標題與摘要由模型整理,版權歸原作者所有;重要資訊請回原文核對。
- 爆
- 討論快速增加
- 新
- 首報 6 小時內
- 發酵中
- 討論仍在增加
