實測顯示網頁抓取架構是決定大模型引用的關鍵

2026 年 11 月 11 日，DEV Community 上一位開發者發文分享了一項關於大模型引用的實測。據該文所述，作者記錄了 5 個 LLM 在 200 個買家提示詞中的引用連結，發現決定網頁能否被大模型引用的核心因素並非內容本身，而是網頁抓取及內容提取的底層技術架構。

作者在文中稱，關鍵問題在於爬蟲能否抓取到頁面，以及頁面內容在提取之後是否還能保留下來；並表示已將測試過程、結論整理成一份清單，在撰寫新內容前逐項對照執行。該文為目前檢索範圍內關於此事的唯一一篇報道，尚無其他信源給出不同說法或後續進展。