HaiAI123

全球AI工具精选导航

新行业动态
98
热度指数
新上榜

本该压缩 prompt 的优化器反而把 prompt 变大

2026/11/22 — 11/22 17:18·1 个来源(全部)·1 篇报道(全部)

核心速览 (Key Takeaways)

  • 开发者复盘 7 月的一次排查:自建上下文压缩组件在长会话中出现负节省,一次运行输入 26,461 个 token、输出 26,798 个,69 次打包中有 21 次反而变大。
  • 更严重的是,压缩器在预算压力下丢掉模型正在使用的文件读取结果,导致同一份 5.6 KB 文件被重复读取十余次。

事件背景与详细解读

2026 年 7 月,一位开发者在排查中发现问题:其自建的上下文压缩组件非但没有缩小 prompt,反而使其变大,该情况在长会话中尤为明显。直到 2026 年 11 月 22 日 16:50,这位开发者在 DEV Community 的 AI 板块发文复盘了这次排查,披露了相关运行记录。

文章给出的一次长会话运行清单显示,mode=compiler_pack stage=execution budget=47616,输入 26,461 个 token,输出却有 26,798 个,节省值为 saved=-337。在会话 7b3256c2 中,69 次打包里有 21 次出现负节省,即打包后的结果比打包前更大。作者称,压缩器在数天里一直带着负号上报节省量,但自家系统里没有任何环节去读取这个符号。文章还提到,更大的代价出在别处:在预算压力下,压缩器把模型正在使用的文件读取结果丢掉,导致同一份 5.6 KB 文件被重复读取十余次。目前,该复盘停留在对这一现象与运行数据的记录层面。

AI 综合 1 篇报道生成 · 更新于 29 分钟前

updream
24 小时热度热度指数 98
刚上榜,走势正在积累
24 小时前现在

这件事的报道 点标题看原文

今天
  1. 一位开发者复盘 7 月的一次排查:自建的上下文压缩组件在长会话里出现负节省,一次运行输入 26,461 个 token、输出 26,798 个,69 次打包中有 21 次反而变大。更严重的问题在于,在预算压力下,压缩器把模型正在使用的文件读取结果丢掉,导致同一份 5.6 KB 文件被重复读取十余次。

    做上下文压缩时,先确认它有没有丢掉模型正在用的状态。

    DEV Community · AIAI 评分 58

同时在说的其他事

热度怎么算的?了解口径

热度按 48 小时内有多少个独立来源在说这件事算:同一个来源发多条只算一次,并按 24 小时半衰期衰减,所以排前面的是很多人在说的事。

本页汇总公开订阅源,标题与摘要由模型整理,版权归原作者所有;重要信息请回原文核对。如权利人认为相关标题或摘要侵权,请通过页尾联系邮箱提供具体页面与权利依据,我们核实后会及时删除或替换。

爆
讨论快速增加
新
首报 6 小时内
发酵中
讨论仍在增加

回 AI 行业动态榜 →