长会话压缩前后:信息丢了多少
实验设计已定,结果等原始记录
本页只给实验设计,不填结果。没有跑过的数字,一个都不写;跑完把原始记录贴进表格,再写结论。
要回答的问题
一个长会话触发上下文压缩后,早期细节的召回率、后续任务准确率变化多少?
对照组
压缩前基线 / 压缩后实测;用同一组「早期事实」做追问验证。
环境与版本
- 宿主版本
- 待填
- 模型ID
- 待填
- 模式 / 权限
- 两组保持一致
- 输入文件
- 记录哈希,保证两次用的是同一份
要记录的字段
| # | 字段 | 结果 |
|---|---|---|
| 1 | 宿主与压缩插件 | 待实测 |
| 2 | 会话长度(token) | 待实测 |
| 3 | 压缩后早期事实召回率 | 待实测 |
| 4 | 后续任务准确率 | 待实测 |
| 5 | 压缩节省token | 待实测 |
结论
待实测。写结论时必须同时写「不能推广的部分」。
为什么先不写结果
billion-context等压缩插件声称可找回细节;本站记录实测召回,不引用厂商话术。