LINUX DO 最新· 庭·· 3 小时前AI 评分43
大模型记忆系统:Eval 高分的路线一定符合真实需求吗?
Memory System - Eval高分的路线一定符合真实需求吗?
AI 导读
大模型记忆系统评测多以 DynamicMem 等测试集的 direct qa 为核心指标,但论文 MemUse 显示该指标提升与实际用户体验并无显著关联。结合 hermes mnemosyne plugin 的实际体验,现有系统缺乏默会能力且仍依赖用户明确提示才能回忆,不仅背离真实需求,还把记忆成本重新转嫁给了用户。
来源:LINUX DO 最新 · linux.do