据外媒interestingengineering报道,Anthropic正在研究Claude在“不干活”时回溯对话、修正错误记忆、归档整理,供未来调用。他们叫“dreaming”。跟人类做梦基本没关系。

人类做梦有神经科学验证的功能:记忆巩固。海马体在慢波睡眠回放经历,把短期记忆往皮层搬,剔除噪声,强化重要路径。Anthropic借词,指离线计算机制:推理暂停窗口期,对历史交互回放、纠错、重组织。

这跟持续学习两码事。持续学习改权重,成本高、风险大、容易灾难性遗忘。Anthropic改外部记忆库和检索策略。直白点:不重塑大脑,整理笔记。

打开网易新闻 查看精彩图片

这是大模型从“工具”向“同事”过渡的瓶颈。工具用完关掉。同事得记得上周开会定了什么、上次方案为什么被否、哪个客户偏好变过。企业级Agent要真能干活,记忆治理基础设施绕不过去。

现在dreaming是小时级离线整理。拉到月级、年级,模型能积累领域经验——不是微调出的通用能力,是从具体交互里长出的组织知识。咨询、法律、医疗、运维这些吃经验的行业,冲击是结构性的。

离线记忆整理是异步计算,不需要低延迟推理卡,可塞进闲时算力池。对“东数西算”和算力网络调度是利好:推理高峰过后,闲置算力跑记忆巩固,利用率能往上提。

还有硬骨头:记忆冲突判定标准。模型怎么知道哪条记忆是“错的”?靠自洽性检查?靠时间戳覆盖?靠人类反馈?Anthropic没说透。这是最脆弱一环。判错了,模型会把对的改成错的,而且改完还自信满满。

别被“dreaming”带偏。这不是机器觉醒前奏,是工程师给大模型修下水道:把用过的经验排一排、滤一滤、存一存。下水道修好了,楼才能往上盖。中国大模型要往上盖楼,这套系统得自己修一遍。买不来,也抄不顺手。

— 感谢阅读 · 欢迎点赞关注 · 小编 —