谷歌睡眠框架让 AI 模型在不遗忘的情况下持续学习
谷歌研究院提出一种受生物学启发的“睡眠”阶段，让大语言模型把新事实巩固进权重，同时不遗忘已有知识，上下文可扩展到 1000 万 token。它之所以重要，是因为灾难性遗忘是模型在训练后持续学习的核心瓶颈——可行的睡眠机制能让已部署模型持续更新，而不必从头重训。
报道来源
- Alpha Signal2026-10-27 17:40
谷歌研究院提出一种受生物学启发的“睡眠”阶段，让大语言模型把新事实巩固进权重，同时不遗忘已有知识，上下文可扩展到 1000 万 token。它之所以重要，是因为灾难性遗忘是模型在训练后持续学习的核心瓶颈——可行的睡眠机制能让已部署模型持续更新，而不必从头重训。