AI 報告 · Google · 2026-10-27 · 研究論文

睡眠框架：讓大型語言模型在持續學習中保留知識的新方法

原標題: The sleep framework: A new way for LLMs to retain knowledge in continual learning

Google Research 為持續學習引入睡眠階段，讓大型語言模型在主動互動與離線記憶鞏固之間交替進行。作者指出，這使模型能夠習得新事實、減輕災難性遺忘，並改善複雜推理。他們宣稱可保留最多 10M 個 token 的長上下文知識。