Отчёты по ИИ · Google · 2026-10-27 · Научная статья
Фреймворк сна: новый способ для LLM сохранять знания при непрерывном обучении
Оригинальное название: The sleep framework: A new way for LLMs to retain knowledge in continual learning
Google Research представляет фазу сна для непрерывного обучения, в которой LLM чередуют активное взаимодействие и офлайн-консолидацию памяти. Авторы сообщают, что это позволяет моделям усваивать новые факты, ослаблять катастрофическое забывание и улучшать сложные рассуждения. Они заявляют об удержании знаний из длинного контекста объёмом до 10M токенов.