跳到正文
热点事件持续更新

Google Research提出Sleep持续学习框架

1 篇报道1 个报道来源3 小时前更新

先了解这件事

AI 综述

2026年10月28日,Google Research公布Sleep框架,用于帮助大语言模型在持续学习过程中巩固知识。该框架交替进行主动交互与离线记忆巩固,将短期上下文转化为长期参数,并减少灾难性遗忘。Sleep结合了MoE参数扩展、知识蒸馏、突触剪枝和“梦境”自我改进等机制。报道还称,该框架在BABILong上将长上下文扩展至1000万tokens,并在持续翻译、事实知识整合和数学推理评测中超过文中列出的基线。

AI 根据报道生成 · 2 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月28日
  1. Google Research精选
    Google Research 提出 Sleep 框架,让 LLM 在持续学习中巩固知识

    Google Research 提出 Sleep 框架,通过交替进行主动交互与离线记忆巩固,让 LLM 将短期上下文转化为长期参数,同时减少灾难性遗忘。该框架结合 MoE 参数扩展、知识蒸馏、突触剪枝和“梦境”自我改进,在 BABILong 上将长上下文扩展至 10M tokens,并在持续翻译、事实知识整合和数学推理评测中超过文中所列基线。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。