Google 论文《Language Models Need Sleep》:大模型也需要「睡觉」和「做梦」
大模型也得「睡觉」了:Google 的这篇论文,戳中了AI 的最大软肋
阅读原文
本站未展示全文,请前往来源网站阅读。
AI 导读
Google 研究员 Ali Behrouz 团队提出《Language Models Need Sleep》,主张大模型应在「清醒」与「睡眠」间切换:清醒时接收信息,睡眠时通过 Knowledge Seeding 整理记忆,再借 Dreaming 生成合成数据继续训练自己。该思路针对持续学习中的灾难性遗忘,让模型在保持稳定的同时吸收新知识。
来源:AI科技评论 · 微信公众号 · mp.weixin.qq.com