AI 报告 · MIT CSAIL · 2026-11-19 · 博客 / 评论
要让 AI 模型适配小型设备,请精简其训练笔记 | MIT CSAIL
原标题: To adapt an AI model to a small device, keep its training notes concise | MIT CSAIL

MIT CSAIL 和哈佛大学的研究人员开发了低内存激活秩子空间(LARS)方法,该方法在训练期间压缩中间激活数据,而不是存储每一次计算结果。据报道,与顶尖的 PEFT 技术相比,该方法在 GPU 上将内存占用降低了 23% 以上,在 CPU 上降低了约 47%。它面向智能手机和健康可穿戴设备等算力有限设备上的端侧训练。