🔍 Intelligence Synthesis JP/EN
Ethics · Regulation · Technology — 製薬実務の学習ノート

AI レポート · MIT CSAIL · 2026-11-19 · ブログ・論評

小型デバイス向けにAIモデルを適応させるには、学習中の内部メモを簡潔にまとめる

原題: To adapt an AI model to a small device, keep its training notes concise | MIT CSAIL

MIT CSAILとハーバード大学の研究チームは、学習中の中間活性化情報を全て保存する代わりに簡潔にまとめる「低メモリ活性化ランク部分空間(LARS)」法を開発した。この手法により、既存の主要なPEFT手法と比べてメモリ使用量をGPUで23%以上、CPUで約47%削減したとされる。スマートフォンやヘルスウェアラブルなど、計算能力の限られたデバイス上でのオンデバイス学習を想定している。

原文を読む ↗

AI レポートの一覧 →