ИИ и сложнейшие проблемы мира · Физика · arXiv · 2026-10-20
К физике глубокого обучения и мозга
Оригинальное название: Toward a Physics of Deep Learning and Brains
Авторы показывают, что уравнения, описывающие нейронные лавины в мозге, применимы и к каскадам активности в глубоких нейронных сетях. Согласно модели, сети обучаются лучше всего, когда находятся на границе между поглощающей и активной фазами, работая в квазикритическом режиме. Для сетей, обученных из разных начальных инициализаций, максимальная восприимчивость оказалась более надёжным предиктором обучения, чем близость к критической точке.