Как мозг учится: искра находит свет методом проб и ошибок
A visual explanation of reinforcement learning

Интерактивный эксперимент показывает, как простой алгоритм подкрепления превращает случайно «прошитый» мозг искры в эксперта по поиску света. Читатель сам настраивает три параметра — прямые и перекрёстные связи плюс драйв — и видит, как после 2000 попыток искра уверенно следует за светом. Траектории сотен искр сходятся в одну точку, а смена награды заставляет их учиться убегать, замирать или атаковать.
Из множества возможных конфигураций мозга этой искры лишь крошечная доля порождает нужное нам поведение. Способов потерпеть неудачу гораздо больше, чем способов добиться успеха.
- jspaw
Похоже, вы используете аналогию с тем, как учится человеческий мозг, но не уточняете, что это всего лишь аналогия. Или вы утверждаете, что это описывает, как на самом деле учится человеческий мозг?
- dejongh
Спасибо, что поделились. Меня не беспокоит аналогия с мозгом — это хорошее объяснение алгоритма.
- bobosha
Отлично! Очень полезная и наглядная визуализация. Большое спасибо за то, что собрали это вместе.