Как мозг учится: искра находит свет методом проб и ошибок

A visual explanation of reinforcement learning

Как мозг учится: искра находит свет методом проб и ошибок

Интерактивный эксперимент показывает, как простой алгоритм подкрепления превращает случайно «прошитый» мозг искры в эксперта по поиску света. Читатель сам настраивает три параметра — прямые и перекрёстные связи плюс драйв — и видит, как после 2000 попыток искра уверенно следует за светом. Траектории сотен искр сходятся в одну точку, а смена награды заставляет их учиться убегать, замирать или атаковать.

Из множества возможных конфигураций мозга этой искры лишь крошечная доля порождает нужное нам поведение. Способов потерпеть неудачу гораздо больше, чем способов добиться успеха.
  1. jspaw

    Похоже, вы используете аналогию с тем, как учится человеческий мозг, но не уточняете, что это всего лишь аналогия. Или вы утверждаете, что это описывает, как на самом деле учится человеческий мозг?

  2. dejongh

    Спасибо, что поделились. Меня не беспокоит аналогия с мозгом — это хорошее объяснение алгоритма.

  3. bobosha

    Отлично! Очень полезная и наглядная визуализация. Большое спасибо за то, что собрали это вместе.

Ещё за этот день

2026-11-14