Как мозг превращает навыки в привычки: нейросетевая архитектура на принципах «Атомных привычек»

Идея родилась из наблюдения за тем, как человек осваивает новые действия: сначала нужно сосредоточиться, пробовать варианты и получать обратную связь, а после многократного повторения действие выполняется автоматически. Этот принцип «стимул-желание-реакция-подкрепление» описан в книге Джеймса Клира «Атомные привычки» и лёг в основу предлагаемой архитектуры.

Система состоит из нескольких простых нейросетей: «сознательная» сеть обрабатывает незнакомые входные данные, а после успешного ответа генеративная сеть создаёт множество похожих примеров. На них дообучается «подсознательная» сеть, которая затем быстро и автоматически обрабатывает сходные ситуации — как опытный водитель, который уже не думает о переключении передач.

Автор отмечает, что пишет статью, параллельно сдавая на водительские права, так что наблюдает процесс обучения собственной «нейронки» в реальном времени. Это первая часть материала, подробности архитектуры — далее.