Мы постоянно формируем ассоциации: садясь в машину – пристегиваем ремень, видя друга – произносим его имя, слыша звонок в дверь – идем открывать.

Интуитивно понятное объяснение формирования таких ассоциаций дает хеббовское обучение (глава 3). Сам Хебб не уточнил многие детали своего правила изменения синаптической силы, и существует множество его вариаций. На наш взгляд, удачная формулировка звучит так: если нейрон А имеет существующую (пусть и слабую) связь с нейроном B, и если А и B активируются примерно одновременно, сила связи от А к B возрастает. Степень усиления зависит от активации обоих нейронов. В самой распространенной форме хеббовского обучения активации А и B перемножаются. Большое произведение дает сильное усиление связи, малое – слабое. Важный момент: для запуска изменений активация B должна быть достаточно сильной (запомните это!).

Проиллюстрируем хеббовское обучение на примере запоминания имен. При знакомстве с новым человеком активируются нейроны, кодирующие черты его лица. Когда он представляется, включаются нейроны, отвечающие за звучание имени. Поскольку активация «лицевых» и «именных» нейронов совпадает во времени, согласно правилу Хебба, связи от первых ко вторым усиливаются. После нескольких встреч имя начинает всплывать в памяти при виде лица. Параллельно формируются и другие ассоциации – например, имени и лица с тембром голоса.

Итак, хеббовское обучение объясняет, как мы познаем мир через простое совпадение событий во времени – без учителя, без наград за правильные ответы. В главе 7 мы видели, что обучение с коррекцией ошибок требует сравнения выхода сети с заданным эталоном. В хеббовском обучении такого сравнения нет.