Рисунок 6.1. Условные рефлексы: собака Павлова
Выше я привел примеры того, как новые стимулы провоцируют по большей части врожденные алгоритмы поведения; однако некоторые животные могут выработать новые алгоритмы в процессе обучения. Если за произвольными движениями – такими, как нажатие на рейку или кнопку – следует положительный результат (подкрепляющий стимул), вероятность того, что аналогичное поведение повторится в будущем, возрастает. Первым такой эффект в конце XIX века описал Эдвард Торндайк; он выяснил, что если рядом с клеткой кошки, которую долго не кормили, поставить миску с едой, та очень оживится. Случайные движения животного приводили к тому, что дверь клетки открывалась – и кошка получала доступ к еде (рисунок 6.2). Опыт многократно повторялся, и кошка поняла, какие именно движения приводят к открыванию двери. Такое обучение называется инструментальным, потому что поведение является инструментом формирования подкрепляющего стимула.
Рисунок 6.2. Инструментальное поведение: кошки Торндайка
Если говорить об отвращении, лабораторные опыты с инструментальной выработкой условного рефлекса обычно подразумевают научение избеганию: животное учится использовать стимулы-указатели (например, звуки), связанные с опасностью (обычно это удар электрическим током), чтобы эффективно направлять свои действия. Сначала оно замирает; но как только становится ясно, что при появлении звука можно предпринять определенный ряд действий, направленных на избегание вреда, начинает повторять такие все точнее, усиливая формирование реакции избегания.
Бывает, что инструментальное поведение, выработанное за счет подкрепляющих результатов, повторяется настолько часто, что входит в привычку и реализуется,