Давайте на секундочку посмотрим на наш мир глазами госпожи Эволюции и попробуем «вспомнить» вехи ее большого пути на Земле (т. е. поспекулировать на эту тему). Представим себе живой организм в виде… ну, хотя бы модели, т. е. некоего квадратика, который упрямо преобразует информацию на входах (в данном случае сенсорика) в информацию на выходах (в данном случае моторика). Развитие устройств ввода-вывода (органов чувств и передвижения), конечно же, тоже было гигантской задачей, но мы оставим ее пока без нашего внимания. Нас будет интересовать только то, что происходило в веках, которые были прежде нас, в самом сердце модели – внутри квадратика, т. е. в «нервной системе».
Итак, существует задача сбора информации посредством «зондирования». При этом необходимо обеспечить надежное функционирование дорогущего оборудования. Как запрограммировать аппаратуру таким образом, чтобы она принимала наиболее адекватные решения и избегала поломок? Жестко запаять реакции на те или иные стимулы – только первый шаг в этом направлении. Это безусловные рефлексы, уровень условной амебы. Последовательность трагических неудач в полевых условиях должна была привести к следующему этапу развития – самообучающимся нейронным сетям. Для того чтобы настроить систему, первым делом необходима обратная связь – оценка успеха или неудачи произведенной реакции. Ее обеспечил древний прототип того, что в современности часто величают «системой ценностей». На входе этой модели были сенсорные данные на момент времени непосредственно после принятого решения. На выходе – оценка, регулирующий сигнал для настройки нейронной сети. Это зачатки тех функций, которые мы называем «условными рефлексами».
Но и у этого решения нашлись свои недостатки. Действует быстро и не требует постоянной связи с «Центром» – очевидный плюс. Но продолжает регулярно делать ошибки в условиях меняющейся окружающей среды – не менее очевидный минус. Тем временем постоянно растущий арсенал средств воздействия на окружающую среду привел к новой проблеме: какую именно реакцию из гигантского ассортимента выбрать? Было замечено, что далеко не во всех случаях от организма требуется мгновенная реакция, можно и подумать. Это привело к организации внутреннего интерпретатора, модели (опять же нейронной сети), при помощи которой можно прикинуть, как изменится мир после принятия того или иного решения. И оценить «позицию» впоследствии, при помощи