2000 №1

Итак, Демон сформулировал еще одну целевую функцию: поиск и накопление знаний Очевидно, что, чем больше знаний будет накоплено управляющей системой, тем более надежные способы выживания она сможет найти, тем успешнее сможет улучшать свое состояние. С другой стороны, чем дольше будет существовать объект, тем больше знаний он накопит. Поэтому обе целевые функции — выживание и накопление знаний — тесно связаны между собой {по нашему мнению, главная цель существования и есть накопление знаний).

Сообщение 5. «Для начала попробую найти закономерности во входной информации».

Разумно. Но может ли Демон обнаружить закономерности и беспорядочном мелькании входных сигналов? Может, если он в состоянии заметить в них неслучайные совпадения. Если в какой-то момент ему покажется, что некоторую комбинацию сигналов он видит уже не в первый раз — значит, он сформировал образ.

Сообщение 6. «Это красное пятно в нижнем углу правого монитора я уже видел! Постойте, но и этот одновременный скачок трех стрелок иногда повторяется».

Ну вот. уже два образа сформированы — номер 1 и номер 2. Это первые составляющие эмпирического знания нашей управляющей системы. Демон может занести их в свою Базу Знаний.

Сообщение 7. «Теперь, когда образ номер 1 или номер 2 появляются в показаниях датчиков, я сразу узнаю их».

Сформированные образы (иначе их еще называют таксонами, паттернами, классами объектов) управляющая система может распознать в те моменты когда в поле зрения датчиков появляются их прообразы.

Сообщение 8. «Пытаюсь найти способы воздействия на образы номер 1 и номер 2. Для этого беспорядочно нажимаю на все имеющиеся кнопки».

А что еще остается делать, если нет никаких оснований для более разумной тактики. Интересно, что произойдет раньше: Демон найдет какую-либо закономерную связь между нажатием кнопки и реакцией образа либо выявится зависимость образов от эмоционального состояния Демона?

Сообщение 9. «Всякий раз, когда я распознаю образ номер 1, мне становится «плохо».

А когда распознаю образ номер 2, мое состояние никак не изменяется. Запомним это».

Ну вот, в данном случае первыми сформировались эмоциональные оценки образов. База Знаний пополнилась новой информацией.

Сообщение 10. «Нашел! В 70 % случаев, когда я нажимаю на кнопку номер 47, появляется образ номер 2, но только при условии, что в предыдущий момент был распознан образ номер 1».

Вот управляющая система и получи, а первое знание: в каких условиях, каким действием и с какой вероятностью вызывается (или вытесняется) определенный образ. Назовем нажатие на кнопку номер 47 действием номер 1.

Модель нейрона, разработанная для метода автономного адаптивного управления. На вход нейрона поступают «бинарные» сигналы (типа 0–1, «да»-«нет») в виде одинаковых импульсов от датчиков или других нейронов. Импульсы попадают на элементы задержки (1), моделирующие задержку сигналов в синапсах, дендритах и т. п. Элементы (2) вырабатывают сигналы, соответствующие по длительности нервным импульсам. Блок (3) — основной элемент памяти нейрона. По мере «обучения» его синапсы растут, причем первыми пороговой величины достигают синапсы, соответствующие неслучайным комбинациям входных сигналов. В дальнейшем эти комбинации будут распознаваться. Пройдя через схему совпадений (4), они вызовут появление выходного сигнала. Эти же импульсы, пройдя через блок задержки (5), восстанавливают исходное состояние нейрона.

Сообщение 11. «Постойте, но точно такие же последствия имеет нажатие на кнопку номер 23! Запомним это».

Демон постепенно расширяет свою Базу Знаний, обнаруживая новые действия и уточняя найденные ранее.

Сообщение 12. «Ура, наконец-то в своей Базе Знаний я нашел действия, которыми могу в некоторых условиях вызвать улучшение ощущения своего состояния!»

До этого момента все решения Демона были обусловлены задачей «накопить знания». Теперь он уже может принимать решения с целью «улучшить ощущение состояния».