Введение
Глава 1. Модели адаптивного поведения 12
1.1. Обзор направления исследований «Адаптивное поведение» 12
1.2. Метод обучения с подкреплением. Метод SARSА 16
1.3. Искусственные нейронные сети. Метод обратного распространения ошибки 19
1.4. Основные нейросетевые парадигмы 23
1.5. Эволюционное моделирование 25
1.6. Нейроэволюционный подход 27
1.7. Модели адаптивных автоматов М.Л. Цетлина 29
1.8. Проект «Животное» М.М. Бонгарда 33
1.9. Модели на основе теории функциональных систем 34
Глава 2. Исследование моделей неиросетевых адаптивных критиков ...39
2.1. Нейросетевые адаптивные критики 39
2.2. Процессы обучения в адаптивных критиках 43
2.2.1. Агент на основе Q-критика 43
2.2.2. Агент на основе V-критика 54
2.2.3. Сравнение процессов обучения для метода SARSA и V-критика ...63
2.3. Взаимодействие между обучением и эволюцией 66
2.3.1. Сравнение различных режимов настройки нейронных сетей 66
2.3.2. Эффект Болдуина 74
2.3.3. Специфика работы блока Модель в схеме V-критика 77
2.4. Сопоставление с поведением живых организмов 79
2.5. Выводы по главе 2 81
Глава 3. Приложения эволюционных и неиросетевых методов к задачам медицинской диагностики 83
3.1. Особенности постановки задачи 83
3.2. Метод построения классифицирующей системы 84
3.3. Результаты моделирования 89
3.4. Выводы по главе 3 93
Глава 4. Модели поискового поведения на основе спонтанной активности 94
4.1.0 поисковом поведении 94
4.2. Модель анимата, осуществляющего поисковое поведение 96
4.3. Результаты моделирования 99
4.4. Выводы по главе 4 100
Заключение 101
Список использованных источников
