Введение
Глава I Способы построения самообучающихся систем управления объектами в недетерминированной среде 16
1.1 Постановка задачи синтеза адаптивной системы управления 17
1,1.1 Принятие решений об управляющих воздействиях 20
1.2 Классификация адаптивных систем управления 21
1.3 Системы управления объемами в недетерминированной среде 22
1.3.1 Обучение с подкреплением. Основные положения 23
1.3.2 Q- обучение 27
1.3.3 Сети адаптивной критики 29
1.3.4 Достоинства и недостатки существующих алгоритмов обучения с подкреплением 33
L4 Самообучаемые системы с самомодифицирующимися правилами 33
1.4.1 Методика самомодифицирующихся правил 34
1.4.2 Базовый алгоритм самомодифицирующихся правил 35
1.4.3 Применение «Внутреннего учителя» ШумковымЕ. А 39
1.5 Выводы 40
Глава 2 Метод построения самонастраивающейся системы управления на основе топологии «внутренний учитель» 41
2 Л Исходные условия 41
2.2 Пример задачи 42
2.3 Принцип обучение самообучению 43
2.3.1 Структура 44
23,2 Решатель 48
2.3.3 Компонента обратной связи 51
2.3.4 Учитель 52
2.3.5 Реактивные правила самообучения 56
2.3.6 Про-активные правила самообучения 58
2.3.7 Взаимодействие компонент 60
2.4 Способы реализации метода в прикладных задачах 62
2.4.1 Алгоритм разработки правил самообучения 62
2.4.2 Приоритетность адаптационных параметров 64
2.4.3 Коэффициент степени уверенности 64
2.5 Топология «внутренний учитель» с использованием нечеткого вывода 65
2.5.1 Начальные данные 65
2.5.2 Использование нечеткого вывода Мамдани 68
2.6 Топология «внутреннего учителя» в сравнении с известными методиками 70
2 J Выводы 72
Глава 3 Самообучающиеся системы управления на основе топологии «внутренний учитель» 74
ЗЛ Система управления комплексом лифтов 74
3.1.1 Комплекс лифтов 74
3.1.2 Алгоритм управления лифтами по расписанию 75
ЗЛ .3 Адаптивная система управления комплексом лифтов 80
ЗЛ .4 Результаты функционирования адаптивной системы управления комплекса лифтов 89
3.2 Система управления мобильным роботом 94
3.2.1 Разработка СУ 94
3.2.2 Адаптивная система управления мобильным роботом 95
3.2.3 Результаты функционирования адаптивной системы управления мобильным роботом 99
3.3 Адаптивные автоматизированные банковские системы 101
3.3.1 Предпосылки построения автотрейдера 101
3.3.2 Адаптивный автотрейдер 104
3.4 Выводы 106
Глава 4 Исследование результатов функционирования систем управления 108
4.1 Анализ результатов, преимушества и недостатки методики 108
4.1.1 Методологические преимущества 109
4.1.2 Недостатки методики 111
4.2 Пути дальнейшего совершенствования 111
43 Выводы 113
Заключение 115
Приложение А 117
Приложение Б 119
Приложение В 121
Приложение Г 152
Приложение Д 155
Список используемой литературы 157
