Введение
1 Модификации алгоритма обратного распространения ошибки для обучения искусственных нейронных сетей 11
1.1 Вводные замечания 11
1.2 Модифицированные алгоритмы обратного распространения ошибки. 14
1.2.1 Описание модифицированных алгоритмов обратного распространения ошибки 14
1.2.2 Исследование модифицированных алгоритмов обратного распространения ошибки при реализации весового фильтра кодовых последовательностей на основе искусственных нейронных сетей 18
1.2.3 Исследование модифицированных алгоритмов обратного распространения ошибки при реализации вейвлетно-пакетного разложения на основе искусственных нейронных сетей 27
1.3 Влияние выбора алгоритма обучения на робастные свойства искусственных нейронных сетей 33
1.3.1 Робастные свойства алгоритмов цифровой обработки сигналов на основе искусственных нейронных сетей 33
1.3.2 Исследование робастных свойств алгоритмов обучения при весовой обработке кодовых последовательностей 34
1.3.3 Исследование робастных свойств алгоритмов обучения при реализации вейвлетно-пакетного разложения речевых сигналов 37
1.4 Формирование обучающей выборки с целью придания робастных свойств нейросетевым алгоритмам 40
1.4.1 Целевая функция обучения 40
1.4.2 Анализ влияния состава обучающей выборки на робастные свойства алгоритма нейросетевой обработки кодовых последовательностей 43
1.4.3 Анализ влияния состава обучающей выборки на робастные свойства алгоритма нейросетевой обработки сигналов при реализации вейвлет-пакетного разложения 49
1.5 Выводы 55
2 Синтез и обоснование формы активационной функции 57
2.1 Вводные замечания 57
2.2 Синтез активационной функции 59
2.2.1 Постановка задачи 59
2.2.2 Аппроксимация формы активационных функций ортогональными полиномами 60
2.2.3 Оптимизация формы активационной функции 62
2.3 Обоснование формы финитной активационной функции 67
2.4 Обоснование формы биполярной бисигмоидальной активационной функции 69
2.5 Анализ свойств финитной и биполярной бисигмоидальной активационных функций при реализации алгоритма вейвлет-пакетного разложения на основе искусственных нейронных сетей 70
2.5.1 Финитная активационная функция 70
2.5.2 Биполярная бисигмоидальная активационная функция 75
2.6 Анализ свойств финитной и биполярной бисигмоидальной активационных функций при реализации алгоритма демодуляции сигналов с относительной фазовой манипуляцией на основе искусственных нейронных сетей 79
2.6.1 Реализация алгоритма демодуляции сигналов с относительной фазовой манипуляцией на основе искусственных нейронных сетей 79
2.6.2 Финитная активационная функция 82
2.6.3 Биполярная бисигмоидальная активационная функция 84
2.7 Выводы 86
3 Практические аспекты проектирования нейросетевых алгоритмов цифровой обработки сигналов в радиотехнических устройствах 88
3.1 Вводные замечания 88
3.2 Процедура проектирования алгоритмов цифровой обработки сигналов на основе искусственной нейронной сети 89
3.3 Проектирование устойчивой к мешающим факторам системы идентификации дикторов на основе искусственных нейронных сетей 95
3.3.1 Постановка задачи 95
3.3.2 Определение пространства первичных признаков 99
3.3.3 Проектирование алгоритма идентификации дикторов на основе искусственных нейронных сетей 106
3.3.4 Выводы 111
3.4 Реализация двухэтапного нейросетевого алгоритма подавления реверберационных помех речевых сигналов 111
3.4.1 Постановка задачи 111
3.4.2 Экспериментальные исследования алгоритма подавления реверберационных помех в нейросетевом логическом базисе 114
3.4.3 Выводы 121
3.5 Анализ аппаратной реализации нейросетевых алгоритмов цифровой обработки сигналов 122
3.5.1 Типы средств реализации 122
3.5.2 Аппаратных средства нейроускорителей 123
3.5.3 Особенности проектирования алгоритмов цифровой обработки сигналов в нейросетевом логическом базисе на основе программируемых логических интегральных схем 125
3.6 Выводы 129
Заключение 131
Список литературы 135
Приложение 1 - Список аббревиатур и условных сокращений... 149
Приложение 2 - Алгоритм обучения с использованием функционала целевой ошибки 155
Приложение 3 - Программные модули основных алгоритмов... 156
Приложение 4 - Копии актов о внедрении результатов диссертационной работы 165
