Введение
1 Теоретическое обоснование выбора математических моделей для оценки результатов обучения и постановка задач исследования 20
1.1 Краткий обзор состояния диагностики результатов обучения в профессиональном образовании 20
1.2 Анализ основных подходов к оценке результатов обучения 31
1.3 Критерии и показатели качества диагностических средств 33
1.3.1 Надёжность гомогенного теста 35
1.3.2 Валидность теста 40
1.3.3 Разрешающая способность теста 42
1.4 Расчёт параметров, характеризующих результаты обучения, на основе классической теории тестирования 43
1.5 Теоретические обоснование возможности использования дихотомической модели Раша для оценки результатов обучения 48
1.6 Свойства дихотомической модели Раша 53
1.7 Теоретическое обоснование возможности использования моделей Раша
для политомической индикаторной переменной 56
1.8 Представление и интерпретация данных обработки 60
1.8.1 Интерпретация на основе классической теории тестирования 60
1.8.2 Интерпретация данных на основе теории латентных переменных 62
1.8.3 Оценка адекватности результатов тестирования дихотомической модели Раша 65
1.8.4 Построение гистограмм и информационных функций заданий 67
Выводы к главе 1 68
2 Разработка алгоритмов и комплексов программ для расчета параметров, характеризующих результаты обучения и качество диагностических средств .. 73
2.1 Математическое обоснование алгоритма расчета латентных параметров на основе дихотомической индикаторной переменной 73
2.1.1 Решение нелинейных уравнений методом секущих 76
2.1.2 Решение нелинейных уравнений методом Ньютона 79
2.2 Алгоритмы расчета оценок максимального правдоподобия латентных параметров основной модели Раша.. 80
2.3 Математическое обоснование расчета латентных параметров политомической модели Раша для рейтинговой шкалы 82
2.3.1 Получение итерационных выражений на основе метода секущих 89
2.3.2 Итерационные процедуры на основе использования метода Ньютона 91
2.4 Алгоритмы расчета оценок максимального правдоподобия латентных параметров модели рейтинговой шкалы 91
2.5 Математическое обоснование расчета латентных параметров политомической модели частичного доверия 96
3 2.5.1 Итерационные процедуры на основе метода секущих 101
2.5.2 Получение итерационных выражений с помощью метода Ньютона 102
2.6 Алгоритмы расчета оценок максимального правдоподобия латентных параметров модели частичного доверия 103
2.7 Программный комплекс RILP-1M 105
2.8 Программный комплекс RILP-2 111
2.9 Оценка достоверности результатов расчета латентных параметров программным комплексом RILP -1М 115
2.10 Оценка достоверности результатов расчета латентных параметров программным комплексом RILP-2 118
2.10.1 Оценка достоверности данных, полученных с использованием модели Раша для рейтинговой шкалы 119
2.10.2 Оценка достоверности данных, полученных на основе алгоритма для модели частичного доверия 121
Выводы к главе 2 124
3 Теоретическое исследование свойств оценок латентных параметров дихотомической модели Раша 126
3.1 Исследование существования и единственности оценок максимального правдоподобия латентных параметров дихотомической модели Раша 126
3.1.1 Постановка задачи 126
3.1.2 Допустимая дихотомическая матрица результатов тестирования 127
3.1.3 Теоретическое обоснование существования и единственности оценок латентных параметров дихотомической модели Раша 128
3.2 Расчет доли допустимых дихотомических матриц результатов тестирования... 134
3.3 Результаты вычислительного экперимента по расчёту доли допустимых дихотомических матриц результатов тестирования 137
3.4 Исследование состоятельности оценок латентных параметров основной модели Раша при ограниченном числе заданий теста 138
3.5 Экспериментальное подтверждение состоятельности оценок трудности заданий теста при их фиксированном количестве 144
3.6 Исследование поведения оценок латентных параметров модели Раша при неограниченном увеличении объёма выборки и числа заданий теста 149
3.7 Экспериментальные исследования состоятельности оценок латентных параметров при неограниченном увеличении числа заданий теста 156
3.8 Сходимость итерационных оценок, рассчитанных методом Ньютона 159
3.9 Распределение значений латентных параметров дихотомической модели Раша 162
Выводы к главе 3 166
4 Расчёт оценок латентных параметров модели Раша на основе моделирования дихотомических матриц ответов 168
4.1 Краткий обзор современных методов обработки выборок ограниченного объема 168
4.2 Метод складного ножа и его использование для калибровки тестовых заданий 171
4.3 Бутстреп-метод и его применение для калибровки заданий теста 173
4.4 Теоретический анализ значений бутстреп-оценок 174
4.5 Теоретический анализ значений оценок, рассчитанных с использованием метода складного ножа 177
4.6 Результаты экспериментальных исследований оценок, рассчитанных методами бутстреп и складного ножа 179
4.7 Модель генеральной дихотомической матрицы результатов тестирования 182
4.7.1 Актуальность создания модели генеральной дихотомической матрицы ответов 182
4.7.2 Методика формирования модели генеральной дихотомической матрицы результатов тестирования 185
4.7.3 Проведение вычислительного эксперимента по формированию квазигенеральной дихотомической матрицы ответов 190
4.8 Алгоритм формирования модели дихотомической матрицы ответов 196
4.9 Исследование погрешности калибровки тестовых заданий на основе моделирования нормативных дихотомических матриц ответов 199
4.9.1 Методика формирования моделей нормативных дихотомических матриц ответов разных размеров 199
4.9.2 Проведение вычислительного эксперимента и анализ результатов исследования погрешностей калибровки тестовых заданий 201
Выводы к главе 4 204
5 Разработка инструментария и моделей мониторинга результатов обучения и оценки качества диагностических средств 207
5.1 Метод оценки уровня сформированности компетенций обучаемого 207
5.2 Метод калибровки заданий теста на основе моделирования нормативных дихотомических матриц ответов 209
5.3 Метод расчета квазигенеральных оценок латентных параметров на основе моделирования нормативных дихотомических матриц ответов 211
5.4 Оценка эффективности методов калибровки заданий и расчёта квазигенеральных оценок латентных параметров при эмпирическом законе распределения 216
5.5 Методика экспертизы качества педагогического теста 224
5.6 Основные положения методологии оценки результатов компетентностно-ориентированного обучения 229
5.7 Модель мониторинга уровня подготовки обучаемых и оценки качества диагностических средств 230
5.8 Модель автоматизированной системы оценки уровня подготовки выпускников образовательных учреждений 235
Выводы к главе 5 239
Применение результатов диссертационного исследования для независимой оценки результатов обучения 241
6.1 Оценка качества диагностических средств и уровня сформированности когнитивного компонента компетенции 241
6.2 Оценка уровня сформированности личностного компонента компетенции с помощью опросника Т. Лири 252
6.2.1 Исследование качества опросника Т. Лири для оценки межличностных отношений 252
6.2.2 Оценка компетенций студентов с помощью опросника Т. Лири 259
6.3 Оценки уровня сформированности личностного компонента компетенции с помощью опросника Л. П. Калининского 263
6.3.1 Исследование качества опросника Л. П. Калининского «Профиль личностных свойств» 263
6.3.2 Оценка личностных качеств обучаемых с помощью опросника Л. П. Калининского 270
6.4 Оценка качества выпускной квалификационной работы и интегративно- деятельностного компонента компетенции 274
Выводы к главе 6 282
Заключение 284
Список литературы
