ОГЛАВЛЕНИЕ
ВВЕДЕНИЕ ................................................................................................... 4
РАЗДЕЛ 1. ОБЗОР СУЩЕСТВУЮЩИХ РЕШЕНИЙ .......................... 13
1.1. Классификация методов создания цифрового аватара головы
человека 13
1.2. Обзор существующих решений ................................................... 17
1.3. Выводы и результаты первого раздела ....................................... 37
РАЗДЕЛ 2. АЛГОРИТМ ОЦЕНКИ ПАРАМЕТРОВ
ПАРАМЕТРИЧЕСКОЙ МОДЕЛИ ГОЛОВЫ FLAME ...................................... 39
2.1. Необходимость использования параметрической модели ........ 39
2.2. Описание параметрической модели головы FLAME ................ 40
2.3. Алгоритм оценки параметров модели FLAME с
использованием RGB изображения ................................................................ 46
2.4. Алгоритм оценки параметров модели FLAME с
использованием RGBD изображения ............................................................. 50
2.5. Выводы и результаты второго раздела ........................................ 54
РАЗДЕЛ 3. ПАРАМЕТРИЧЕСКАЯ МОДЕЛЬ ГОЛОВЫ ЧЕЛОВЕКА
НА ОСНОВЕ НЕЙРОСЕТЕВОЙ МОДЕЛИ ПРЕДСТАВЛЕНИЯ
ПОВЕРХНОСТИ CNeRF И ДВУМЕРНОГО НЕЙРОННОГО РЕНДЕРИНГА 56
3.1. Описание разработанной параметрической модели головы
человека 56
3.1.1. Условные нейронные поля излучения ................................ 58
3.1.2. Двумерный нейронный рендеринг ...................................... 62
3.1.3. Обучение параметрической модели головы ....................... 64
3.2. Создание синтетического набора данных .................................. 66
3
3.3. Стратегия обучения разработанной параметрической модели
головы человека ................................................................................................ 69
3.4. Экспериментальные исследования разработанной
параметрической модели головы .................................................................... 72
3.5. Выводы и результаты третьего раздела ...................................... 84
РАЗДЕЛ 4. МЕТОД СОЗДАНИЯ ПАРАМЕТРИЗОВАННОГО
АВАТАРА ГОЛОВЫ ЧЕЛОВЕКА ....................................................................... 86
4.1. Описание разработанного метода ............................................... 86
4.2. Приложения: синтез новых видов и перенос выражения лица 89
4.3. Способ расширения набора данных с помощью интерполяции
промежуточных кадров .................................................................................... 92
4.4. Экспериментальные исследования разработанного метода
создания параметризованного аватара головы человека .............................. 93
4.5. Сравнение предложенного метода с существующими
решениями 111
4.6. Выводы и результаты четвертого раздела ................................ 115
ЗАКЛЮЧЕНИЕ ......................................................................................... 117
СПИСОК СОКРАЩЕНИЙ И УСЛОВНЫХ ОБОЗНАЧЕНИЙ ............. 119
СПИСОК ЛИТЕРАТУРЫ ......................................................................... 120
ПРИЛОЖЕНИЕ А .................................................................................... 132
