Разработка программного приложения классификации текста на базе машинного обучения

АННОТАЦИЯ 2
Введение 4
1 АНАЛИЗ ПРЕДМЕТНОЙ ТЕМАТИКЕ ИССЛЕДОВАНИЯ 7
1.1 Анализ особенностей компьютерной лингвистики, ее функций и методологий 7
1.2 Анализ задач, решаемых с помощью машинного обучения 15
1.3 Анализ возможностей современных средств разработки программного обеспечения с использованием алгоритмов машинного обучения 25
1.4 Выводы по первому разделу 35
2 ВЫБОР И ОПИСАНИЕ МЕТОДОВ МАШИННОГО ОБУЧЕНИЯ ДЛЯ ЗАДАЧИ КЛАССИФИКАЦИИ ТЕКСТОВЫХ НОВОСТЕЙ 36
2.1 Постановка задачи классификации 36
2.2 Сравнительный анализ и выбор алгоритма классификатору 39
2.3 Предварительная обработка и анализ данных 48
2.4 Выводы второго раздела 51
3 РАЗРАБОТКА ПРИЛОЖЕНИЯ КЛАССИФИКАЦИИ ТЕКСТА НА БАЗЕ МАШИННОГО ОБУЧЕНИЯ 52
3.1 Разработка проекта программного обеспечения 52
3.2 Разработка и описание основной программной структуры проекта 62
3.3 Разработка и описание интерфейса программного обеспечения 64
3.4 Выводы по третьей главы 80
4 ИССЛЕДОВАНИЕ АЛГОРИТМОВ МАШИННОГО ОБУЧЕНИЯ ДЛЯ КЛАССИФИКАЦИИ ТЕКСТОВЫХ НОВОСТЕЙ 81
4.1 Исследование результатов классификации на основе различных алгоритмов машинного обучения 81
4.2 Исследование результатов классификации методом опорных векторов с подбором гиперпараметров 91
4.3 Выводы четвертого раздела 94
ВЫВОДЫ 95
ЛИТЕРАТУРА 97
ПРИЛОЖЕНИЕ А Код программного обеспечения 101