Курсовая работа на тему: Анализ методов автоматической классификации документов

Введение

В наше время классификация документов используется для решения таких задач информационного поиска как: фильтрация документов, распознавание спама, автоматическое аннотирование, автоматический перевод (проблема снятия неоднозначности), составление интернет-каталогов, классификация новостей, распределение рекламы. Бурными темпами развиваются системы персональных агрегаторов информации, автоматически подбирающих новости и статьи, которые могут заинтересовать конкретного пользователя. Таким образом, актуальность проблемы автоматической классификации со временем только растет.

Целью данной курсовой работы является анализ методов автоматической классификации документов, с особым вниманием к наиболее перспективным подходам, которые основаны на машинном обучении.

В задачи курсовой работы входит:

Рассмотрение подходов к индексации документов

Рассмотрение подходов к построению классификаторов

Рассмотрение подходов к оценке работы классификаторов

Оглавление

- Ведение

- Постановка задачи

- Общие подходы к решению задачи классификации

- Индексация документа

- Построение вектора терминов и уменьшение его размерности

- Расчет весов терминов

- Методы построения классификаторов

- Метод Rocchio

- Метод вероятностной классификации метод Байеса

- Метод разрешающих деревьев деревья решений

- Правила принятия решений

- Модели регрессии

- Искусственные нейронные сети

- Классификаторы на основе примеров. Метод к ближайших соседей

- Оценка качества классификации

- Оценка автоматической классификации в традициях информационного поиска

- Оценка автоматической классификации с точки зрения особенностей реализации Заключение

- Список литературы

- автоматическая классификация документ поиск

Заключение

В рамках курсовой работы были рассмотрены методы автоматической классификации документов и основные этапы построения классифицирующей системы: индексация документа, методы построения классификаторов на основе обучающих данных, оценка работы классификатора.

Список литературы

- Автоматическая классификация документ поиск.

- Lеwis, D.D., Аn еvаluаtiоn оf рhrаsаl аnd сlustеrеd rерrеsеntаtiоns оn а tеxt саtеgоrizаtiоn tаsк. In Рrосееdings оf SIGIR-92, 15th АСМ Intеrnаtiоnаl Соnfеrеnсе оn Rеsеаrсhаnd Dеvеlорmеnt in Infоrmаtiоn Rеtriеvаl (Коbеnhаvn, DК, 1992), рр.

- Sеbаstiаni F. Масhinе Lеаrning in Аutоmаtеd Теxt Саtеgоrizаtiоn // Рrос. АСМ Соmрuting Survеys (СSUR). - Nеw Yоrк: АСМ Рrеss, 2002. - Vоl. 34, Issuе 1. - 48 р.

- Пескова, О.В. Методы автоматической классификации текстовых электронных документов / О.В. Пескова // Научно-техническая информация. Серия 2: Информационные процессы и системы. - 2006. - 3. - С.