Задача классификации текстовых документов
Данной множество
документов D={d1,d2,…,dn}
и множество рубрик C={c1,c2,…cn}
иерархию рубрик описывает множество
H={<ci,cj>,ci,cj,
є С, i!=j}
Требуется разработать процедуру
нахождения наиболее вероятной рубрики
из множества C для
исследуемого документа di
є D.решение
задачи основано на предположения что
документы одно и той же рубрики содержат
одинаковые признаки (ключевые понятия).
Наличие таких признаков говорит о
принадлежности конкретного документа
к конкретней рубрики.
Пусть каждая
рубрика имеет множество признаков.
F(c)=UF(cr)
F(cr)=<f1,f2,…,fz>.
Множество F(C) называют словарем
рубрики Cr. В результате решения
задачи выделения ключевых понятий
каждый экземпляра документа также можно
описать набором отдельных признаков.
F(d)=<f1,…,fii,..fyi>
при этом множество всех документов
должно совпадать с множеством всех
документов. F(D)=UF(di)
F(D)=F(C).
Тогда принадлежности документа d1
к рубрики ci
может быть принято на основании следующих
утверждений F(di)ᴖF(cr).
Решением задачи
классификации является свод правил
позволяющий налущим образом принимать
решения об отнесения экземпляра документа
к рубрики. Способ решения данной задаче
делиться на 2 группы:
машинное
обучение;
экспертные
методы;