Словосочетания в текстовой классификации
Предположим, я обучил свой классификатор и хочу найти правильный смысл слова в предложении. Одна особенность, которую используют люди, называется коллокацией, где вы считаете слова слева / справа от запутанного слова и позиции очень важными. Мне любопытно, почему этот подход работает? Какую информацию, учитывая словосочетания, дает нам, которая помогает нам в классификации текста? Более того, почему позиция важна
1 ответ
Проверьте некоторые детали того, почему устранение неоднозначности смысла слова с помощью коллокации работает здесь: http://en.wikipedia.org/wiki/Yarowsky_algorithm Это в основном байесовская сеть.