•волк или волка или волку.
•ЗАмок или заМОК (ударение)
•Большие/маленькие буквы - General Motors
•Пунктуация - C.Ш. А. или США (сокращение, аббревиатура).
•Числа (в каком формате?) 3/12/91, Март 12,1991 55 В.С, В-55
•Как обрабатывать синонимы и омонимы, индексировать эквивалентные слова или расширять/уточнять запрос?
•Классы эквивалентности: автомашина и автомобиль опушка – край леса или меховая обшивка одежды?
Алгоритм стемминга
Пример - выделение корня
•Сокращаем слова к их корню до их индексирования
-языковая зависимость
-например, бегун, побег, пробежка все сокращаются к бег.
Дата добавления: 2015-09-04; просмотров: 42 | Нарушение авторских прав
| <== предыдущая страница | | | следующая страница ==> |
| Индексация и индекс | | | Алгоритм Портера |