Индекс
Индексация поисковых систем собирает, анализирует и хранит данные, чтобы облегчить быстрый и точный поиск информации. Разработка индексов включает в себя междисциплинарные концепции из лингвистики, когнитивной психологии, математики, информатики и компьютерных наук. Альтернативное название этого процесса в контексте поисковых систем, предназначенных для поиска веб-страниц в Интернете, - веб-индексирование. Популярные системы ориентированы на полнотекстовое индексирование онлайновых документов на естественном языке. Такие типы медиафайлов, как видео, аудио и графика, также доступны для поиска. Метапоисковые системы используют индексы других сервисов и не хранят локальный индекс, в то время как поисковые системы на основе кэша постоянно хранят индекс вместе с корпусом документов. В отличие от полнотекстовых индексов, частичнотекстовые сервисы ограничивают глубину индексирования, чтобы уменьшить размер индекса. Крупные сервисы обычно выполняют индексирование через заранее определенный интервал времени из-за необходимости затрат времени и обработки, в то время как поисковые системы на основе агентов индексируют в режиме реального времени.
