Поисковая система состоит из следующих основных компонентов:
Spider (паук) - браузероподобная программа, скачивающая веб-страницы.
Crawler (кроулер, «путешествующий» паук) – программа, которая автоматически проходит по всем ссылкам, найденным на странице.
Indexer (индексатор, индексирующее устройство) - программа, анализирующая веб-страницы, скачанные пауками.
Database (база данных) – хранилище скачанных и обработанных страниц.
Search Engine Results Engine (система выдачи [...]