Что такое Индекс ?

Индекс — это место, где содержатся все проиндексированные страницы сайтов. Сам процесс получил название индексации. Характеристики сайтов представлены ключевыми словами и исходящими ссылками.

Когда ресурс попадает индекс он проходит ранжирование и ему присваивается место в выдаче. Место не фиксируется за сайтом и количество обработанных страниц может меняться со временем.

Процесс может быть ручным или автоматическим. В первому случае пользователь может самостоятельно добавить ресурс, во втором это делает сам робот. Управлять процессом индексации можно при помощи файла robot.txt.