Индексация (с латинского index — «указатель, список, реестр») — процесс, в рамках которого роботы поисковых систем (ПС) обрабатывают страницы сайтов и добавляют их в поисковую выдачу, или исключают из нее.
Индексатор — приложение поисковой системы (робот), которое проводит анализ и обработку данных о новых или обновившихся страницах на веб-ресурсе. Если этот робот найдет новый контент и он будет соответствовать требованиям поисковой системы, робот добавит ее в выдачу.
Индексация играет первостепенную роль в продвижении сайтов. И здесь крайне важно понимать принципы работы поисковых систем и их алгоритмов, чтобы страница действительно попала в индекс поисковой системы и ее смогли находить пользователи.
Никому достоверно неизвестно, по каким именно алгоритмам поисковые системы со своими роботами индексируют страницы и ранжируют их в выдаче. У разных ПС эти алгоритмы отличаются, и эксперты, занимающиеся раскруткой сайтов, опираются скорее на свой и чужой опыт, нежели на какие-то руководства по максимально быстрой индексации сайтов.
Важно понимать, что сайт не будет проиндексирован автоматически сразу после размещения на хостинге. Поисковые роботы не созданы для того, чтобы постоянно отслеживать появление новых веб-ресурсов и страниц на них.
Поэтому лучше сразу после базовой настройки и публикации новых страниц на сайте добавить его в поисковую систему (ее базу данных). И лишь после всего вышеописанного роботы ПС смогут выполнить обход страниц и проиндексировать контент веб-ресурса. Делается это с помощью Яндекс.Вебмастера и Google Search Console.
Для ускорения индексации сайта в ПС эксперты рекомендуют:
В итоге новый веб-ресурс будет быстрее проиндексирован поисковыми системами, а социальные закладки со ссылкой на него станут вспомогательным «указателем» роботу поисковой системы на новый проект.
Быстрая индексация ресурса (или его новой страницы) играет крайне важную роль в развитии веб-проекта. Особенно это важно для коммерческих и общественно важных сайтов.
Только после индексации сайта поисковыми системами он появится в выдаче, и на него смогут заходить посетители или потенциальные клиенты.