Будучи веб-мастером, вы знаете, что страницы сайта будут отображаться в результатах поиска только тогда, когда они попадут в индекс поисковых систем. Попадание текста в индекс — единственный способ дать возможность людям, которые ищут в интернете ту информацию, которую вы публикуете, найти ее. Значит, вас должны волновать ответы на вопросы:
- Как Google индексирует веб-страницы?
- Индексирует ли Google все страницы сайта?
- Сколько страниц вашего сайта проиндексировано?
Только зная ответы, вы сможете ускорить индексацию и добиться высокого уровня трафика на сайте. Между публикацией новой статьи на сайте, то есть размещением ее на сервере хостинг-провайдера, и попаданием информации в индекс проходит некоторое время — время индексации. Оно зависит от ряда факторов, среди них:
- Структура сайта;
- Наличие входящих ссылок;
- Содержание файла robots.txt;
- Быстродействие серверов хостинг-провайдера.
Раскройте структуру сайта
Обратите внимание на то, чтобы роботы поисковых систем имели бы легкий доступ ко всем вложенным страницам сайта. Создайте специальную страницу сайта, содержащую ссылки на все остальные его страницы, и разместите ссылку на нее на главной странице. Такие ссылки, ведущие поисковик к более глубоким материалам ресурса, покажут ему легкий пути и ускорят сканирование площадки. Несмотря на то, что в этом вопросе нет общего согласия среди оптимизаторов, и некоторые утверждают, что файл Sitemap не помогает в индексировании, иметь его все равно не помешает.
Создайте входящие ссылки
Google придает большое значение количеству входящих ссылок, ведущих пользователя на ваш сайт, а также тому, откуда они приходят. Чем больше качественных ресурсов ссылается на ваш сайт, тем быстрее роботы Google будут сканировать его материалы и индексировать его страницы. Не забывайте, для того, чтобы ускорить индексацию, вам важно получить ссылки на конкретные страницы веб-площадки, а не только на ее домашнюю страницу. В идеале, на каждую страницу сайта должна вести, по крайней мере, одна внешняя ссылка.
Исправьте файл robots.txt
Научитесь использовать файл robots.txt на сервере вашего хостинг-провайдера, именно он дает понять поисковикам, какие страницы нужно внести в индекс, а какие — нет. Будьте осторожны и убедитесь, что своими директивами вы не закроете роботу Googlebot доступ к страницам сайта.
Выберите быстродействующий хостинг
Работая над контентом веб-ресурса, не забывайте и о его технической основе. Покупая хостинг, удостоверьтесь, что на дата-центрах провайдера установлено достаточно быстродействующее оборудование. В противном случае, робот, заглянув на ваш сайт и не дождавшись ответа сервера, уйдет в более дружелюбные места Всемирной паутины.
Сколько страниц в индексе?
Существует несколько способов узнать, сколько страниц сайта внесено в индекс поисковой системы.
Самый простой способ проверить, какие страницы проиндексированы, а какие нет — ввести в поисковую строку Гугла запрос вида «site: ваше доменное имя». Нажав «поиск» вы увидите в выдаче ссылки на все страницы, которые были проиндексированы. Есть также и удобный метод автоматически получать информацию об индексировании вашего сайта без проверки вручную, для этого подойдет сервис Googlealert. Он присылает вам сообщение на почту всякий раз, когда в индексе появляются новые страницы вашего сайта.
Индексация материалов сайта в Google и других поисковых системах улучшает видимость в поисковой выдаче и домашней страницы вашей площадки, и всех ее внутренних публикаций. Чем больше ваших материалов в выдаче, тем больше у вас трафик и тем выше потенциальные доходы сайта.