Время чтения: 3 минуты

Как избежать проблем с отладочным сайтом в поисковике Google

Как правильно действовать, чтобы отладочный сайт не попал в основной индекс Google.

Многие владельцы сайтов, на этапе старта и становления проекта, используют временные решения и технологии. Нередко, на хостинг загружают отладочный сайт, который необходим для тестирования функционала и проверки работоспособности компонентов. Потом временные файлы убирают и загружают полноценный сайт для посетителей. Вебмастерам кажется, что проблем быть не должно – ведь прежде чем запустить проект, его полностью проверили.

Однако в реальности, использование отладочного сайта может добавить владельцам немало проблем. Дело в том, что поисковые роботы Google могут попасть на интернет-ресурс как раз в этот момент, и соответственно проиндексируют содержимое, которое совсем не предназначено для всеобщего обозрения.

Небезызвестный аналитик компании Google Джон Мюллер решил поднять данный вопрос и написал для своих читателей целую статью, в которой даны рекомендации по правильной настройке отладочного сайта.

Правильная блокировка отладочных страниц от индексации

В случае использования временных файлов и отладочных страниц, Джон Мюллер не рекомендует использовать атрибут <noindex> или блокировать содержимое с помощью файла robots.txt. Данные методы не внушают сотруднику Google доверия.

  1. В случае с <noindex> страницы остаются доступными для других интернет-роботов и прямых конкурентов «Корпорации добра». Соответственно, даже если в дальнейшем проблем с индексацией в Google не возникнет, они могут появиться в других поисковых системах.
  2. Блокировка страниц в файле robots.txt тоже имеет свои недостатки. Самая распространенная проблема – настройщики забывают вернуть начальные параметры конфигурации, и сайт долгое время остается не проиндексированным. Кроме того, Джон Мюллер утверждает — несмотря на запрет, мешающий индексировать содержимое страниц, роботы занесут в базу сами URL’ы.

Соответственно, единственно верное решение, по словам сотрудника компании Google – создать на сервере защищенный паролем каталог и поместить файлы, требующие проверки именно туда. Доступ к подобным страницам отладки необходимо организовать путем составления «белого списка» IP-адресов. Это самый простой и действенный способ, потому что при таком подходе роботы Google никак не смогут получить доступ к содержимому.

Как удалить проиндексированный временный сайт из Google?

Как известно, многие вебмастера сначала делают, как считают нужным, не задумываясь о последствиях. И только потом, столкнувшись с проблемой, начинают искать пути решения.

В контексте сегодняшней темы, большинство не задумывается о последствиях на этапе заливки и использования отладочного сайта. Вопросы начинают возникать тогда, когда временные страницы уже находятся в индексе и мешают правильному отображению сайта в выдаче Google.

После этого возникает проблема переиндексации и в службу поддержки приходят вопросы о том, как удалить отладочный сайт из Google.

Джон Мюллер советует делать так:

  1. Вновь открыть поисковым роботам доступ на сайт.
  2. Подтвердить права на отладочный сайт в панели Google.
  3. Зайти в Search Console и воспользоваться специальным инструментом удаления URL.

После того как запрос будет обработан, алгоритмы Google заблокируют содержимое хоста на 90 дней. По истечении этого времени, страницы переиндексируются и вновь появятся в результатах поиска.

Джон Мюллер отметил, что неправильное отношение к данному вопросу может серьезно осложнить «жизнь» интернет-ресурса. Пересканирование обновленных url’ов может занять длительное время. А в тех случаях, когда роботы Google не уверены, что информация на странице действительно важная, переиндексация «правильного» содержимого может занять до полутора лет. Поэтому запрос удаления URL в Search Console играет важную роль и помогает вебмастерам сэкономить время.

Оцените статью:
Понравилась 0
Не понравилась 0
Автор: Ольга Фомина

Постоянно совершенствоваться в профессии, расти и развиваться. Расти в первую очередь над собой, ибо ни люди, ни обстоятельства не могут нанести автору столько вреда, сколько его самомнение и нежелание учится. Любая остановка — падение вниз. Поэтому только вперед, наперекор всему, что мешает двигаться и покорять новые вершины.

Нам интересно ваше мнение, напишите комментарий:

Нажимая на кнопку «Отправить», я даю согласие на обработку персональных данных в соответствии с «Политикой конфиденциальности».

Обмен мнениями и отзывы о публикации
Подпишитесь на рассылку блог-оптимизатора.рф

Уже подписались 803 человек