Что делать, если Googlebot не может получить доступ к сайту?

 Официальный представитель Google Джон Мюллер сделал важное заявление, касающееся работы краулера поисковой системы.Многих вебмастеров волнует вопрос: если сайт неисправен или заблокирован, может ли поисковый робот Google получить к нему доступ?По словам Мюллера, сильно беспокоиться в таких случаях не стоит. После того как запрет на сканирование краулером будет снят, URL-ы страниц сразу же появятся в индексе Google. При этом не имеет значения, был ли запрет связан с неисправностями на стороне хостера или обусловлен случайной блокировкой сканирования содержания сайта вебмастером. «Как правило, если Googlebot не получал доступ к сайту незначительное время, сканирование происходит довольно быстро и ссылки на страницы ресурса снова появляются в выдаче. Если же повреждение было более длительным и существенным, то на восстановление URL-ов в выдаче уйдет несколько больше времени – это связано с изменениями в поисковых алгоритмах, которые могли произойти, пока сайт был недоступен для сканирования. Так что всегда полезно еще раз перепроверить ваш ресурс на наличие других нарушений», – рассказал представитель Google.

Статьи по теме:

Новый Skype мешает передачи URL-адресов Dropbox сливал кому попало секретные URL через referer Google будет обрезать «хвосты» URL Интернет вырос на треть за минувший год Google занялась регистрацией доменов Google выпустил антивирус для компьютеров Apple «Республика» предлагает молодым людям читать книги в виде URL-линков Софт для скачивания музыки из интернета Почему значение соцсетей преувеличено, что такое «темный» шэринг и как его использовать для маркетинга? Внедрение через URL: www.site.ru/?jn=xxxxxxxx