Что делать, если Googlebot не может получить доступ к сайту?

 Официальный представитель Google Джон Мюллер сделал важное заявление, касающееся работы краулера поисковой системы.Многих вебмастеров волнует вопрос: если сайт неисправен или заблокирован, может ли поисковый робот Google получить к нему доступ?По словам Мюллера, сильно беспокоиться в таких случаях не стоит. После того как запрет на сканирование краулером будет снят, URL-ы страниц сразу же появятся в индексе Google. При этом не имеет значения, был ли запрет связан с неисправностями на стороне хостера или обусловлен случайной блокировкой сканирования содержания сайта вебмастером. «Как правило, если Googlebot не получал доступ к сайту незначительное время, сканирование происходит довольно быстро и ссылки на страницы ресурса снова появляются в выдаче. Если же повреждение было более длительным и существенным, то на восстановление URL-ов в выдаче уйдет несколько больше времени – это связано с изменениями в поисковых алгоритмах, которые могли произойти, пока сайт был недоступен для сканирования. Так что всегда полезно еще раз перепроверить ваш ресурс на наличие других нарушений», – рассказал представитель Google.

В Safari обнаружена уязвимость, позволяющая осуществить подмену URL-адреса Публикации в СМИ Google убрала более 170 тысяч ссылок по “праву быть забытым” Число банковских троянов за девять месяцев 2013 г. утроилось Вредоносное программное обеспечение атакует пользователей iPhone "Яндекс.Вебмастер" позволит "Проверить URL" Новый Skype мешает передачи URL-адресов За обнаружение «дыры» в Gmail, раскрывшей полмиллиарда адресов, Google заплатил $500 Google ежесекундно получает восемь запросов на удаление пиратских ссылок Google не советует использовать специальные символы в URL-адресах