В очередной раз сотрудник качества поиска Google Джон Мюллер дал ответ на давний вопрос SEO-специалистов – как ускорить удаление из индекса поисковика большого количества не нужных или не существующих страниц.
Данный вопрос был озвучен вебмастером на форуме Google Webmaster Central Help.
Проблема вебмастера заключалась в следующем:
Мы удалили все страницы, которые не смогли улучшить и переориентировали наш оставшийся сайт. Добавили ошибки 410 и 404 на всех ненужных страницах низкого качества. Проблема в том, что Google долго удаляет все мусорные страницы, которые у нас были. Мы терпеливо ожидали около 7 месяцев, пока Google удалит все, и все шло отлично, но сейчас удаление Google не нужных страниц замедлилось до нескольких страниц в неделю. В настоящее время у нас осталось ещё около 33000 не нужных проиндексированных старых страниц.
Ответ Джона Мюллера не заставил себя ждать, в котором он посоветовал использовать отдельный временный файл sitemap.xml:
Для нас это естественно – когда мы распознаём страницы, которые, по нашему мнению, являются менее важными для сайта, мы начинаем их сканировать реже, отсюда нормально и то, что пройдёт немного больше времени для их устранения из поиска. Тип страницы также влияет на время её выпадения из индекса (например, если это URL, который был получен по одноразовой ссылке, то у нас может не быть каких-то дополнительных сигналов, которые говорят нам нам, что нужно обновить URL).
Одним из способов ускорить это может быть отправка временного файла Sitemap, в котором перечислены эти URL-адреса с последней датой изменения (например, когда вы их изменили на 404 или добавили noindex), чтобы мы точно знали, как их повторно сканировать и повторно обрабатывать. Это то, что вам нужно сделать в течение ограниченного времени (возможно, нескольких месяцев), а затем удалить sitemap, чтобы в конечном итоге вы не получили файл карты сайта, который не нужен вашему сайту.
Источник: Google Webmaster Central Help Forum
Следите за нами в Telegram