Как удалить сайт из поиска яндекс

Как удалить страницу из индекса Яндекса и Google

Чтобы оперативно удалить страницу из поиска, необходимо воспользоваться инструментом Яндекс Вебмастера и Search Console: «Удалить URL».

Перед тем как использовать данные сервисы, настройте 404 код ответа удаляемых страниц или запретите от индексации в файле robots.txt.

В течение нескольких дней после использования сервиса, страницы пропадут из выдачи поисковых систем.

Автоматическое удаление страниц

Если страница отвечает любому из трех условий:

• Отдает 404 код ошибки.
• Закрыта от индексации в файле robots.txt.
• Закрыта от индексации мета-тегом robots.

То со временем она удалится из индекса автоматически.

Недостаток автоматического метода в том, что удаление страниц может затянуться — ожидание повторного переобхода поисковыми роботами. А, если это внутренняя страница с небольшим количеством входящих ссылок, то произойти это может не скоро.

Именно поэтому рекомендуется использоваться ручные сервисы по удалению страниц из индекса.

Ждите новые заметки в блоге или ищите на нашем сайте.

Как удалить сайт из Google или Яндекс?

В этой краткой инструкции мы рассмотрим как удалить отдельные URL адреса из поисковых систем — Google и Яндекс.

Зачем это нужно? Занимаясь продвижением веб-мастера обычно стремятся как можно быстрее отправить сайт на индексацию, но бывают случаи, когда требуется противоположное — когда требуется удалить сайт из поисковых систем Гугл и Яндекс. Это может понадобится в нескольких случаях, например, когда вы купили сайт и вам нужно удалить страницы из индекса, тоесть происходит полная замена сайта. Это делается, когда на сайте меняется дизайн и наполнение. Также удаление может понадобится, когда в поиск попали служебные страницы, тоесть те, которые не предназначены для общего просмотра. Подобное удаление делается для повышения уровня безопасности. Удаления также необходимо, если в индексе появились копии страниц сайта. Причин может быть много на самом деле. Но и способов для удаления есть несколько.

Обязательно стоит отметить, что если вы удалите сайт из поисковых систем, это не означает, что он станет полностью недоступным в Интернете. Если ресурс был популярным и посещаемым, то очень высока вероятность, что у некоторых пользователей он добавлен в Избранное браузера, также он может вполне вероятно остаться по внешним ссылкам с других веб-ресурсов и соц. сетей.

Но если вам нужно удалить сам сайт из поиска, то в этом случае понадобится удалить сайт из сервера или настроить ограниченный доступ, например, с вводом пароля. Также не забудьте, что нужно будет удалить битые ссылки.

Основные шаги по удалению сайта из поисковой системы Яндекс

Временного удаления как такого в Яндексе нет, если нужно удалить сайт, то это навсегда.

Удалить с сайта страницы, которым не нужна дальнейшая индексация. Если на ресурсе настроена 404 страница, то при повторном визите поискового бота страницы сайта должны пропасть из выдачи. Минус этого метода, что удаление сайта или страниц может затянуться, ведь необходимо дождаться перехода бота на ваш сайт.

Также можно сделать настройку запрета индексации с использованием robots.txt. Хотя боты смогут попадать на эти страницы и с других сайтов, где были оставлены ссылки ранее. Поэтому данный метод не совсем действенный.

Или примените “Удалить URL” в панели инструментов Яндекс.Вебмастер.

Основные шаги по удалению страниц сайта из Google

Для начала этого процесса вам нужен зарегистрированный аккаунт в Search Console в правами владения на сайт, которые подвержены и опубликованы. Есть 3 метода для удаления.

# Удаление сайта на определенный период, например, на время проведения технических работ. Нужно сделать запрос в меню Удалить URl-адрес, как на скриншоте ⬇.

Вам в предложенном поле ввода нужно будет ввести адрес страницы для скрытия или домен, в случае если нужно скрыть весь сайт. Далее следует выбрать один из вариантов удаления:

— спрятать временно страницу из выдачи и кэша (3 месяца);

– спрятать все страницы (3 месяца);

– очистить кэш поисковика от страниц сайта – отображение в выдачи остается, только обновляются данные в кэше поисковика.

Не спешите проверять, так как данные запросы выполняются в течении 24 часов, в некоторых случаях дольше.

Обратите внимание.

Даже после удаления страницы из кэша или поиска, сканирование страниц со стороны поисковика продолжается (если она не заблокирована другими способом). Как только срок блокировки закончится отсканированная страница опять может начать отображаться в результатах выдачи. Если бот не будет получать доступ к вашему УРЛ, он решит, что страница не существует, и после того, как вы откроете к ней доступ по тому же адресу, он посчитает ее новой и допустит в результаты поиска.

# Удаление страниц сайта из индекса без возможности восстановления.

В код мета-тега robots понадобится вставить указание с запретом на индексацию, которое выглядит так:

Перед добавлением нужно проверить не закрыты ли страницы в robots.txt.

# Сообщить об обнаружении неприемлемого содержания.

Э то можно сделать, когда сайт не ваш, и вы хотите, чтобы его удалили из поиска Google. Неприемлемое содержание — это эротика, порно; нарушение закона или правил поисковой системы, нарушение авторского права. Сделать это можно по ссылке.

ВЫВОД,

Удаляйте из индекса прежде всего, ненужные страницы, на которое вы не собираетесь привлекать посетителей.

Для этого используйте :

➡️ Запрет индексации noindex или использование Disallow;

➡️ 404 код ответа сервера;

➡️ Защита с помощью установки пароля;

➡️ С помощью функционала поисковиков.

Преимущества и недостатки каждого из методов очевидны:
Используя Disallow вы показываете, что контент не нужно индексировать, но все же это не гарантированный метод, если на страницу есть ссылки с других источников. Поэтому проанализируйте данный момент перед установкой запрета.
Более эффективный метод — это защита с помощью пароля, но она может создать трудности у пользователей.
С помощью специального функционала поисковых систем действительно можно быстро удалить ненужные страницы, но во время следующей индексации они будут отображаться в выдачи.
Итак, Noindex + 404 помогут удалить лишние страницы из индекса. Noindex добавьте на каждую страницу в метатеге и HTTP-заголовке X-Robots-Tag, которую вы хотите исключить.
Надеюсь, данная инструкция помогла вам разобратся с удалением вашего сайта из популярных поисковых систем!

Как удалить страницу из индекса Яндекса навсегда?

Заказчик тасовал товары между категориями без редиректов. Теперь в Вебмастере висит предупреждение, что страницы имеют одинаковый title: страница с новым адресом и ссылка на 404. Таких страниц набралось почти 40% от общего количества страниц. После его манипуляций, поисковый трафик просел в два раза. 301 редирект не помогает.
Что делать в такой ситуации? Как заставить Яндекс понять, что страниц больше не существует, значит и дублей нет?

Ответ

Чтобы избавиться от ошибки в Вебмастере прежде всего нужно время. Причина в том, что карточки дольше индексируются поисковым роботом. Это из-за того, что чем меньше внутренних ссылок на страницу, тем меньшую часть она занимает в краулинговом бюджете.

Кроме того, при настройке 404 ответа сервера, поисковый робот со временем вновь заходит на страницу, для того, чтобы проверить не удалена ли она. В таком случае рекомендуем назначить 410 ответ сервера (удалена окончательно).

Чтобы ускорить исключение таких страниц, можно воспользоваться функционалом Яндекс.Вебмастера:

1. Удаление страниц из поиска.
2. Переобход страниц.
3. Увеличить скорость обхода поисковым роботом. Важно выполнять данную правку в том случае, если у Вас хороший сервер и это не даст сильную нагрузку. На одном SPA проекте у клиента слетел prerender и Яндекс пометил 1 000 важных страниц, как дубли. После устранения ошибки, мы увеличили скорость обхода по максимуму и за два дня Яндекс почистил все ошибки.

Хотите получить ответ на свой вопрос? Задайте его нам через телеграм-бота!↓

Подписаться на рассылку

• Как скажется на SEO удаление уникальных страниц товаров в карточке интернет-магазина? Подскажите, пожалуйста, как скажется на seo удаление уникальных страниц торговых предложений в карточке интернет-магазина? Были разные URL для разных характеристик (цветов, размеров), а останется только.
• Как удалить спамные страницы с изменённым контентом после взлома сайта? Сайт был взломан, сейчас его полечили, все вирусы убрали. Но в выдаче весь спам остался. Как максимально быстро убрать весь мусор из выдачи? 1. Как.
• Как ускорить удаление битых ссылок из индекса при массовой смене URLов на сайте? Сделали новый сайт интернет-магазину, на сайте десятки тысяч страниц. Позиций и трафика не было, поэтому терять нечего. У товаров сменились URLы и теперь в поиске.
• Как и когда нужно удалять thin контент с сайта? В последнее время встречаю кейсы вида: удалил thin контент и трафик пошёл вверх. Что думаете по этому поводу? Как удалять: просто 404 или 301 сливаем.
• Что делать, если страницы удалились из индекса и просели позиции из-за недоступности сайта? Не оплатили доменное имя и сайт неделю был недоступен. Когда проблема была устранена обнаружилось что по самому частотному запросу сайт из топа Google, хотя находится.

Юрист по образованию. Что такое SEO узнал на собеседовании. Прошел тернистый путь от контент-менеджера к SEO-аналитику.

Девиз: Юмор. Сохраняй чувство юмора, особенно в отношении себя самого — это безграничная сила.

Почему Яндекс удаляет страницы из поиска

Анализируя индексацию сайта в поисковой системе Яндекс, можно увидеть, что некоторые страницы сайта были исключены из индекса.

Основные причины удаления страниц из поиска

Ошибки ответа сервера — 3**, 4**, 5**

• Код ответа 3** связан с переадресацией страниц. Наиболее простой пример, когда из индекса удаляется страница — когда она имеет 301 редирект.

• Код ответа 4** связан с недоступностью страницы. Самые популярные ошибки — 404 и 403.

Первый код означает, что страница больше не открывается по данному адресу, и соответственно Яндекс удаляет ее из поиска.

Важно: если вы поменяли адрес странице, но она уже была в индексе, то необходимо настроить 301 редирект на новую страницу.

403 код ответа сервера указывает на то, что отсутствует доступ к данному ресурсу. В таком случае необходимо разобраться с настройками хостинга.

• Из-за проблем с сервером (коды ошибок 5**) страницы также удаляются из индекса.

Запрет к индексации

Страница запрещена к индексации через файл robots.txt или через мета-тег noindex.

Страница имеет атрибут rel=«canonical»

Тег с данным атрибутом указывает, какую ссылку необходимо индексировать ПС.

Дубликаты страницы

Обычно из индекса удаляются страницы, имеющие одинаковый контент, но открывающиеся по различным адресам. Но на скриншоте выше разные страницы https://tk9.ru/in/maslo_rapsovoe_neraf/ и https://tk9.ru/catalog/ признаны дубликатами. В таких ситуациях рекомендуется сообщать технической поддержке об ошибке и отправлять страницы на переобход.

Недостаточное качество страницы

Как вовремя реагировать на изменения

Чтобы быть в курсе всех изменений, рекомендуется настроить уведомления в панели вебмастера:

Также рекомендуется добавить целевые страницы в инструмент «Мониторинг важных страниц».