Удаление страниц из индекса поисковых систем
Здравствуйте! Сегодня пост о наболевшем для большинства из начинающих сайтостроителей. Мне приходилось очень часто в комментариях отвечать на один и тот же вопрос — как удалить страницы из поиска, которые были проиндексированы ранее, но в силу сложившихся обстоятельств были удалены и больше не существуют, но по-прежнему находятся в индексе поисковых систем. Или же в поиске находятся страницы запрещенные к индексации.
В комментариях особо не развернешься, поэтому после очередного вопроса решил уделить данной теме отдельное внимание. Для начала давайте разберемся, каким образом такие страницы могли оказаться в поиске. Примеры буду приводить исходя из собственного опыта, так что если я что-то забуду, то прошу дополнить.
Почему закрытые и удаленные страницы есть в поиске
Причин может быть несколько и некоторые из них я постараюсь выделить в виде небольшого списка с пояснениями. Перед началом дам пояснение что подразумеваю под «лишними» (закрытыми) страницами: служебные или иные страницы, запрещенные к индексации правилами файла robots.txt или мета-тегом.
Несуществующие страницы находятся в поиске по следующим причинам:
- Самое банальное — страница удалена и больше не существует.
- Ручное редактирование адреса web-страницы, вследствие чего документ который уже находится в поиске становится не доступным для просмотра. Особое внимание этому моменту нужно уделить новичкам, которые в силу своих небольших знаний пренебрежительно относятся к функционированию ресурса.
- Продолжая мысль о структуре напомню, что по-умолчанию после установки WordPress на хостинг она не удовлетворяет требованиям внутренней оптимизации и состоит из буквенно-цифровых идентификаторов. Приходится менять структуру страниц на ЧПУ, при этом появляется масса нерабочих адресов, которые еще долго будут оставаться в индексе поисковых систем. Поэтому применяйте основное правило: надумали менять структуру — используйте 301 редирект со старых адресов на новые. Идеальный вариант — выполнить все настройки сайта ДО его открытия, в этом может пригодиться локальный сервер.
- Не правильно настроена работа сервера. Несуществующая страница должна отдавать код ошибки 404 или редирект с кодом 3хх.
Лишние страницы появляются в индексе при следующих условиях:
- Страницы, как Вам кажется, закрыты, но на самом деле они открыты для поисковых роботов и находятся в поиске без ограничений (или не правильно написан robots.txt). Для проверки прав доступа ПС к страницам воспользуйтесь соответствующими инструментами для вебмастеров.
- Они были проиндексированы до того как были закрыты доступными способа.
- На данные страницы ссылаются другие сайты или внутренние страницы в пределах одного домена.
Итак, с причинами разобрались. Стоит отметить, что после устранения причины несуществующие или лишние страницы еще долгое время могут оставаться в поисковой базе — все зависит от апдейтов или частоты посещения сайта роботом.
Как удалить страницу из поисковой системы Яндекс
Для удаления URL из Яндекс достаточно пройти по ссылке и в текстовое поле формы вставить адрес страницы, которую нужно удалить из поисковой выдачи.
Главное условие успешного запроса на удаление:
- страница должна быть закрыта от индексации правилами robots или мета-тегом noindex на данной странице — в том случае если страница существует, но не должна участвовать в выдаче;
- при попытке обращения к странице сервер должен возвращать ошибку 404 — если страница удалена и более не существует.
При следующем обходе сайта роботом запросы на удаление будут выполнены, а страницы исчезнут из результатов поиска.
Как удалить страницу из поисковой системы Google
Для удаления страниц из Гугла поступаем аналогичным образом. Открываем инструменты для веб-мастеров и находим в раскрывающемся списке Оптимизация пункт Удалить URL-адреса и переходим по ссылке.
Перед нами специальная форма с помощью которой создаем новый запрос на удаление:
Нажимаем продолжить и следуя дальнейшим указаниям выбираем причину удаления. По-моему мнению слово «причина» не совсем подходит для этого, но это не суть…
Из представленных вариантов нам доступно:
- удаление страницы страницы из результатов поиска Google и из кэша поисковой системы;
- удаление только страницы из кэша;
- удаление каталога со всеми входящими в него адресами.
Очень удобная функция удаления целого каталога, когда приходится удалять по несколько страниц, например из одной рубрики. Следить за статусом запроса на удаление можно на этой же странице инструментов с возможностью отмены. Для успешного удаления страниц из Google необходимы те же условия, что и для Яндекса. Запрос обычно выполняется в кратчайшие сроки и страница тут же исчезает из результатов поиска.
А эти несуществующие страницы обязательно удалять из поисковых систем? Это разве на что-то влияет?
Ответить
Спасибо Вам за прекрасный блог.
Извините за вопрос не по теме поста — считается что поисковики любят когда сайт обновляется с определенной периодичностью статьями. НО, допустим, если сайт — это интернет-магазин по продаже декоративных контактных линз, возможно ли в качестве регулярного обновления использовать только статьи в rss ленте?
Ответить
Сергей, со временем ПС могут и сами их выкинуть, но на это может уйти очень много времени. Все ведь делается на добровольной основе, никто ни к чему не принуждает. Если в выдаче присутствует много дублей (они закрыты от индексации, но по каким-то причинам все равно в поиске) — это вряд ли хорошо, так и на фильтры можно нарваться. Мне лично нравится когда везде порядок — не только за рабочим столом, но и на блоге, поэтому придерживаюсь принципа: от всего лишнего нужно избавляться.
Антон, естественно, на таких ресурсах товары часто не меняются, поэтому проследите чтобы к ним были обязательно уникальные описания, а для повышения авторитетности добавляйте тематические статьи с некой периодичностью. Организуйте внутреннюю перелинковку, например, поставьте ссылки со страницы товара на статьи про него.
Ответить
Какая прелесть! А я и не знала, что страницы можно удалять. Вот что значит лень читать — а ведь в Яндексе вебмастер эта функция предусмотрена, стоило только все прочитать)))
Особой нужды, конечно, нет, но занесу себе эту статью в закладки, чтобы в случае чего было куда подглядеть. Не люблю, когда на моем блоге есть несуществующие страницы.
Ответить
Удалением пока не пользовался. Но случай когда я накосячил с адресом страницы, которая уже проиндексирована у меня был. Поправил одну букву в урле, а потом понял что сделал 😀
Нужды удалять страницы у меня еще нет, но если вдруг появится то панель вебмастера мне в помощь 😉
Ответить
Вот спасибо за гугл, я и не заметил, что можно удалять каталоги, а то у меня 600 с лишним в индексации при реальных 30-ти страницах, по одной удалять — это с ума сойдешь, а каталогами — рубрики, архивы и т.д. не так страшно 🙂
Ответить
Спасибо за подробное описание. Есть две страницы, которые надо удалить с поисковиков.
Ответить
Кристина, зачастую не замечаем тот или иной функционал, до тех пор пока он не понадобится. Так что, берите на вооружение, в случае чего — пригодится 😉
Лысенко Евгений, URL конечно лучше не менять, если страница уже имеет входящие на нее ссылки. Если такое имеются внутри своего домена, то еще ладно — дело поправимое, а вот если с других сайтов — то в логах инструментов вебмастера могут «висеть» ошибки.
Юрий, удалять каталоги действительно удобно. У меня на блоге иногда ни с того ни с сего категории оказываются в выдаче, хотя закрыты — так что удаляю целиком
/category/Андрей, пожалуйста, пользуйтесь во благо 😉
Ответить
А мне как раз это и нужно. Перепрофилирую сайт, а он уже полностью проиндексировался. Хоть там и не много страниц, а все удалять придется.
Ответить
Юрий, будьте осторожны, смена тематики и удаление страниц в этом случае может отрицательно повлиять на ситуацию. Я бы рекомендовал оставить старые записи до поры до времени, поместив их в отдельную рубрику, без смены URL, а тем временем наполнять новыми статьями.
А уж со временем, когда сформируется новое семантическое ядро, удалить эти страницы при желании.
Ответить
Подскажите, пожалуйста. Если мне нужно удалить с Гугла не каталог вида
site/catalog, а набор страниц с параметром, к примеру видаsite/230?skip=575, в роботсе понятно, пишем:А как удалить такое из гугл через вебмастер? Заранее спасибо.
Ответить
Денис, большое спасибо! А я жду-мучаюсь уже неделю…
Создал наконец-то свой блог на отдельном домене, решил перетащить статьи со старого блога на worpress и … узнал, что так делать нельзя! Потом узнал, что если статьи удалить со старого сайта, они через какое-то время выпадут из индекса и можно будет опубликовать их уже на новом сайте.
Но вот ждал неделю и думал: а сколько же ещё так ждать? Неужели нет способа ускорить процесс? И тут Ваша статья нашлась. Огромное спасибо! Вот уж правду говорят: век живи — век учись 😳
Ответить
Андрей, в таком случае удалять каждую страницу по-отдельности. Если их много, то придется потратить немного времени, ничего не поделать 🙂
Павел, Вам нужно было поставить 301 редирект со старого домена — тогда бы и посетителей не потеряли, приходящих с поиска, и страницы бы переиндексировались по новому адресу быстрее. Соответственно и вручную удалять ничего не пришлось бы.
И еще, если Вы просто скопировали статьи со старого домена на новый, то получается дублирование, за что и на санкции ПС велика вероятность нарваться. Повторюсь — использовать редирект было бы правильнее.
Ответить
Спасибо за ответ!
Ну, во-первых, я не умею ставить редирект. Думаю, научился бы, найдя в интернете, но уже поздно. Статьи на старом месте почиканы, запросы на удаление в Яндекс и Гугл отправлены. Так что теперь только один вариант — дождаться, когда они из поиска пропадут…
А во-вторых, посетителей я потерял немного — на блоге было всего около 300 просмотров за почти год его существования — я никак не раскручивал блог, ничего такого не делал. Так что тут жалеть нечего.
Нет, я не копировал статьи. К счастью, вовремя узнал, что так делать нельзя. Я собирался подождать, пока они пропадут из индекса, и тогда уже опубликовать на новом месте.
Ответить
Павел, ну тогда время решает всё) Страницы обычно быстро удаляются из основной выдачи, но еще некоторое время хранятся в сохраненной копии. Если будете статьи публиковать на новом домене, то подождите когда и в сохраненке они удалятся.
Ответить
Webliberty, именно этого я теперь и жду) Спасибо за советы!
Ответить
Привет всем! Я хочу узнать одно.. У меня раньше были примерно 3000 страниц которые сейчас не существуют, я поставил 301 редирект на главную страницу, хочу узнать это хороший способ или нет? И еще это заставит ли это ПС удалить старые страницы из индекса.. Заранее спасибо!
Ответить
Karo, привет! Если страница более не существует, то предпочтительнее чтобы сервер давал 404 ответ. Тогда страницы сами выпадут со временем. Если не хотите терять пользователей приходящих на такие страницы, то сделайте 404 страницу более информативной. Т.е. предложите пользователям перейти в какой либо раздел сайта, поставьте блок с последними записями или самыми популярными.
Использование редиректа допустимо, но нужно учитывать, что поисковые системы не очень любят когда их слишком часто перекидывают со страницы на страницу…
Ответить
Спасибо большое за совет! Так и буду делать.
С новом годом и с наступающим, пусть 2013 будет успешный и доходный год! Удачи!
Ответить
Здравствуйте, Денис! Очень рада, что попала на Ваш блог! Я далека от технических вопросов. Но раз уж блоггер, то приходится хотя бы немного что-то делать. В связи с этим, у меня просьба, поясните пожалуйста на языке «чайника» следующую ситуацию. Я так же , как и Юрий, год назад сменила тему, поэтому часть статей пометила в «личные», т.к. побоялась их удалять. Мне их нужно удалить из поисковых систем, так как это описано в Вашей данной статье? И еще, если этого не сделать, то это влияет на показатели блога, правильно ли я понимаю?
Ответить
Лилия, здравствуйте! Да, конечно их можно удалить таким способом, хотя если с тех пор прошел целый год, то думаю их и так уже нет в индексе ПС 😉 На основные показатели блога это никак не влияет.
Ответить
Благодарю, Денис!
Ответить
Приветствую. У меня такая проблема. В поиске фото по запросу имени фамилии выдает фото, которое я хочу, чтоб исчезло.
Его удалили с фотохостинга. И в яндексе оно осталось только в виде маленького размера фоточки на общей странице выдачи поиска по запросу. Если на него нажать, то пишет, что фото не может быть открыто, т.к. его не существует.
В общем у меня вопрос, как долго вообще это несуществующее уже месяц фото будет выдаваться в поиске этой маленькой копией? По урл ничего не удаляется. Яндекс пишет, что у него такой URL и не проиндексирован.
Ответить
Улитка, сейчас наверно отображается сохраненная копия изображения. Индекс сохраненки может долго содержать сведения об удаленных страницах или файтах, но со временем все удалится.
Ответить
Классная статья. Не могу найти в инструментах вебмастера на Google ни одну из вкладок, ни оптимизации, ни файлы sitemap, ни Удаление URL адреса. Одно из двух: либо то что у меня аккаунт в Google на моем домене, либо Google интерфейс урезали. Есть только «Главная страница», «Все сообщения», «Настройки», «Лаборатория», и «Другие ресурсы» При нажатии на эти ссылки подпункты описанные в статье не появляются. Что же делать? 💡
Ответить
У меня с дублями полный п..ц. Накосячил с сайтом, пришлось удалять и заново устанавливать. Как следствие, каждая статья по новому адресу и по старому, более ста статей. ЧТО можете посоветовать?
Ответить
А как относиться к этому замечанию гугла?
Ответить
Роман, для начала необходимо добавить свой сайт в Google Webmaster Tools, подтвердить на него свои права и уж затем, появится возможность применять все выше описанные действия, в том числе появятся все перечисленные Вами пункты, которые не смогли найти.
А сейчас видимо сайт у Вас не добавлен и видите вот такую картину:
После добавления сайта он появится в списке и им можно будет управлять.
Олег, при переустановке меняли URL адреса или в чем причина? Страницы с 404 ошибкой можно и даже нужно смело удалять.
Роман, можно подождать конечно пока Гугл и сам выкинет страницы, но эта процедура может затянуться слишком долго. Ждать когда из-за дублей сайт уйдет под фильтр или опасаясь «негативных последствий» все же избавиться от них? Я предпочитаю второй вариант, кроме того если это действительно никому ненужны дубли, то последствий быть не может, все на пользу 😉
Ответить
Спасибо за ответ! Понятно. Просто напугала фраза «может привести к негативным последствиям для вашего сайта». Каким еще последствиям?! опять еще какой-нибудь фильтр наложат.
Подскажите еще пожалуйста. Изменил названия ссылок с кириллических на латиницу. Редирект поставил. Но все равно в индексе теперь дубли. Вот уже в течении месяца ни одна страница не добавляется в основной индекс, а попадает сразу в дополнительный, несмотря на уникальный контент.
Что делать: удалить в вебмастере все кириллические ссылки и несколько месяцев ждать, пока гугл перенесет страницы в основной индекс (если перенесет еще) или удалить все страницы, которые находятся в доп.индексе и ждать их новой индексации?
Ответить
Webliberty, чуть позже с этим разобрался, всё было добавлено, просто нужно было сперва выбрать сайт кликнув на него, потом конечно всё появилось… Теперь в другом проблема. Делал вообще изночально портал для школ, и подумывал сделать на одном домене всё, только сайт каждой школы выглядел бы так:
школа.в/населенный_пункт/
Оказался такой вариант не востребованным, и сайт с такой конфигурацией имел бы очень длинный адрес… В общем оставил один сайт на этом домене, а слеш удалил, теперь вот удаляю все старые адреса из гугла, но они не удаляются, удалял и каталоги, ошибки всё равно появляются через некоторое время… А в яндексе вообще не пойму как удалять…
Ответить
Роман, а страницы закрыли в роботсе? Гугл воспринимает этот файл как рекомендацию и может иногда игнорировать. Были у меня такие страницы, которые вновь и вновь появлялись, через месяц или два. В Яндексе тоже все просто, переходите по указанной в статье ссылке, вводите адрес и нажимаете кнопку удалить, вот и все.
Ответить
Такой вопрос, хочу свалить с Ucoz, сейчас на этой CMS прикреплён домен второго уровня. Сначала я хочу заблокировать сайт, и тут же начну удалять страницы из индекса Яши и Гугла, как указано выше в Вашей статье.
Потом откреплю домен и повешу его на другой новый сайт, после этого (разумеется спустя какое-то время, например с месяц спустя) я могу по новой тем же контентом наполнить мой новый сайт или за это будет что-то нехорошее?
Ответить
Влад, ситуация с переездом с бесплатных платформ тем и усложнена, что нет полного контроля над сайтом и нет возможности настроить 301 редирект, что в данном случае разумнее всего.
Дело в том, что даже после ручного удаления страниц из индекса ПС они «запоминают» историю контента, где он раньше был, на каком домене и хранят эту информацию в своем кэше в виде копий сохраненных страниц.
В Гугле можно удалить страницу вместе с сохраненкой, в Яндексе такой возможности нет. Если учесть, что Google более лоялен к дублированному контенту, то со стороны Яндекса нет уверенности что не будут применены санкции. Сохраненные копии страниц в Яндексе могут храниться довольно большой срок, вплоть до полугода.
Но переезд на платный хостинг — благое дело и я бы рискнул, Ваша задумка вполне осуществима, искренне желаю удачи 🙂
Ответить
Здравствуйте, Webliberty. А как долго Яндекс хранит информацию об удаленном сайте/домене?
Ответить
Доброе утро! Набираю в ГУГЛЕ запрос по своей фамилии и читаю среди прочей информации старую и тенденциозную (на разных страницах списка), связанную с моим отношением к Правлению Садоводства. К нему давно не имею никакого отношения! Как ее удалить?
Ответить
У плагина all in one seo pack есть функция удаления дубликатов. Можно им воспользоваться, либо прописать noindex.
Ответить
Александр, здравствуйте! Об этом знает только сам Яндекс)
Юрий, приветствую! Если страница на которой написано про Вас существует (открывается), то следует обратиться к владельцу сайта с просьбой исправить или удалить упоминание о себе. Если сейчас отношения не имеете, то это уже история, ее нельзя переписать заново.
Степан, речь не совсем про дубликаты, но функции полезные, можно воспользоваться.
Ответить
Всё никак не получается удалить данные моей старой страницы ВК из поисковика. То есть страницы этой уже давно нет, а вот в поисковике она есть и мои детские фото тоже можно найти там… Пробовала в яндексе через вебмастер удалить, но он мне пишет, что Указанный URL не проиндексирован. Что это значит? 😥
Ответить
Caroline, не совсем понятно — по факту страница существует если пройти по ссылке? Перейдите на страницу social.yandex.ru и отключите свой профиль Вконтакте в графе «Использовать на сервисах» или вовсе удалите:
Ответить
Webliberty, такая ситуация. На портале по поиску работы при вводе моего номера телефона видна вся моя трудовая деятельность и все контакты. Страница удалена, а копия имеется. Google говорит, что информация перестанет появляться, когда будет произведено переиндексирование. А когда — не ясно. А что насчет других поисковиков? Как мне ускорить удаление старой информации?
Ответить
Спасибо за статейку, у меня дублирование контента в Гугле, попробую, отпишусь, спс.
Ответить
Игорь, все верно, потребуется время, прежде чем информация будет полностью будет удалена из сохраненной копии страницы. Если сайт содержит конфиденциальную информацию, которая, на Ваш взгляд, не должна находиться в поиске, стоит обратиться за помощью: удаление информации из Google
Ответить
Здравствуйте, у меня именно эта ситуация, о которой вы здесь пишите: я изменила постоянные ссылки на ЧПУ. Редирект 301 есть, но вначале он не работал и был ответ 500. Потом я заменила тему и стала ошибка 404, это все же лучше, чем 500. Очень долго держатся ошибки 404, я их удаляю ежедневно, а на другой день их столько же или больше, причем одни и те же, это какая-то бесконечность.
Можно ли это как-то ускорить, другим способом, чем это ручное ежедневное удаление? Или другого способа нет? 😉
Ответить
Денис смотри, а если мне надо удалить /attachment/, если я выберу «удалить каталог», то какие адреса еще удалятся?
Ответить
Ксенья Юрьевна, редирект скорее всего не работал по той простой причине, что страницы находились в кэше браузера. Простите, а где держаться ошибки? На блоге или в поиске? В принципе, при ответе сервера 404 страницы сами со временем исчезнут из выдачи — изнурять себя ежедневным удалением не стоит.
Александр, никакие, т.к. этот адрес не является каталогом. Если планируется исключить из индексации подобные ссылки — нужно добавить в robots.txt следующее правило:
Disallow: /attachment/Ответить
Подскажите пожалуйста, как мне удалить свое фото с данными с Яндекса (people.yandex.ru)? В строке запроса просто набираю свое имя и фамилию и сразу мое старое фото с данными. Поменяла уже фото в ВК (там раньше было это фото), а как удалить в Яндексе не понимаю. Нужно страницу в ВК удалить? В Вебмастере пробовала, не получается! Помогите «чайнику» (реально дело жизни и смерти)
Ответить
Ольга, Яндекс подгружает фотографии из социальных сетей. Если фото изменили, то и в поиске в скором времени оно изменится. К сожалению, как-то повлиять и ускорить процесс не получится.
Ответить
Пишет что Указанный URL не проиндексирован. Как это? Тут уже не отвечают?
Ответить
Василий, если не проиндексирован, значит страница не присутствует в результатах поиска, следовательно и удалять нечего. Отвечают, извиняюсь за задержку 🙂
Ответить
Как одним махом удалить все файлы каталога с гугла?
Ответить
Открываете инструмент «Удалить URL-адреса», создаете новый запрос на удаление и вводите название каталога таким образом:
Обратите внимание, полный путь вводить не нужно, только название каталога. Затем в качестве причины в выпадающем списке выбираете «Удалить каталог» и нажимаете «Отправить запрос»:
Ответить
Подскажите, пожалуйста, давно по незнанию меняла названия записей. В панели яндекс вебмастер в исключенных страницах находятся эти урлы. Если на них нажать, сообщает error 404 ничего не найдено. Переходя по ссылке для удаления, подставляю несуществующий урл, сообщает, что он не проиндексирован. Непонятно, мне остается ждать или как быть с тем, чтобы из панели урлы исчезли? В robots запрет не напишешь ведь все эти несуществующие страницы. Поэтому пока не поняла, что предпринять?
Ответить
Людмила, все верно, только ждать. Эти страницы уже не участвуют в поиске, т.к. удалены роботом при очередном сканировании и ответе сервера 404. Поэтому удалять ничего не требуется.
В панели ЯВ данные обновляются с задержкой и в данном случае наличие в отчетах этих страниц не оказывает никакого влияния.
Ответить
Спасибо, буду ждать тогда. Правда, жду уже почти два года, понимаю, что не оказывают они ни на что влияние, но вот глаза точно мозолят! 😉
Ответить
Здравствуйте, помогите пожалуйста, проблема с поисковиком гугл. Когда вставлю в поле «URL-адреса которые нужно удалить» появляется окошко с надписью:
Потом я нажимаю removal request. И через некоторые время появляется надпись «отказано». Мне срочно нужно удалить эту страницу кэша. Она как назло появляется в первых рядах поисковика гугл когда набираю свое имя, что мне посоветуйте делать? Надеюсь на Вашу помощь 😥
Ответить
Здравствуйте, к сожалению, ничем помочь не смогу, о причинах отказа могу лишь догадываться. Попробуйте повторить запрос чуть позже. Да и не принимайте близко к сердцу, мало ли одинаковых имен встречается.
Ответить
Информация с сайта удалена и копия страницы обновилась но при запросе этой информации в поисковике результат показывает ссылку на этот сайт. Посоветуйте помогите в чем причина?
Ответить
А в чем проблема? Ссылка же осталась, просто сменилось содержание. Возможно на эту страницу ведут другие внешние ссылки, тогда в результатах поиска обычно отображается: «найдено по ссылке».
Ответить
Здравствуйте! Webliberty да, но дело в том что информацией является моя Фамилия и я не хотел бы чтобы она выводила этот сайт в результатах поиска. На самом сайте ее нет.
Ответить
Алексей, в таком случае остается только ждать когда поисковики обновят свой индекс. При желании можете отписаться на мою почту и указать адрес сайта + запрос по которому он находится в результатах поиска — посмотрю детальнее в чем может крыться причина.
Ответить
Нет оснований для удаления. Сервер не возвращает код 404, индексирование не запрещено ни в robots.txt, ни метатегом noindex — что делать?
Ответить
В Яндаксе если указанный URL не проиндексирован странице или категории, то вы просто так не удалите, а это часто бывает.
Ответить
Айгуль, если сайт принадлежит Вам — выполнить одно из требований, позволяющих получить основание. Если это сторонний сайт — связаться с администрацией и попросить пойти навстречу.
Ответить
А как убрать страницу не нужную на сайте вордпресс?
Ответить
Саид, имеете в виду как удалить страницу с сайта? Ссылка на удаление есть в админке, как в списке всех страниц, так и в режиме редактирования.
Ответить
Добрый день! А как быть, если надо удалить из Яндекса несколько сотен страниц? Попробовал через сайт/labels/ — не работает. Не уж то нет ещё в Яндексе такого механизма?
Сам файл robots.txt изменил давно, робот сайт посещает, но лишнее не удаляет из поиска по
Ответить
Здравствуйте! Группового удаления страниц по каталогу у Яндекса нет. Выход только один — удалять вручную каждую страницу или ждать. Как правило страницы с 404 ошибкой выпадают из поиска через 2-3 апдейта поисковой базы.
Ответить
А если страницы с товарами были в индексе их удалили с помощью 404, потом добавили под новыми урлами, может ли из за этого товары не попадать в индекс? Если да, то как решить эту проблему не имея старых урлов товаров?
Ответить
Антон, это может являться причиной. Поисковые системы стараются не индексировать страницы с не уникальным содержанием. После того как страницы выпали из основного индекса, в течение продолжительного времени (до полугода) они могут находиться в сохраненной версии и ПС знаю об этом контенте, считая его появление на других страницах дубликатом. Вам было необходимо использовать 301 редирект для смены URL.
В том случае, если товар был временно исключен из продажи, не стоило удалять страницы. В таких случаях выводят сообщение о его временном отсутствии и приводят список похожих карточек товаров.
Загоняйте страницы в поиск социальными сигналами, ставьте ссылки на эти страницы. Очень важно, чтобы товары имели уникальные описания и желательно отзывы покупателей.
Ответить
Webliberty, Спасибо большое) Буду пробовать 🙂
Ответить
Указанный URL не проиндексирован — пишет мне вебмастер всякий раз, когда я хочу удалить сохраненную копию страницы. Сайт недавно закрылся с концами. Хочется удалить все следы его пребывания в Сети. С гуглом вопрос решился легко, а яндекс коней кидает. Как быть?
Ответить
Сохраненная копия может храниться очень продолжительное время. И да, она считается не проиндексированной, удалить через Вебмастер не получится, остается только ждать.
Ответить
Здравствуйте, я новичок в этом деле. Недавно увлёкся созданием сайтов. Создал сайт в ноябре и не знав наполнял его некачественным рерайтом, страницы индексировались. Почти месяц я не занимался сайтом, изучал все что связанно с сайтоСтроением.
В начале января удалил весь некачественный контент с сайта (примерно 180 записей) и уже 6 дней добавляю качественный копирайт, но почему-то не индексируется новые статьи, с чем это может быть связано? И будет ли толк, если дальше наполнять его качественным контентом? 😥
Ответить
Здравствуйте, Влад, ответил на Ваши вопросы по электронной почте. Проблемы с индексированием скорее всего связаны с изменением структуры ссылок. Качественные тексты обязательно приведут к положительному результату, но вначале определитесь со структурой, использовать ЧПУ или нет.
К тому же не забывайте, что в Яндексе текстовые апдейты проходят достаточно редко, примерно раз в две недели.
Ответить
Здравствуйте! У меня такая ситуация — занимаюсь наполнением, актуализацией информации сайта в фирме. Когда хочу удалить разделы, странички со старой информацией и т.п., мне это делать не дают, говорят:
На этом объяснения заканчиваются. Почему нельзя удалять? Какие минусы, последствия может повлечь за собой удаление страницы? Так же можно «обрасти хламом» и засорить сайт ненужной информацией, которой все равно никто не интересуется.
Ответить
Marryl, здравствуйте! В этих словах есть доля правды. Если страницы приносят трафик или на них ведут обратные ссылки, то при удалении Вы потеряете и то и другое. Если информация устарела, то ее лучше актуализировать.
На своем блоге я тоже не удаляю старые записи, хотя они давно потеряли всякий интерес со стороны посетителей, а когда есть свободное время — переписываю. И это дает ощутимый эффект!
Ответить
Доброго времени!
Подскажите пожалуйста. Перенес интернет-магазин с поддомена: старый.site.com.ua на новое название поддомена: новый.site.com.ua. Сам сайт новый, только проиндексировался гуглом, посетителей практически не было.
Как и что в таком случае лучше сделать со старым поддоменом? Просто удалить все старые файлы и сам поддомен или ставить какие-то перенаправления? Сможет ли Гугл теперь добавить новый поддомен под фильтр одинакового контента (поскольку старый проиндексирован)? 💡
Ответить
Виталий, в Вашем случае следует настроить редиректы со старого поддомена на новый — это исключит возможность наложения санкций за не уникальный контент.
Если сайт новый, то после индексации, которая в среднем занимает около месяца, в поиске должны появиться новые адреса — после этого можно удалить редиректы и поддомен, так как на старый поддомен наверняка не ведут ссылки с других сайтов и держать переадресацию вечно нет необходимости.
Ответить
Webliberty, Спасибо.
Но насколько я понимаю гугл сам не удалит старые ссылки «старый.site.com.ua»
Возможно через: Вебмастер /Индекс Google / Удалить URL-адреса — добавить к удалению такую ссылку «http://старый.site.com.ua/»?
Или этот способ может задеть новый поддомен, поскольку уже стоит редирект (или сам корневой сайт)?
Ответить
Виталий, удалить такие ссылки через Вебмастер не получится, потому что страница существующая и не закрыта от индексации — нет основания для удаления.
Если будет проставлен 301 редирект, то старые страницы сами будут исключены из поиска, в то время как новые в нем появятся.
Ответить
Это хорошо все, а как сделать чтобы страница не попадала в индекс? Чтобы поисковой робот её не видел?
Ответить
Алексей, настройки индексирования страниц задаются с помощью файла robots.txt, который должен быть расположен в корневом каталоге. Подробнее об этом читайте здесь.
Ответить
Здравствуйте. У меня такая ситуация — я не успела оплатить хостинг. Хостеры удалили мой аккаунт и сайт — бекапов нет. Если я пересоздам сайт с тем же доменным именем и наполню его тем же контентом, как Яндекс отнесется к этому? Старые ссылки (страницы) из поиска удалю 🙂
Ответить
Марина, а зачем удалять из поиска старые страницы, если есть возможность восстановить на них контент? Домен остается тот же, структура URL не меняется и сайт со временем возвращается поиск. А самое главное — не теряются внешние ссылки, ссылающиеся на страницы сайта.
В восстановлении помогут сохраненные версии страниц в поисковых системах, а также Webarchive. Такой вариант более приемлем, нежели восстанавливать контент по другим URL адресам. Яндекс должен нормально отнестись, т.к. даже после удаления страниц они еще долгое время находятся в сохраненной копии и могут участвовать в поиске.
Ответить
А если взглянуть на эту тему со стороны пользователя, а не администратора сайта. Как же удалить страницу чужого сайта из поисковой выдачи, если на ней информация, которая порочит честь, достоинство, бла-бла…?
Ответить
Светлана, следует обратиться на прямую к администратору сайта и в вежливой форме попросить удалить информацию. Не все на это пойдут, но попытаться стоит.
Ответить
Webliberty, мне видимо больше повезло) Я нашла фрилансера, который смог удалить вопреки нежеланию администратора)
Ответить
Доброго времени суток! Создал блог на блогпосте, подвязало почту, акк в гугл+, блогом должен пользоваться другой человек, не подвязывал ни в серч консоль ни в адсенс, сразу же удалил из меню. Так вот, почему он выдается в поисковой выдаче? И почему при регистрации нового блога адрес удаленного не доступен для регистрации? Гугл сам его удалит или надо куда-то писать с просьбами? Спасибо за ответ.
Ответить
Здравствуйте, Николай. Мне удалось найти информацию, что при удалении блога появляется сообщение о 3 месяцах — в течение этого срока владелец сможет его восстановить. Затем адрес будет освобожден и доступен для регистрации. Можете задать этот вопрос в поддержку для уточнения.
Ответить
Здравствуйте. Скажите, если изменил url в настройках, убрал каталог между доменом и названием страницы. Как сделать, чтобы не было дублей страниц? Ведь старые страницы проиндексированы по старым ссылкам и они же будут индексироваться по новым?
Ответить
Webliberty, добрый вечер! Спасибо огромное за столь интересный контент.
Хочу уточнить следующий момент: дело в том, что у меня на сайте порядка 180 000 страниц представлено в поиске. Я хочу изменить структуру урлов, поскольку в части из них по ошибке оказалась кириллица и в целом по определенным урлам излишне высокий уровень вложенности.
В связи с этим есть 2 вопроса:
1) Если поставить 301 редирект со старых урлов на новые (страницы будут абсолютно те же самые) и при этом треть страниц удалить (ошибка 404) и закрыть роботсом, оба этих действия в совокупности могут негативно сказаться на сайте в плане штрафов/фильтров/потери траста и т.д.?
2) На некоторые узкие специализации хочу сделать поддомен, с переходом с главной страницы, допустим. Как бы Вы посоветовали сделать это? Чтобы не было штрафов за зеркало, перенаправление пользователей и так далее?
Буду очень признателен ответу)
Ответить
Виктор, поставьте редирект со старых страниц на новые или укажите новый canonical. Со временем страницы будут переиндексированы по новым адресам без дублей.
Артем, если это будет сделано для улучшения сайта и правильно в техническом исполнении, то санкций не должно последовать. Временное снижение позиций не исключено, но должно восстановиться после склейки страниц с новыми URL.
Поддомены я бы не стал использовать вообще в данном случае, т.к. это неизменно приведет к потере ссылочной массы на основной домен. Для поисковых систем это будут разные сайты со всеми вытекающими последствиями.
Ответить
Добрый день!
Возникла ситуация, когда необходимо сменить домен сайта, но без 301 редиректа.
1. Если я перенесу сайт на новый домен, но при этом заменю весь контент — этого будет достаточно или надо будет менять логотип, дизайн, реквизиты компании также, чтобы поисковики не посчитали сайт копией старого?
2. Смогу ли я использовать старый контент сайта, если удалю все странички по инструкции и подожду пару месяцев (сколько нужно ждать примерно?) чтобы удалились копии страниц?
Ответить
Елена, предпочтительнее настроить редирект, но если такой возможности нет, тогда Ваш вариант имеет право на жизнь.
1. Менять логотип, дизайн и реквизиты не нужно, новый домен не должен попасть под аффилиат-фильтр, если старый домен будет недоступен.
2. Сколько ждать — достоверно никто не знает, но я предпочитаю ориентироваться на 6-ти месячный период. Главное не забудьте проверить старые тексты на уникальность — их могли растащить.
Ответить
Добрый день!
Сколько должно пройти времени между тремя действиями для удаления сайта:
1) запрет индексации в robots.txt;
2) удаление файлов сайта с хостинга;
3) удаление URL сайта через Яндекс и Гугл Вэбмастер.
Еще вопросы:
а) если выполнить пункт 2 и 3, то нужно ли выполнять пункт 1?
б) в удалении URL сайта через Яндекс и Гугл Вэбмастер нужно прописывать каждую страницу отдельно или достаточно внести адрес сайта и все его страницы при этом удалятся?
в) перед удалением URL через Яндекс и Гугл Вэбмастер нужно убедиться, что сервер дает ошибку 404?
Заранее спасибо за ответы!
Ответить
Маргарита, точного ответа на Ваш вопрос не существует, я имею в виду промежутки времени между этими действиями.
Если хотите полностью удалить сайт, то в первую очередь выполните 1 пункт. Затем в панели администрирования удалите все страницы и записи, после чего переходите к 3 пункту. Описанные мною действия можно выполнять сразу, ничего не дожидаясь.
Удаление страниц из поисковой выдачи занимает некоторое время. Google удаляет за короткий промежуток времени, Яндекс за 2-3 апдейта поисковой базы. Для контроля проверяйте количество проиндексированных страниц в обоих поисковых системах.
Когда страницы пропадут из выдачи — можно переходить ко 2 пункту для удаления файлов с хостинга. Важно: даже после этого, страницы долгое время будут находиться в кэше ПС.
Ответы на дополнительные вопросы:
а) Можно не выполнять.
б) В Яндексе отдельно каждую страницу. В Google можно по отдельности или каталогом, например, если в URL есть категории.
в) Да, ошибка 404, запрет на индексацию в robots.txt или мета-тег noindex на всех страницах — обязательное условие.
Разрешите задать встречный вопрос: а зачем такие сложности? Желаете ускорить удаление? Если просто удалить файлы с сервера, то рано или поздно сайт пропадет из поиска самостоятельно.
Ответить
Денис, спасибо за оперативный ответ. Обнаружила признаки, что сайт признан аффилиатом, поэтому хочу от него поскорее избавиться, чтобы он не тормозил основной сайт. Ответ у вас очень подробный, но я все равно немного запуталась.
Прошу подсказать, правильно ли перечислена последовательность действий:
1) Запрещаем индексацию в robots.txt всех страниц всем поисковикам:
2) Удаляем файлы сайта с хостинга;
3) Перед удалением URL сайта через Яндекс и Гугл Вэбмастер дожидаемся, чтобы сервер выдавал ошибку 404 для всех страниц сайта;
4) Удаляем URL сайта через Яндекс и Гугл Вэбмастер (отдельно каждую страницу в Яндексе и отдельно каждую страницу или каталогом в Гугл).
5) Определенные временные промежутки между этими действиями можно не соблюдать (кроме п.3) и можно выполнять их сразу друг за другом последовательно.
Ответить
Маргарита, слишком мудрено у Вас получается 🙂
Поступите следующим образом:
1) Удалить все файлы с хостинга, включая robots.txt (соответственно править его не нужно).
2) Отправить запросы на удаление URL в панелях вебмастера. Ждать не нужно, если файлы удалены, то страницы уже отдают 404 ошибку.
В своем первом ответе я учитывал последовательность действий не полного удаления, а, например, части страниц на сайте. При полном можно поступить иначе и намного проще.
Ответить
Денис, огромное спасибо!
Ответить
Денис, сделала, как мы и обсудили: удалила сайт с хостинга, а затем решила удалить URL через панель Вэбмастера в Яндекс и Гугл. Это было неправильно. Яндекс отклонил заявку на удаление URL по причине:
1) в файле robots.txt отсутствует запрет на индексирование
2) При обращении к адресу страницы ответ сервера отличается от 404 Not Found, 403 Forbidden или 410 Gone.
А в Гугл оказалось, что удалить URL адреса можно через:
1) файлы robots.txt;
2) метатеги;
3)защита паролем файлов на веб-сервере.
Но на данный момент ни для Яндекса, ни для Гугла я уже не могу внести изменения в robots.txt, т.к. удалила все файлы сайта с хостинга. Вопрос: что делать?
Ответить
Маргарита, а какой ответ сервера при удалении файлов, разве не 404? Может серверный кэш? Попробуйте загрузить роботс с запретом индексации.
Ответить
Ответ — «Не удается получить доступ к сайту». Попробую.
Ответить
Доброе время суток. Подскажите пожалуйста, если у меня есть сайт на котором +/- 4000 страниц товаров и я его хочу разделить на два разных. Половину товара другой категории, хочу с текстами перенести на новый, при этом удалить безопасно их со старого. Прежде всего главное уникальность текстов, так как 2000 и писать очень долго и покупать очень дорого. Чтобы не рисковать, я не хочу пока удалять их со старого, а просто убрать с индексации.
Вопрос заключается в том, не потеряет ли старый сайт свое место в поисковой выдаче? Не отразиться это катастрофически на нем в целом? То, что потеряем посетителей, которые заходили на страницы, что будут удаляться мы естественно понимаем, но боимся чтобы вовсе сайт жестко не просел!!!
Ответить
Евгений, а цель разделения сайта на части? Единственное верное решение — поставить 301 редирект со старых страниц на страницы нового домена.
Ответить
Добрый день. Подскажите, пожалуйста, что следует делать со ссылками на страницы, которых больше нет.
На сайте было 100 страниц, а после переноса и смены структуры сайта стало 20. Лучше сделать редиректы на главную страницу или удалить ссылки из поисковой выдачи?
Заранее спасибо 🙂
Ответить
Елизавета, если оставшиеся страницы релевантны запросам по которым ранжировались удалённые, то конечно лучше поставить редирект на них, а не главную. В противном случае желательно удалить, т.к. редирект на неревантную страницу может привести к увеличению процента отказов.
Ответить