noindex, noarchive для мертвых веб-страниц? что вы считаете правильным?

Я заметил, что значительное количество веб-приложений, в частности, не очень хорошо справляются с удаленными страницами/учетными записями.

Прежде всего, я заявляю, что придерживаюсь позиции, согласно которой владелец контента всегда владеет контентом и что, если контент удаляется или владелец удаляет учетную запись, провайдер/веб-приложение должны сделать все возможное, чтобы остановить индексирование указанного контента. .

В связи с этим я думаю, что разумной стратегией было бы установить для страниц 404 и страниц-заполнителей значения noindex, nofollow и noarchive в их метатегах.

Итак, пара примеров: Flickr не делает этого при удалении учетной записи, вместо этого он возвращает страницу с сообщением об удалении учетной записи.

www.flickr.com/people/rebelchrome

Friendfeed возвращает 404 без специальных метатегов.

Как вы думаете, что лучше/правильно делать в подобных ситуациях?


web-applications tags metadata
person Community    schedule 05.06.2009    source источник

Ответы (1)


arrow_upward
1
arrow_downward

Код ответа 410 Gone предназначен для мертвые веб-страницы (веб-страницы, которые больше не существуют и для которых нет очевидной альтернативы). Страница по-прежнему может возвращать тело.

Поисковые системы, столкнувшиеся с ответом о статусе 410 Gone, смогут понять, что страница больше не существует, и могут действовать соответствующим образом — для большинства поисковых систем это будет означать просто удаление ее из индекса.

Люди, столкнувшиеся со страницей, увидят только тело страницы. Как и в случае с 404, у вас может быть собственная страница 410, и она может быть похожей — содержать краткое сообщение о том, что страница больше не существует, а также, возможно, мини-карту сайта и окно поиска, позволяющее пользователю найти альтернативный контент на странице. сайт.

Использование инструкций robots, таких как noindex, на самом деле не обязательно, когда страница возвращает ответ 410/404, потому что код ответа говорит сам за себя.

Страница flickr, на которую вы ссылаетесь, имеет сообщение, мини-карту сайта и окно поиска, но, вероятно, должна возвращать ответ с ошибкой 410 или 404, а не ответ 200, как обычно.

person thomasrutter    schedule 05.06.2009