Почему вы не позволяете Google индексировать страницы на вашем сайте?
Я прочитал несколько статей о том, как остановить индексирование, но мне не ясно, ПОЧЕМУ вы на самом деле хотите это сделать.
1) объяснение почему я нашел:
"Для маркетологов одной из распространенных причин является предотвращение индексации дублированного контента (если в поисковых системах проиндексировано более одной версии страницы, например, в версии для вашего принтера).
Еще один хороший пример? Страница благодарности (то есть страница, на которую попадает посетитель после конвертации на одну из ваших целевых страниц). Обычно в этом случае посетитель получает доступ к любому предложению, которое обещала целевая страница, например, к ссылке на PDF-файл электронной книги." [По сути, вы не хотите, чтобы пользователь находил вашу страницу" Спасибо "с помощью бесплатных объявлений при поиске без регистрации]
Тем не менее, в обоих этих случаях на самом деле кажется плохой идеей предотвратить индексирование? Вы бы предпочли просто перенаправить на страницу входа (во втором примере) после того, как ваш пользователь нашел вас? По крайней мере, пользователь сможет добраться до вашего сайта.
2) Также упоминается, что индексирование не совпадает с отображением в результатах поиска Google, но не совсем понятно, в чем разница. Может ли кто-нибудь просветить?
ТИА.
1 ответ
Позвольте мне привести несколько веских причин из моего опыта, хотя я полагаю, что существует гораздо больше
Традиционно известной основной причиной является экономия вычислительных ресурсов. Представьте себе поисковик - вероятно, он не хотел бы, чтобы другой поисковик индексировал все его результаты.
Большая часть этого состоит в том, чтобы предотвратить растрату ресурсов. Представьте, что поисковая система будет индексировать себя, что может занять некоторое время. Это также относится к двоичным данным, у которых нет текста.
Ваш пример несколько попадает в эту категорию
"Для маркетологов одной из распространенных причин является предотвращение индексации дублированного контента (если в поисковых системах проиндексировано более одной версии страницы, например, в версии для вашего принтера).
Но это больше не считается уважительной причиной, так как потребление ресурсов, как правило, низкое, и правильное устранение неоднозначности должно выполняться с помощью метаданных html, таких как
<link rel='canonical' href='<permanent link>' ...>
<link rel='alternate' media='printed' ...>
Еще одна важная причина предотвращения индексации - это конфиденциальность. Например, профили в Facebook не индексируются, если владелец выбирает это.
Еще один хороший пример? Страница благодарности (то есть страница, на которую попадает посетитель после конвертации на одну из ваших целевых страниц). Обычно в этом случае посетитель получает доступ к любому предложению, которое обещала целевая страница, например, к ссылке на PDF-файл электронной книги." [По сути, вы не хотите, чтобы пользователь находил вашу страницу" Спасибо "с помощью бесплатных объявлений при поиске без регистрации]
Это относится к категории конфиденциальности. Более того, поисковая система однажды проиндексировала набор этих страниц "спасибо" с веб-сайта оператора мобильной связи, который также включал отправленное сообщение.
Одна наблюдаемая причина - общая паранойя новичка. Это плохая причина, потому что решение паранойи было бы намного лучше реализовано с HTTP-аутентификацией.