Как определить, какие страницы не проиндексированы

Есть ли способ определить, какие страницы сайта не индексируются поисковыми системами?

Я знаю, что у Google Webmasters есть область карты сайта, в которой сообщается, сколько URL-адресов было отправлено и сколько из них проиндексировано. Однако, это не обязательно показывает, какие URL не индексируются.

Даже я не уверен, что пометить

2 ответа

Хорошие новости! Это просто. Или, скорее, легко увидеть, какие страницы проиндексированы. Смотрите обсуждение этого в Google.

Это так же просто, как зайти в свой браузер и набрать "site:www.yoursite.com". Вот и все. Все, что они проиндексировали, будет перечислено.

Google знает только те URL, которые проиндексированы / просканированы.

  • URL, который не связан / не отображается даже на одной веб-странице, сканироваться не будет.
  • URL, заблокированный Robots.txt, сканироваться не будет.
  • Если вы удалили какие-либо URL-адреса в инструментах для веб-мастеров, они не будут сканироваться.

Не существует какого-либо известного способа точно узнать, какие URL-адреса не индексируются Google, однако мы можем принять список URL-адресов, используя приведенные выше правила.

Другие вопросы по тегам