Как определить, какие страницы не проиндексированы
Есть ли способ определить, какие страницы сайта не индексируются поисковыми системами?
Я знаю, что у Google Webmasters есть область карты сайта, в которой сообщается, сколько URL-адресов было отправлено и сколько из них проиндексировано. Однако, это не обязательно показывает, какие URL не индексируются.
Даже я не уверен, что пометить
2 ответа
Хорошие новости! Это просто. Или, скорее, легко увидеть, какие страницы проиндексированы. Смотрите обсуждение этого в Google.
Это так же просто, как зайти в свой браузер и набрать "site:www.yoursite.com". Вот и все. Все, что они проиндексировали, будет перечислено.
Google знает только те URL, которые проиндексированы / просканированы.
- URL, который не связан / не отображается даже на одной веб-странице, сканироваться не будет.
- URL, заблокированный Robots.txt, сканироваться не будет.
- Если вы удалили какие-либо URL-адреса в инструментах для веб-мастеров, они не будут сканироваться.
Не существует какого-либо известного способа точно узнать, какие URL-адреса не индексируются Google, однако мы можем принять список URL-адресов, используя приведенные выше правила.