Google индексирует тестовую страницу Apache

Question

Допустим, у меня есть сайт, example.com, Но содержимое этого сайта находится на другом домене, скажем test.com/test и перенаправления происходят с помощью htaccess файлы.

Я настроил 301 redirection для перенаправления с test.com/test в example.com, Вопрос в том, когда я ищу example.com, Я получаю страницу тестирования Apache, и когда я запрашиваю как сайт: example.com для получения страницы для сканирования Google, я получаю 403 Forbidden ошибка.

Как я могу исправить эту проблему? Сайт работает нормально. Этот сайт также корректно индексируется в других поисковых системах (а именно в Yahoo и Bing).

Answer 1

Вы можете использовать это для блокировки индексации Google этой страницы:

User-Agent: Googlebot
Disallow: /

Или для всех поисковых систем, таким образом:

User-Agent: *
Disallow: /

Имейте в виду, что он пропустит весь домен. Если у него есть конкретное имя страницы, скажем index.htmВы можете использовать это следующим образом:

User-Agent: *
Disallow: /index.htm

Answer 2

Можно ли достичь тестовой страницы? Получаете ли вы тестовую страницу, если нажимаете на ссылку в Google?

Если это так, вы все равно должны изменить этот URL, чтобы он перенаправлял.

Если нет, Google, вероятно, проиндексировал его до того, как вы сделали редирект. Просто подождите, пока Google не переиндексирует ваш сайт. Это может занять от нескольких часов до нескольких дней или недель, в зависимости от объема трафика на ваш сайт, рейтинга, частоты предыдущих обновлений, положения луны, скорости ветра и всех других переменных, которые Google использует для своего алгоритма.:-/