Ошибка в файле robots.txt продолжает накапливаться, даже если она исправлена

Question

Кто-то испортил наш robots.txt, случайно добавив \n после всего нашего allow: /products/ которые в общей сложности около 30000 страниц. Ошибки на нескольких языковых сайтах. Это одна из наших поисковых консолей.

Я быстро заметил ошибку и удалил ее. Я попросил Google проверить мое решение, но примерно через 3 месяца ошибки все еще увеличиваются. Смотрите изображения ниже:

Что я могу сделать, чтобы ускорить процесс? Я начал проверку.

Answer 1

Ваш robots.txt недоступен. Он перенаправлен на 301 https://www.unisgroup.nl/robots.txt/, который является каталогом, а не файлом - вы видите косую черту? Google ищет файл, не находит его и уходит.