Scrapinghub просканировал 0 страниц (при 0 страницах / мин)
Я разработал простой скрап-проект для сканирования веб-сайта. Сканер отлично работает на моем локальном компьютере, но когда я пытаюсь развернуть его в облаке Scrapy, предоставленном scrapinghub.com, паук показывает 0 просканированных страниц и через 180 секунд (по умолчанию) останавливается. В чем может быть проблема с этим? Я могу попытаться увеличить время ожидания, но я думаю, что 180 секунд. Достаточно долгое время для сканера, чтобы получить ответ от веб-сайта.