Перерыв Scrapy перестал работать

Я пытаюсь развернуть проект scrapy с использованием scrapyd, но он дает мне ошибку...

sudo scrapy deploy default -p eScraper
Building egg of eScraper-1371463750
'build/scripts-2.7' does not exist -- can't clean it
zip_safe flag not set; analyzing archive contents...
eScraperInterface.settings: module references __file__
eScraper.settings: module references __file__
Deploying eScraper-1371463750 to http://localhost:6800/addversion.json
Server response (200):
Traceback (most recent call last):
  File "/usr/local/lib/python2.7/dist-packages/scrapyd/webservice.py", line 18, in render
    return JsonResource.render(self, txrequest)
  File "/usr/local/lib/python2.7/dist-packages/scrapy/utils/txweb.py", line 10, in render
    r = resource.Resource.render(self, txrequest)
  File "/usr/local/lib/python2.7/dist-packages/twisted/web/resource.py", line 250, in render
    return m(request)
  File "/usr/local/lib/python2.7/dist-packages/scrapyd/webservice.py", line 66, in render_POST
    spiders = get_spider_list(project)
  File "/usr/local/lib/python2.7/dist-packages/scrapyd/utils.py", line 65, in get_spider_list
    raise RuntimeError(msg.splitlines()[-1])
RuntimeError: OSError: [Errno 20] Not a directory: '/tmp/eScraper-1371463750-Lm8HLh.egg/images'

Ранее я был в состоянии развернуть проект правильно, но не сейчас..... Но если использовать паук сканирования с помощью scrap crawl spiderName, то проблем нет... кто-нибудь может мне помочь, пожалуйста....

1 ответ

Решение

Попробуйте эти две вещи: 1. Может быть, вы развернули слишком много версий, попробуйте удалить некоторые старые версии 2. Перед развертыванием удалите папку сборки и файл установки

А что касается запуска сканера, если вы запускаете сканер с произвольным именем, которое вы даже не развернули, scrapyd выдаст ответ "ОК" вместе с идентификатором задания.

Другие вопросы по тегам