Установите зависимости пакета с помощью setup.py и дисков

Мы используем сервер PyPI с внутренним размещением (devpi-server), чтобы мы могли размещать двоичные диски огромных пакетов, для установки из которых потребовалось много времени, таких как scipy, matplotlib и т. д. Установка этих пакетов с помощью pip install scipy работает отлично и определенно использует колесо, которое мы создали. Тем не менее, работа с любым из наших внутренних пакетов Python, которые зависят от одного из этих пакетов и работает python setup.py install|develop|test|whatever приводит к следующей ошибке:

No local packages or download links found for scipy
Traceback (most recent call last):
  File "setup.py", line 136, in <module>
    'develop': DevelopCommand
  File "/usr/local/lib/python2.7/distutils/core.py", line 112, in setup
    _setup_distribution = dist = klass(attrs)
  File "/users/me/virtualenvs/devpi-test/lib/python2.7/site-packages/setuptools/dist.py", line 239, in __init__
    self.fetch_build_eggs(attrs.pop('setup_requires'))
  File "/users/me/virtualenvs/devpi-test/lib/python2.7/site-packages/setuptools/dist.py", line 263, in fetch_build_eggs
    parse_requirements(requires), installer=self.fetch_build_egg
  File "/users/me/virtualenvs/devpi-test/lib/python2.7/site-packages/pkg_resources.py", line 564, in resolve
    dist = best[req.key] = env.best_match(req, self, installer)
  File "/users/me/virtualenvs/devpi-test/lib/python2.7/site-packages/pkg_resources.py", line 802, in best_match
    return self.obtain(req, installer) # try and download/install
  File "/users/me/virtualenvs/devpi-test/lib/python2.7/site-packages/pkg_resources.py", line 814, in obtain
    return installer(requirement)
  File "/users/me/virtualenvs/devpi-test/lib/python2.7/site-packages/setuptools/dist.py", line 313, in fetch_build_egg
    return cmd.easy_install(req)
  File "/users/me/virtualenvs/devpi-test/lib/python2.7/site-packages/setuptools/command/easy_install.py", line 587, in easy_install
    raise DistutilsError(msg)
distutils.errors.DistutilsError: Could not find suitable distribution for Requirement.parse('scipy')

И с easy_install:

$ easy_install scipy
Searching for scipy
Reading http://pypi.internal.example.com/us/base/+simple/scipy/
No local packages or download links found for scipy
error: Could not find suitable distribution for Requirement.parse('scipy')

Если я возьму URL, на который он смотрит, я получу:

$ curl http://pypi.internal.example.com/us/base/+simple/scipy/
<html>
  <head>
    <title>us/base: links for scipy</title></head>
  <body>
    <h1>us/base: links for scipy</h1>

    <form action="http://pypi.internal.example.com/us/base/+simple/scipy/refresh" method="post"><input name="refresh" type="submit" value="Refresh PyPI links"/></form>
us/external <a href="../../../external/+f/c48/5006bc28a8607/scipy-0.14.0-cp27-none-linux_x86_64.whl#md5=c485006bc28a8607b2fc1331df452dc1">scipy-0.14.0-cp27-none-linux_x86_64.whl</a><br/>
</body></html>

Если я запрашиваю URL, указанный в этом выводе, я получаю колесо:

$ curl --silent 'http://pypi.internal.example.com/us/external/+f/c48/5006bc28a8607/scipy-0.14.0-cp27-none-linux_x86_64.whl#md5=c485006bc28a8607b2fc1331df452dc1' \
      | file -
/dev/stdin: Zip archive data, at least v2.0 to extract
Источник

1 ответ

Решение

Прежде всего, проблема, описанная в вопросе, не зависит от использования devpi и может быть воспроизведен на любом сервере PyPI, включая основной репозиторий на https://pypi.org/. Пример:

# setup.py
from setuptools import setup

setup(name='spam', install_requires=['vprof>0.37'])

(Вместо vprof, вы можете взять любой другой пакет, который не доставляет ничего, кроме колес)

Попробуй это:

$ pip install --upgrade "setuptools<38.2.0"
...
Successfully installed setuptools-38.1.0

$ python setup.py install
running install
running bdist_egg
running egg_info
writing spam.egg-info/PKG-INFO
...
Processing dependencies for spam==0.0.0
Searching for vprof>0.37
Reading https://pypi.python.org/simple/vprof/
No local packages or working download links found for vprof>0.37
error: Could not find suitable distribution for 
Requirement.parse('vprof>0.37')

Взрыва. Ситуация ухудшается, когда вы объявляете бинарный пакет как зависимость для сборки:

setup(name='spam', setup_requires=['vprof>0.37'])

Теперь все команды сборки и упаковки также не будут работать, так как они не смогут загрузить сборки.

Вопрос зависит исключительно от setuptools версия используется. С 26 ноября 2017 года и версия 38.2.0, setuptools поддерживает выборку и установку зависимостей колес, поэтому, если проблема все еще возникает:

Обновить setuptools

Более новые выпуски ОС должны уже поставлять последнюю версию setuptools, Например, Ubuntu 18.04 имеет setuptools==39.0.1 по умолчанию ( ссылка). Если у вас еще есть старый setuptools установлен, большую часть времени он будет управляться системным менеджером пакетов, поэтому не следует обновлять его через pip, Вы можете установить дополнительную копию пользователя setuptools

$ pip install --user --upgrade "setuptools>=38.2.0"

или использовать виртуальные среды в этом отношении.

Источник
Другие вопросы по тегам