`/bin/sh` не найден в tox внутри Jenkins внутри докера

Question

Я пытаюсь настроить конвейер Jenkins, который работает tox внутри докера Существует известная проблема, заключающаяся в том, что линии Шебанга становятся очень длинными внутри Дженкинса, и предлагаются два решения. Первый заключается в использовании --workdir выбрать более короткий путь. Эта опция в принципе работает, но я теряю автоматические уникальные имена путей для проекта от Jenkins. Поэтому я предпочел бы использовать второй вариант, TOX_LIMITED_SHEBANG, К сожалению, это может произойти из-за следующей ошибки, когда предполагается установить тестируемый пакет: FileNotFoundError: [Errno 2] No such file or directory: "b'/bin/sh'": "b'/bin/sh'", Я подтвердил, что /bin/sh фактически доступен в док-контейнере. Дженкинсфайл выглядит следующим образом:

node("docker") {
    // burnpanck/tox-base contains tox and many python versions
    docker.image('burnpanck/tox-base').inside {
        checkout scm
        stage('Matrix-test using Tox') {
            // verify that /bin/sh exists
            sh 'ls -al /bin'
            // the following does not work
            sh 'TOX_LIMITED_SHEBANG=1 tox -vv'
            // the following works 
            // sh 'tox --workdir=/var/jenkins_home/tox'
        }
    }
}

Tox является версией 3.1.2 и работает под python 3.6 (образ docker генерируется из этого Dockerfile). Что меня немного удивляет, так это "b'/bin/sh'" str-ин bytes пример. Может быть, токсин пытается запустить программу по имени sh' в пути b'/bin?

tox.ini в использовании просто звонки pytest:

[tox]
envlist = py36
[testenv]
recreate = True
commands =
    pytest

Полная обратная трассировка от tox (вывод на консоль Jenkins) выглядит следующим образом:

py36 create: /var/jenkins_home/workspace/_debug_jenkins-long-shebang-L7UHBNCVPSOBSTKZ7COPFJBJLWR5XZXFIAD7TBGC4WQLVDLZYVQQ/.tox/py36
py36 inst: /var/jenkins_home/workspace/_debug_jenkins-long-shebang-L7UHBNCVPSOBSTKZ7COPFJBJLWR5XZXFIAD7TBGC4WQLVDLZYVQQ/.tox/dist/test_model-0.dev20180717.zip
ERROR: invocation failed (errno 2), args: [b'/bin/sh', '/var/jenkins_home/workspace/_debug_jenkins-long-shebang-L7UHBNCVPSOBSTKZ7COPFJBJLWR5XZXFIAD7TBGC4WQLVDLZYVQQ/.tox/py36/bin/pip', 'install', '/var/jenkins_home/workspace/_debug_jenkins-long-shebang-L7UHBNCVPSOBSTKZ7COPFJBJLWR5XZXFIAD7TBGC4WQLVDLZYVQQ/.tox/dist/test_model-0.dev20180717.zip'], cwd: /var/jenkins_home/workspace/_debug_jenkins-long-shebang-L7UHBNCVPSOBSTKZ7COPFJBJLWR5XZXFIAD7TBGC4WQLVDLZYVQQ
Traceback (most recent call last):
  File "/.pyenv/versions/3.6.6/bin/tox", line 11, in <module>
    sys.exit(cmdline())
  File "/.pyenv/versions/3.6.6/lib/python3.6/site-packages/tox/session.py", line 39, in cmdline
    main(args)
  File "/.pyenv/versions/3.6.6/lib/python3.6/site-packages/tox/session.py", line 45, in main
    retcode = Session(config).runcommand()
  File "/.pyenv/versions/3.6.6/lib/python3.6/site-packages/tox/session.py", line 422, in runcommand
    return self.subcommand_test()
  File "/.pyenv/versions/3.6.6/lib/python3.6/site-packages/tox/session.py", line 620, in subcommand_test
    self.installpkg(venv, path)
  File "/.pyenv/versions/3.6.6/lib/python3.6/site-packages/tox/session.py", line 561, in installpkg
    venv.installpkg(path, action)
  File "/.pyenv/versions/3.6.6/lib/python3.6/site-packages/tox/venv.py", line 277, in installpkg
    self._install([sdistpath], extraopts=extraopts, action=action)
  File "/.pyenv/versions/3.6.6/lib/python3.6/site-packages/tox/venv.py", line 342, in _install
    self.run_install_command(packages=packages, options=options, action=action)
  File "/.pyenv/versions/3.6.6/lib/python3.6/site-packages/tox/venv.py", line 314, in run_install_command
    redirect=self.session.report.verbosity < 2,
  File "/.pyenv/versions/3.6.6/lib/python3.6/site-packages/tox/venv.py", line 427, in _pcall
    return action.popen(args, cwd=cwd, env=env, redirect=redirect, ignore_ret=ignore_ret)
  File "/.pyenv/versions/3.6.6/lib/python3.6/site-packages/tox/session.py", line 153, in popen
    popen = self._popen(args, cwd, env=env, stdout=stdout, stderr=subprocess.STDOUT)
  File "/.pyenv/versions/3.6.6/lib/python3.6/site-packages/tox/session.py", line 248, in _popen
    env=env,
  File "/.pyenv/versions/3.6.6/lib/python3.6/subprocess.py", line 709, in __init__
    restore_signals, start_new_session)
  File "/.pyenv/versions/3.6.6/lib/python3.6/subprocess.py", line 1344, in _execute_child
    raise child_exception_type(errno_num, err_msg, err_filename)
FileNotFoundError: [Errno 2] No such file or directory: "b'/bin/sh'": "b'/bin/sh'"

Answer 1

В настоящее время у нас есть открытая ошибка для этого. TOX_LIMITED_SHEBANG сломан, когда tox работает под python3.

Коренная причина в том, что есть .decode() отсутствует и список заканчивается смешанным bytes а также str экземпляров.

Обходные пути, пока я не исправлю это, должны использовать tox с интерпретатором python2 или не использовать TOX_LIMITED_SHEBANG,