lambda docker base - unable to install matplotlib

Question

lambda docker base - unable to install matplotlib

I'm using docker-backed lambdas with the AWS-provided base image for python3.8

It looks like it tries to build matplotlib from scratch then fails out with gcc related errors.

The repro is straightforward, just try to build the following Dockerfile:

      FROM amazon/aws-lambda-python:3.8
RUN yum -y install gcc
RUN pip3 install --upgrade pip
RUN pip3 install matplotlib

error:

      #7 13.82     set build/lib.linux-x86_64-3.8/matplotlib/_version.py to '3.4.3'
#7 13.82     running build_ext
#7 13.82     creating tmp
#7 13.82     gcc -pthread -Wno-unused-result -Wsign-compare -DNDEBUG -g -fwrapv -O3 -Wall -fPIC -I/var/lang/include/python3.8 -c /tmp/tmpjr1hj4f1.cpp -o tmp/tmpjr1hj4f1.o -fvisibility=hidden
#7 13.82     gcc: error trying to exec 'cc1plus': execvp: No such file or directory
#7 13.82     gcc -pthread -Wno-unused-result -Wsign-compare -DNDEBUG -g -fwrapv -O3 -Wall -fPIC -I/var/lang/include/python3.8 -c /tmp/tmp74f416b5.cpp -o tmp/tmp74f416b5.o -fvisibility-inlines-hidden
#7 13.82     gcc: error trying to exec 'cc1plus': execvp: No such file or directory
#7 13.82     gcc -pthread -Wno-unused-result -Wsign-compare -DNDEBUG -g -fwrapv -O3 -Wall -fPIC -I/var/lang/include/python3.8 -c /tmp/tmp19pyjmxw.cpp -o tmp/tmp19pyjmxw.o -flto
#7 13.82     gcc: error trying to exec 'cc1plus': execvp: No such file or directory
#7 13.82     Extracting /project/freetype/freetype2/2.6.1/freetype-2.6.1.tar.gz
#7 13.82     Building freetype in build/freetype-2.6.1
#7 13.82     GNU make (>= 3.80) or makepp (>= 1.19) is required to build FreeType2.
#7 13.82     Please try
#7 13.82     
#7 13.82       MAKE=<GNU make command name> ./configure
#7 13.82     
#7 13.82     or
#7 13.82     
#7 13.82       MAKE="makepp --norc-substitution" ./configure
#7 13.82     Traceback (most recent call last):
#7 13.82       File "<string>", line 1, in <module>
#7 13.82       File "/tmp/pip-install-v3njpp10/matplotlib_5bf0432199ce40b5a487eafc6a513cc3/setup.py", line 258, in <module>
#7 13.82         setup(  # Finally, pass this all along to distutils to do the heavy lifting.
#7 13.82       File "/var/lang/lib/python3.8/site-packages/setuptools/__init__.py", line 153, in setup
#7 13.82         return distutils.core.setup(**attrs)
#7 13.82       File "/var/lang/lib/python3.8/distutils/core.py", line 148, in setup
#7 13.82         dist.run_commands()
#7 13.82       File "/var/lang/lib/python3.8/distutils/dist.py", line 966, in run_commands
#7 13.82         self.run_command(cmd)
#7 13.82       File "/var/lang/lib/python3.8/distutils/dist.py", line 985, in run_command
#7 13.82         cmd_obj.run()
#7 13.82       File "/var/lang/lib/python3.8/site-packages/setuptools/command/install.py", line 61, in run
#7 13.82         return orig.install.run(self)
#7 13.82       File "/var/lang/lib/python3.8/distutils/command/install.py", line 545, in run
#7 13.82         self.run_command('build')
#7 13.82       File "/var/lang/lib/python3.8/distutils/cmd.py", line 313, in run_command
#7 13.82         self.distribution.run_command(command)
#7 13.82       File "/var/lang/lib/python3.8/distutils/dist.py", line 985, in run_command
#7 13.82         cmd_obj.run()
#7 13.82       File "/var/lang/lib/python3.8/distutils/command/build.py", line 135, in run
#7 13.82         self.run_command(cmd_name)
#7 13.82       File "/var/lang/lib/python3.8/distutils/cmd.py", line 313, in run_command
#7 13.82         self.distribution.run_command(command)
#7 13.82       File "/var/lang/lib/python3.8/distutils/dist.py", line 985, in run_command
#7 13.82         cmd_obj.run()
#7 13.82       File "/var/lang/lib/python3.8/site-packages/setuptools/command/build_ext.py", line 79, in run
#7 13.82         _build_ext.run(self)
#7 13.82       File "/var/lang/lib/python3.8/distutils/command/build_ext.py", line 340, in run
#7 13.82         self.build_extensions()
#7 13.82       File "/tmp/pip-install-v3njpp10/matplotlib_5bf0432199ce40b5a487eafc6a513cc3/setup.py", line 199, in build_extensions
#7 13.82         package.do_custom_build(env)
#7 13.82       File "/tmp/pip-install-v3njpp10/matplotlib_5bf0432199ce40b5a487eafc6a513cc3/setupext.py", line 596, in do_custom_build
#7 13.82         subprocess.check_call(
#7 13.82       File "/var/lang/lib/python3.8/subprocess.py", line 364, in check_call
#7 13.82         raise CalledProcessError(retcode, cmd)
#7 13.82     subprocess.CalledProcessError: Command '['./configure', '--with-zlib=no', '--with-bzip2=no', '--with-png=no', '--with-harfbuzz=no', '--enable-static', '--disable-shared']' returned non-zero exit status 1.
#7 13.82     ----------------------------------------
#7 13.83 ERROR: Command errored out with exit status 1: /var/lang/bin/python3.8 -u -c 'import io, os, sys, setuptools, tokenize; sys.argv[0] = '"'"'/tmp/pip-install-v3njpp10/matplotlib_5bf0432199ce40b5a487eafc6a513cc3/setup.py'"'"'; __file__='"'"'/tmp/pip-install-v3njpp10/matplotlib_5bf0432199ce40b5a487eafc6a513cc3/setup.py'"'"';f = getattr(tokenize, '"'"'open'"'"', open)(__file__) if os.path.exists(__file__) else io.StringIO('"'"'from setuptools import setup; setup()'"'"');code = f.read().replace('"'"'\r\n'"'"', '"'"'\n'"'"');f.close();exec(compile(code, __file__, '"'"'exec'"'"'))' install --record /tmp/pip-record-vdv6xdpv/install-record.txt --single-version-externally-managed --compile --install-headers /var/lang/include/python3.8/matplotlib Check the logs for full command output.

1

docker matplotlib gcc aws-lambda aws-lambda-containers

Источник

user1618292 13 авг '21 в 08:36

6 ответов

Другие вопросы по тегам docker matplotlib gcc aws-lambda aws-lambda-containers

user907480 13 авг '21 в 11:46 2021-08-13 11:46 · Answer 1 · 2021-08-13 11:46

It seems like you're getting an error because of missing binaries that are needed to compile matplotlib.

Can you try to install the additional g++ package? It is usualy named gcc-c++ with the yum installer so:

      FROM amazon/aws-lambda-python:3.8
RUN yum -y install gcc gcc-c++
RUN pip3 install --upgrade pip
RUN pip3 install matplotlib

2

Источник

user907480 13 авг '21 в 11:46

user15275205 08 сен '21 в 21:00 2021-09-08 21:00 · Answer 2 · 2021-09-08 21:00

У меня была такая же проблема, и я пытался установить matplotlib в контейнере докеров, используя альпийский образ. Для меня исправление было таким же, как и для @alex9311, но, поскольку я использую сборку docker alpine, я добавил в свой образ следующую строку:

RUN apk update && apk add --no-cache build-base

Надеюсь, это поможет. Добавляю его только как ответ, чтобы не упустить из виду, когда это может помочь.

user9451634 13 авг '21 в 23:50 2021-08-13 23:50 · Answer 3 · 2021-08-13 23:50

Я сталкиваюсь с той же проблемой, и я думаю, что это ошибка matplotlib. Они выпустили новую версию (3.4.3) 17 часов назад на момент написания этой статьи. Для меня установка версии на предыдущий минорный выпуск, т.е. matplotlib==3.4.2 исправляет это.

До сегодняшнего дня не было проблем с развертыванием лямбда-выражения, и в моем коде ничего не изменилось, поэтому я думаю, что это что-то в новом выпуске, хотя я не знаю, что именно.

user1618292 13 авг '21 в 20:22 2021-08-13 20:22 · Answer 4 · 2021-08-13 20:22

исправление заключалось в том, чтобы добавить инструменты компилятора в образ докера перед попыткой скомпилировать matplotlib. Я до сих пор не знаю, почему у меня это начало давать сбой, возможно, базовый образ был обновлен.

      RUN yum -y groups mark install "Development Tools" && yum -y groups mark convert "Development Tools" && yum -y group install "Development Tools"

user2485573 23 ноя '21 в 17:30 2021-11-23 17:30 · Answer 5 · 2021-11-23 17:30

Я смог решить проблему, установив «make». В журналах ошибок, размещенных в вопросе, есть утверждение

      GNU make (>= 3.80) or makepp (>= 1.19) is required to build FreeType2.

Это причина сбоя установки matplotlib. Причина ошибки в том, что в образе докера отсутствует установка GNU make. Принятый ответ устанавливает все пакеты в группе «Средства разработки» (включая make), что не является необходимым. Это увеличит размер образа докера, чего можно избежать, установив только «make».

      FROM amazon/aws-lambda-python:3.8
RUN yum -y install gcc gcc-c++ make
RUN pip3 install --upgrade pip
RUN pip3 install matplotlib

Установка matplotlib прошла успешно при установке make перед установкой matplotlib

tweak 23 ноя '22 в 12:33 2022-11-23 12:33 · Answer 6 · 2022-11-23 12:33

Изменение версии, предложенное Даниэлем, также сработало для меня.matplotlib==3.5.1в моем случае сработало.

0

Источник

tweak 23 ноя '22 в 12:33