Saya mengalami masalah ini dengan wadah debian. Yang diperbaiki adalah menginstal setiap paket dengan perintah terpisah. Jadi, alih-alih
RUN apt-get install -y python-pip libmysqlclient-dev
lakukan
RUN apt-get install -y python-pip
RUN apt-get install -y libmysqlclient-dev