Membaca https://hub.docker.com/_/postgres/, bagian 'Perpanjang gambar ini' menjelaskan bahwa semua .sql di /docker-entrypoint-initdb.d akan dieksekusi setelah pembuatan.
Saya hanya perlu mengubah Dockerfile.db saya menjadi:
FROM postgres
ADD ./devops/db/dummy_dump.sql /docker-entrypoint-initdb.d
Dan itu berhasil!