Akhirnya ketahuan masalahnya. Menentukan host dan port dalam file pengaturan proyek Django saya menyelesaikan masalah!
DATABASES = {
'default': {
'ENGINE' : 'django.db.backends.postgresql_psycopg2',
'NAME' : 'project_ci_test',
'USER' : 'postgres',
'PASSWORD': '',
'HOST' : 'postgres'
'PORT' : '5432'
}
}