Solusi (terima kasih atas komentar ini!)
COPY <tablename> FROM <filename> WITH CSV DELIMITER E'\t' QUOTE E'\b' NULL AS '';
Jadi pada dasarnya menentukan karakter kutipan yang tidak boleh ada di teks, tapi itu sangat jelek.
Saya lebih suka jika memang ada cara untuk menonaktifkan pemrosesan kutipan sama sekali.