Memuat 5 juta baris ke dalam Pandas dari MySQL

Cara terbaik memuat semua data dari tabel dari database -any-SQL menjadi panda adalah:

1. Membuang data dari database menggunakan COPY untuk PostgreSQL, PILIH KE OUTFILE untuk MySQL atau yang serupa untuk dialek lain.
2. Membaca file csv dengan panda menggunakan pandas.read_csv fungsi

Gunakan konektor hanya untuk membaca beberapa baris . Kekuatan database SQL adalah kemampuannya untuk mengirimkan potongan kecil data berdasarkan indeks.

Mengirimkan seluruh tabel adalah sesuatu yang Anda lakukan dengan dump.