Istilah yang Anda cari adalah "pagination". Sayangnya, ini dilakukan secara berbeda tergantung pada mesin SQL.
Untuk MS SQL Server, lihat Pertanyaan Stack Overflow .
Karena Anda menyebutkan MySQL, sebenarnya cukup sederhana:
SELECT [columns] FROM [a table] LIMIT 10000
SELECT [columns] FROM [a table] LIMIT 10000 OFFSET 10000
Pernyataan pertama mengambil hasil 1-10.000, dan pernyataan kedua mengambil hasil 10.0001-20.000.