Зареждане на 5 милиона реда в Pandas от MySQL

Най-добрият начин за зареждане на всички данните от таблица извън -any-SQL база данни в pandas е:

1. Изхвърляне на данните от базата данни чрез COPY за PostgreSQL, ИЗБЕРЕТЕ В ИЗВЪН ФАЙЛ за MySQL или подобен за други диалекти.
2. Четене на csv файла с pandas с помощта на pandas.read_csv функция

Използвайте конектора само за четене на няколко реда . Силата на SQL база данни е способността й да доставя малки парчета данни, базирани на индекси.

Доставянето на цели таблици е нещо, което правите с дъмпове.