Ако нямате индекс в полето, по което подреждате, добавете такъв:
"В някои случаи MySQL може да използва индекс, за да удовлетвори клауза ORDER BY, без да прави допълнително сортиране."
Редактиране:(От раздела за оптимизация ORDER BY в документацията на MySQL.)