Само 1 минута след като зададох въпроса си намерих отговора. В случая за подреждане по клауза, за да направите нулите да имат по-висока стойност от всичко друго:
ORDER BY (CASE WHEN districts.id IS NULL then 1 ELSE 0 END),districts.name, schools.name;