За справка, започвайки с Django 2.0 е възможно да използвате Window
функция за постигане на този резултат:
AModel.objects.annotate(cumsum=Window(Sum('a_number'), order_by=F('id').asc()))\
.values('id', 'cumsum').order_by('id', 'cumsum')