Този въпрос е по-скоро за настройване на вашата математическа формула, отколкото за всичко друго.
Изглежда, че това, което искате, е популярност, а не рейтинг. Един прост начин да направите това може да бъде да умножите средния рейтинг по броя на гласовете. Какво ще кажете за това (моля, извинете ме, ако синтаксисът ми е изключен, в момента съм далеч от SQL сървър):
select From_ID, AVG(Rating) * COUNT(Rating) AS Rating FROM Ratings Group BY
Fruit_IDORDER by Rating DESC
Имайте предвид, че тази формула би оценила 1000 гласа от 1 много по-високо от 1 гласа от 5.