Просто трябва да се присъедините към таблицата, ако не знаете как да направите това, направете малко проучване за mysql LEFT JOIN и INNER JOIN. В този случай искате да LEFT JOIN, за да можете да включите редове без съответстваща резервация. Не мога да го напиша точно, защото не познавам вашите таблици, но този пример трябва да ви даде представа:
SELECT * FROM chambres c
LEFT JOIN reservation_client rc ON rc.chambre = c.id
WHERE rc.date BETWEEN (your date range)
AND rc.id IS NOT NULL