Вземете брой елементи и техните стойности в една колона

Можете да изберете всеки елемент от Items и LEFT JOIN MyTbl на общия ItemID , преброяване на съвпаденията;

select 
   Items.itemId,
   count(MyTbl.itemId) as count
from Items
   left join MyTbl on (MyTbl.ItemID = Items.ItemID)
group by Items.itemId
order by Items.itemId