laravel принадлежи на много филтър

Трябва да използвате whereDoesntHave() за да изберете модели, които нямат свързан модел, отговарящ на определени критерии:

$users = User::whereDoesntHave('roles', function($q){
    $q->where('role_id', 5);
})->get();