Найден следующий костыль:
$query = App\Clients::select(\DB::raw('clients.*'))
->with(['manager', 'account', 'type', 'contacts', 'orders', 'ordersActive'])
->leftJoin('orders', 'orders.client_id', '=', 'clients.id')
->orderBy('orders.created_at', 'asc');