Laravel Eloquent и N+1: тест выявил недостатки запрета lazy loading
На отдельном стенде Laravel и SQLite разработчик измерил скрытые обращения к базе при загрузке связей. Эксперимент показал, что предварительная выборка помогает не всегда, а встроенная защита от lazy loading пропускает отдельные варианты N+1.
Главное
Типичный источник лишней нагрузки — последовательный обход коллекции, при котором для каждой записи независимо выполняются запросы к автору или комментариям. В разборе показан список из ста постов, обработка которого привела к 201 SQL-запросу. Это цифра конкретного искусственного стенда, а не результат измерений реального интернет-магазина. Она хорошо иллюстрирует, почему небольшой объём данных в тесте иногда скрывает масштаб проблемы на рабочем сайте.
Вместо подгрузки по одной записи Eloquent поддерживает eager loading через with. Но предварительно получать все связанные комментарии, если нужен только счётчик, неразумно: соответствующий агрегат можно рассчитать через withCount. Для ответа на вопрос о наличии подходящей связи предназначен withExists. Оба решения позволяют не переносить в память приложения лишние модели, а передать из базы необходимые вычисленные значения.
Подробности
В опубликованном опыте автор не ограничился просмотром панели SQL-запросов. Слушатель DB::listen фиксирует повторения одинаковых шаблонов, даже когда конкретные параметры различаются, и помогает находить скрытые циклы в коде. Такой контроль уместен в тестовой среде, где можно исследовать сериализаторы, шаблоны и сервисы без дополнительной нагрузки на продуктивную систему. Рядом рассмотрены существующие инструменты отладки Laravel.
Встроенный вызов Model::preventLazyLoading не закрывает проблему полностью. Если разработчик вызывает метод связи и затем выполняет подсчёт через метод отношения comments(), запрос создаётся явно и не воспринимается как нарушение неявной загрузки. На стенде для пятидесяти постов такой приём сформировал 51 обращение к базе без ожидаемого исключения. Тест, который создаёт только один объект, тоже может не показать сбой, поэтому защита без измерения SQL недостаточна.
Что это меняет
Избыточная предварительная загрузка способна привести к другой крайности — большому расходу памяти при извлечении всех связанных объектов. Автор рекомендует соотносить способ получения данных с задачей: для агрегата выбрать вычисление в SQL, для крупных наборов рассмотреть обработку порциями, а для сортировки по полю связи — подходящий подзапрос или соединение. Регрессионные тесты должны проверять поведение при нескольких объектах и отслеживать число запросов, а не только корректность результата.
Первоисточник
Материал подготовлен STRUCTURE по открытой публикации Habr. Текст и иллюстрации первоисточника не воспроизводятся целиком.