Какие методы и инструменты вы используете для оптимизации сложных SQL-запросов?

Оптимизация SQL-запросов — это комплексный процесс. Вот ключевые методы и инструменты, которые я применяю:

1. Анализ плана выполнения (EXPLAIN) Первый шаг — понять, как СУБД выполняет запрос.

EXPLAIN ANALYZE 
SELECT u.name, o.total 
FROM users u 
JOIN orders o ON u.id = o.user_id 
WHERE u.created_at > '2023-01-01' 
ORDER BY o.total DESC;

Смотрю на: стоимость (cost), тип соединения (JOIN), использование индексов (Index Scan vs. Seq Scan).

2. Эффективное использование индексов

• Создаю индексы для полей в условиях WHERE, JOIN, ORDER BY.
• Использую составные индексы, учитывая порядок колонок.
• Для текстового поиска — GIN/GIST индексы (в PostgreSQL).

  CREATE INDEX idx_orders_user_created ON orders(user_id, created_at DESC);

3. Оптимизация структуры запросов

• Решение проблемы N+1: Заменяю множество запросов одним с JOIN или WHERE IN.
• **Избегаю SELECT ***: Выбираю только необходимые колонки.
• Использую пагинацию: LIMIT/OFFSET для простых случаев, но для больших смещений — ключевую пагинацию (WHERE id > last_id).
• Кэширование: Результаты тяжёлых, но редко меняющихся запросов кэширую на уровне приложения (Redis) или БД.

4. Оптимизация на уровне приложения (Java/Hibernate)

• Batch-обработка: Для массовых вставок/обновлений.

  // Hibernate batch insert
  entityManager.createQuery("INSERT INTO Log (message) SELECT l.message FROM TemporaryLog l")
           .executeUpdate();

• Правильная выборка связей: Использую JOIN FETCH в JPQL или @EntityGraph для eager-загрузки, чтобы избежать лишних запросов.
• Второй уровень кэша Hibernate: Для часто читаемых, редко меняющихся данных.

5. Денормализация В крайних случаях, для критичных по скорости чтения данных, ввожу вычисляемые колонки или дублирую данные, жертвуя нормальной формой.