Что такое параметр acks в Apache Kafka?

«Что такое параметр acks в Apache Kafka?» — вопрос из категории Брокеры сообщений, который задают на 10% собеседований Java Разработчик. Ниже — развёрнутый ответ с разбором ключевых моментов.

Ответ

acks — это критический параметр конфигурации продюсера Apache Kafka, определяющий уровень гарантии доставки сообщения. Он указывает, сколько подтверждений (acknowledgments) от брокеров-реплик должно быть получено, прежде чем запись будет считаться успешно отправленной.

Возможные значения:

  • acks=0 (No acknowledgment): Продюсер не ждет подтверждения от брокера. Максимальная производительность, но высокий риск потери данных (например, при падении брокера).
  • acks=1 (Leader only): Продюсер ждет подтверждения только от лидера партиции. Баланс между скоростью и надежностью. Риск потери данных остается, если лидер примет запись, но упадет до её репликации на followers.
  • acks=all (или acks=-1): Продюсер ждет подтверждения от всех синхронных реплик (In-Sync Replicas, ISR). Обеспечивает максимальную надежность, но является самым медленным вариантом.

Пример настройки (Java API):

Properties props = new Properties();
props.put("bootstrap.servers", "localhost:9092");
props.put("acks", "all"); // Гарантированная запись во все реплики ISR
props.put("retries", 3); // Автоматические повторные попытки при сбоях
// ... другие настройки

Важные нюансы:

  • При использовании acks=all необходимо также настраивать параметр брокера min.insync.replicas (например, =2). Это определяет минимальное количество реплик ISR, которые должны подтвердить запись. Если доступно меньше реплик, операция записи завершится ошибкой.
  • Выбор значения — это компромисс между надежностью (acks=all) и производительностью/задержкой (acks=1 или 0).