1
Airflow / Коннекторы / ETL
1. Какие практики вы применяли при разработке дагов, чтобы они были удобны в эксплуатации и безопасны при повторных запусках?
2. Как вы изолировали параллельную работу тасков, чтобы избежать конфликтов при обращении к одним и тем же таблицам/участкам данных?
3. Какие механизмы транзакционности между тасками вы использовали или планировали использовать?
4. Как вы реализовывали закрытие сессий и обработку сетевых ошибок в коннекторах/тасках?
5. Какие метрики Airflow вы считаете наиболее полезными для мониторинга (таски, задержки дагов, задержки и т.д.)?
6. Какие инструменты и способы вы использовали для сбора и анализа метрик Airflow (UI, скрипты, логирование в…