Airflow жив и здоров: разбор претензий и альтернатив

В последнее время стало модным критиковать Airflow, часто необоснованно. Многие критики основывают свое мнение на опыте работы с устаревшими версиями 1.x, игнорируя существенный прогресс, включая недавние релизы. Давайте разбираться, что там сейчас внутри.

В докладе я хочу:

• Напомнить о преимуществах современного Airflow и продемонстрировать их.
• Развеять распространенные заблуждения, которые постоянно встречаются в обсуждениях этого инструмента.
• Разобрать (снова) типичные сложности, с которыми сталкиваются начинающие пользователи.
• Обсудить сценарии, где действительно стоит рассмотреть альтернативные решения, и почему это может быть или может не быть Dagster.

Airflow остается мощным инструментом для правильных задач, а если вы не согласны, присоединяйтесь к докладу — обсудим!