Airflow запускает DAGs, но не является инструментом обработки, то бишь Airflow = оркестратор, а NiFi - это ETL\ELT инструмент для обработки. Оба от апачи
@@PolOSullivan Ну просто нам как-то всегда NiFi хватало, по встроенному крону запускали ETL, он вроде тоже как DAG сам по себе. Просто интересно услышать кейс когда Nifi не хватает.
а зачем там MongoDB, когда можно сразу лить данные в кафку?
А зачем еще Airflow, если есть Nifi?
Airflow запускает DAGs, но не является инструментом обработки, то бишь Airflow = оркестратор, а NiFi - это ETL\ELT инструмент для обработки. Оба от апачи
@@PolOSullivan Ну просто нам как-то всегда NiFi хватало, по встроенному крону запускали ETL, он вроде тоже как DAG сам по себе. Просто интересно услышать кейс когда Nifi не хватает.