Apache AirFlow

Что такое AirFlow

Apache AirFlow — это инструмент, который позволяет разрабатывать, планировать и осуществлять мониторинг сложных рабочих процессов. Главной особенностью является то, что для описания процессов используется язык программирования Python. Apache Airflow используется как планировщик ETL/ELT-процессов.

Основные сущности рабочего процесса на Apache Airflow:

  • Направленные ациклические графы (DAG)
  • Планировщик (Scheduler)
  • Операторы (Operators)
  • Задачи (Tasks)

DAG узнать на курсах по Apache AirFlow в Школе Больших Данных г. Москва


AIRF: Apache AirFlow

Что такое AirFlow?

Related Entries