Apache Airflow

Apache Airflow

Airflow adalah platform untuk penulis pengaturcaraan, jadual dan memantau saluran data.
Airflow adalah platform untuk penulis pengaturcaraan, jadual dan memantau saluran data.Gunakan aliran udara untuk aliran kerja pengarang seperti graf akiklik yang diarahkan (DAGs) tugas.Penjadual aliran udara melaksanakan tugas anda pada pelbagai pekerja semasa mengikuti ketergantungan yang ditentukan.Utiliti talian arahan yang kaya menjadikan pembedahan kompleks pada DAGs sebagai snap.Antara muka pengguna yang kaya menjadikannya mudah untuk memvisualisasikan saluran paip yang berjalan dalam pengeluaran, memantau kemajuan dan menyelesaikan isu-isu apabila diperlukan .... Prinsip Dinamik: Aliran paip aliran udara adalah konfigurasi sebagai kod (Python), yang membolehkan penjanaan saluran paip dinamik.Ini membolehkan kod writ yang menegaskan saluran paip secara dinamik.Extensible: Mudah didefinisikan operator, pelaksana dan memperluas pustaka anda supaya sesuai dengan tahap abstraksi yang sesuai dengan persekitaran anda.Elegant: Jalur aliran udara bersandar dan jelas.Parameterizing skrip anda dibina di teras Airflow menggunakan enjin tempur Jinja yang kuat.Scalable: Aliran udara mempunyai seni bina modular dan menggunakan antrian mesej untuk bercakap untuk mengkoordinasikan bilangan pekerja sewenang-wenangnya.Aliran udara bersedia untuk skala ke tak terhingga.
apache-airflow

Alternatif untuk Apache Airflow untuk Self-Hosted dengan lesen komersil