Pertanyaan yang diberi tag «airflow-scheduler»

1
Penjadwal aliran udara gagal memulai dengan pelaksana kubernetes
Saya menggunakan https://github.com/helm/charts/tree/master/stable/airflow helm chart dan membangun puckle/docker-airflowgambar v1.10.8 dengan kubernet terinstal di atasnya dan menggunakan gambar itu di grafik helm, Tapi saya tetap mendapatkan File "/usr/local/bin/airflow", line 37, in <module> args.func(args) File "/usr/local/lib/python3.7/site-packages/airflow/bin/cli.py", line 1140, in initdb db.initdb(settings.RBAC) File "/usr/local/lib/python3.7/site-packages/airflow/utils/db.py", line 332, in initdb dagbag = models.DagBag() File "/usr/local/lib/python3.7/site-packages/airflow/models/dagbag.py", …

1
Bagaimana memicu tugas Aliran Udara hanya ketika partisi / data baru dalam avialable di tabel AWS athena menggunakan DAG di python?
Saya memiliki scenerio seperti di bawah ini: Trigger a Task 1dan Task 2hanya ketika data baru avialable untuk mereka dalam tabel sumber (Athena). Pemicu untuk Task1 dan Task2 harus terjadi ketika partisi data baru dalam sehari. Pemicu Task 3hanya pada penyelesaian Task 1danTask 2 Hanya memicu Task 4penyelesaianTask 3 Kode …
Dengan menggunakan situs kami, Anda mengakui telah membaca dan memahami Kebijakan Cookie dan Kebijakan Privasi kami.
Licensed under cc by-sa 3.0 with attribution required.