Remarque
L’accès à cette page nécessite une autorisation. Vous pouvez essayer de vous connecter ou de modifier des répertoires.
L’accès à cette page nécessite une autorisation. Vous pouvez essayer de modifier des répertoires.
Remarque
Apache Airflow Job est basé sur Apache Airflow.
Apache Airflow est une plateforme open source utilisée pour créer, planifier et surveiller des travaux complexes par programmation. Il vous permet de définir un ensemble de tâches, appelées opérateurs, qui peuvent être combinés dans des graphiques acycliques dirigés (DAGs) pour représenter des pipelines.
Apache Airflow Job fournit un moyen simple et efficace de créer et gérer des environnements Apache Airflow, ce qui vous permet d’exécuter facilement vos travaux d’orchestration à grande échelle. Dans ce démarrage rapide, nous allons créer un travail Apache Airflow simple pour vous familiariser avec l’environnement et les fonctionnalités d’Apache Airflow Job.
Créer un travail Apache Airflow
Vous pouvez utiliser un espace de travail existant ou créer un nouvel espace de travail.
Développez Liste déroulante + Nouvel élément, puis, sous la section Data Factory, sélectionnez Tâche Apache Airflow
Donnez un nom approprié à votre projet et sélectionnez le bouton Créer .
Créer un fichier DAG
Sélectionnez la nouvelle carte de fichier DAG , donnez le nom au fichier, puis sélectionnez Créer.
Un code DAG standard vous est présenté. Vous pouvez modifier le fichier en fonction de vos besoins.
Cliquez sur Enregistrer.
Exécuter un DAG
Commencez par sélectionner le bouton Exécuter le DAG .
Une fois lancée, une notification s’affiche indiquant que le DAG est en cours d’exécution.
Pour surveiller la progression de l’exécution du DAG, sélectionnez Afficher les détails dans le centre de notification. Cette action vous redirige vers l’interface utilisateur (IU) Apache Airflow, où vous pouvez suivre facilement l’état et les détails de l’exécution du DAG.
Surveiller votre DAG Apache Airflow dans l’interface utilisateur d’Apache Airflow
Les fichiers DAG enregistrés sont chargés dans l’interface utilisateur (IU) Apache Airflow. Vous pouvez les surveiller en cliquant sur le bouton Surveiller dans Apache Airflow .