Partager via


Démarrage rapide : Créer un travail Apache Airflow

Remarque

Apache Airflow Job est basé sur Apache Airflow.

Apache Airflow est une plateforme open source utilisée pour créer, planifier et surveiller des travaux complexes par programmation. Il vous permet de définir un ensemble de tâches, appelées opérateurs, qui peuvent être combinés dans des graphiques acycliques dirigés (DAGs) pour représenter des pipelines.

Apache Airflow Job fournit un moyen simple et efficace de créer et gérer des environnements Apache Airflow, ce qui vous permet d’exécuter facilement vos travaux d’orchestration à grande échelle. Dans ce démarrage rapide, nous allons créer un travail Apache Airflow simple pour vous familiariser avec l’environnement et les fonctionnalités d’Apache Airflow Job.

Créer un travail Apache Airflow

  1. Vous pouvez utiliser un espace de travail existant ou créer un nouvel espace de travail.

  2. Développez Liste déroulante + Nouvel élément, puis, sous la section Data Factory, sélectionnez Tâche Apache Airflow

    Capture d’écran de la sélection d’Apache Airflow Job.

  3. Donnez un nom approprié à votre projet et sélectionnez le bouton Créer .

Créer un fichier DAG

  1. Sélectionnez la nouvelle carte de fichier DAG , donnez le nom au fichier, puis sélectionnez Créer.

    Capture d’écran montrant comment nommer le fichier DAG.

  2. Un code DAG standard vous est présenté. Vous pouvez modifier le fichier en fonction de vos besoins.

    Capture d’écran utilisant le fichier DAG standard dans Microsoft Fabric.

  3. Cliquez sur Enregistrer.

    Capture d’écran présentant comment enregistrer le fichier DAG dans Microsoft Fabric.

Exécuter un DAG

  1. Commencez par sélectionner le bouton Exécuter le DAG .

    Capture d’écran illustrant l’exécution du DAG à partir de l’interface utilisateur (IU) des flux de données.

  2. Une fois lancée, une notification s’affiche indiquant que le DAG est en cours d’exécution.

  3. Pour surveiller la progression de l’exécution du DAG, sélectionnez Afficher les détails dans le centre de notification. Cette action vous redirige vers l’interface utilisateur (IU) Apache Airflow, où vous pouvez suivre facilement l’état et les détails de l’exécution du DAG.

    Capture d’écran montrant comment accéder à l’interface utilisateur (IU) Apache Airflow à partir du centre de notification.

Surveiller votre DAG Apache Airflow dans l’interface utilisateur d’Apache Airflow

Les fichiers DAG enregistrés sont chargés dans l’interface utilisateur (IU) Apache Airflow. Vous pouvez les surveiller en cliquant sur le bouton Surveiller dans Apache Airflow .

Capture d’écran montrant comment surveiller le DAG Airflow.

Capture d’écran montrant le DAG Airflow chargé.