Partilhar via

Guia de início rápido: criar um trabalho do Apache Airflow

Nota

O trabalho do Apache Airflow é alimentado pelo Apache Airflow.

O Apache Airflow é uma plataforma open-source usada para criar, agendar e monitorizar programaticamente trabalhos complexos. Ele permite definir um conjunto de tarefas, chamadas operadores, que podem ser combinadas em gráficos acíclicos direcionados (DAGs) para representar pipelines.

O Apache Airflow Job fornece uma maneira simples e eficiente de criar e gerenciar ambientes Apache Airflow, permitindo que você execute seus trabalhos de orquestração em escala com facilidade. Neste início rápido, vamos criar um trabalho simples do Apache Airflow para se familiarizar com o ambiente e as funcionalidades do Apache Airflow Job.

Criar um trabalho de fluxo de ar Apache

  1. Você pode usar um espaço de trabalho existente ou Criar um novo espaço de trabalho.

  2. Expandir o menu "Novo item", depois, na secção "Data Factory", selecionar "Apache Airflow Job".

    Captura de tela para selecionar Apache Airflow Job.

  3. Dê um nome adequado ao seu projeto e selecione o botão Criar .

Criar um arquivo DAG

  1. Selecione o cartão de Novo ficheiro DAG, dê um nome ao ficheiro e selecione Criar.

    Captura de tela para nomear o arquivo DAG.

  2. Um código DAG clichê é apresentado a você. Você pode editar o arquivo de acordo com suas necessidades.

    Screenshot apresenta o arquivo DAG clichê no Microsoft Fabric.

  3. Selecione Guardar.

    A captura de tela mostra como salvar o arquivo DAG no Microsoft Fabric.

Executar um DAG

  1. Comece por selecionar o botão Run DAG .

    Captura de tela para executar o DAG a partir da interface do usuário de fluxos de trabalho de dados.

  2. Uma vez iniciado, aparece uma notificação a indicar que o DAG está a funcionar.

  3. Para monitorizar o progresso da execução DAG, selecione Ver Detalhes no centro de notificações. Essa ação irá redirecioná-lo para a interface do usuário do Apache Airflow, onde você pode rastrear convenientemente o status e os detalhes da execução do DAG.

    Captura de ecrã para navegar para a IU do Apache Airflow a partir do centro de notificações.

Monitore seu DAG Apache Airflow na interface do usuário do Apache Airflow

Os arquivos dag salvos são carregados na interface do usuário do Apache Airflow. Pode monitorizá-los clicando no botão monitor do Apache Airflow.

Captura de tela para monitorar o DAG de fluxo de ar.

A captura de tela apresenta o DAG de fluxo de ar carregado.

Conteúdo relacionado

  • Last updated on