クイック スタート: Apache Airflow ジョブを作成する

Apache Airflow ジョブは Apache Airflow を活用しています。

Apache エアフロー は、プログラムによって複雑なジョブを作成、スケジュール、監視するために使用されるオープンソースプラットフォームです。 これにより、パイプラインを表すために有向非環式グラフ (DAG) に組み合わせることができる、演算子と呼ばれる一連のタスクを定義できます。

Apache Airflow ジョブは、Apache Airflow 環境を簡単かつ効率的に作成および管理する方法を提供します。これにより、オーケストレーション ジョブを簡単に大規模に実行できます。 このクイック スタートでは、Apache Airflow ジョブの環境と機能を理解するための単純な Apache Airflow ジョブを作成しましょう。

Apache Airflow ジョブを作成する

  1. 既存のワークスペースを使用するか、新しいワークスペースを作成することができます。

  2. [+ 新しい項目] ドロップダウンを展開し、[Data Factory] セクションで [Apache エアフロー ジョブ] を選択します

    Apache Airflow ジョブを選択するスクリーンショット。

  3. プロジェクトに適切な名前を付け、[ 作成 ] ボタンを選択します。

DAG ファイルを作成する

  1. [新しい DAG ファイル] カードを選択し、ファイルに名前を付けて、[作成] を選択します。

    DAG ファイルに名前を付けるスクリーンショット。

  2. 定型 DAG コードが表示されます。 ファイルは、実際の要件に応じて編集することができます。

    Microsoft Fabric の定型 DAG ファイルを示すスクリーンショット。

  3. 保存 を選択します。

    Microsoft Fabric で DAG ファイルを保存する方法を示すスクリーンショット。

DAG を実行する

  1. まず、[ DAG の実行 ] ボタンを選択します。

    データ ワークフロー UI から DAG を実行するスクリーンショット。

  2. 開始されると、DAG が実行されていることを示す通知が表示されます。

  3. DAG 実行の進行状況を監視するには、通知センター内の [詳細の表示 ] を選択します。 このアクションにより Apache Airflow UI にリダイレクトされます。この UI を使用すると、DAG 実行の状態と詳細を簡単に追跡できます。

    通知センターから Apache Airflow UI に移動するスクリーンショット。

Apache Airflow UI で Apache Airflow DAG を監視する

保存された dag ファイルは、Apache Airflow UI に読み込まれます。 Apache エアフローのモニター ボタンをクリックすると 、それらを監視 できます。

Airflow DAG を監視するスクリーンショット。

読み込まれた Airflow DAG を示すスクリーンショット。