Aktualisieren Azure Data Factory Zuordnen von Datenflüssen zu Fabric (Vorschau)

Von Bedeutung

Die Upgradeerfahrung für Azure Data Factory Zuordnung von Datenflüssen zu Fabric befindet sich derzeit in der öffentlichen Vorschau und kann geändert werden.

Aktualisieren Sie Azure Data Factory Pipelines, die das Zuordnen von Datenflüssen zu Microsoft Fabric Data Factory enthalten, indem Sie die Schritte in diesem Artikel ausführen. Dieser Artikel beschreibt den Migrationspfad für Pipelines, die Mapping Data Flows verwenden und in Mapping-Data-Flow-Transformationen (MDF) in Dataflow Gen2 umgewandelt werden. Informationen zum Migrieren von Pipelines, die keine Zuordnungsdatenflüsse enthalten, finden Sie unter Aktualisieren Ihrer Azure Data Factory Pipelines auf Fabric.

Voraussetzungen

Bevor Sie das Upgrade starten, stellen Sie sicher, dass Sie folgendes haben:

  • Zugriff auf eine Azure Data Factory Instanz, die Zuordnungsdatenflüsse enthält.
  • Zugriff auf einen Microsoft Fabric-aktivierten Mandanten.
  • Mitwirkender- oder höhere Berechtigungen für den Fabric-Arbeitsbereich.
  • Vorhandene Fabric Verbindungen für unterstützte Datenquellen und Ziele.

Unterstützte Upgradeszenarien

Das Upgradetool unterstützt die folgenden Szenarien:

  • Azure Data Factory Pipelines, die Zuordnungsdatenflüsse enthalten.
  • Azure Synapse Analytics Pipelines, die Zuordnungsdatenflüsse enthalten.
  • Die Lift-and-Shift-Migration vorhandener Mapping-Dataflow-Workloads nach Fabric.

Migration starten

Sie können die Migration von Azure Data Factory-Pipelines, die Mapping Data Flows enthalten, über einen der folgenden Einstiegspunkte starten.

Einstiegspunkt Am besten geeignet für: Startschritt
Von Azure Data Factory Ausführen einer Bewertung der Pipelinebereitschaft vor der Migration Option A: Von Azure Data Factory
Aus einem Fabric-Arbeitsbereich Direktes Einbinden und Migrieren einer Azure Data Factory Instanz von Fabric Option B: Start mit Fabric

Beide Optionen werden bei "Migrieren"-Pipelines fortgesetzt.

Option A: Starten von Azure Data Factory

Verwenden Sie diese Option, wenn Sie möchten:

  • Überprüfen der Migrationsbereitschaft
  • Ausführung der Migrationsbewertung
  • Auswerten der unterstützten Pipelines vor der Migration

Starten der Migration von Azure Data Factory

  1. Öffnen Sie das Azure Data Factory-Portal.

  2. Wählen Sie Zu Fabric migrieren (Vorschau) aus.

  3. Wählen Sie Erste Schritte aus.

    Screenshot des Azure Data Factory Portals mit der Option

Überprüfen der Migrationsbewertung

  1. Überprüfen Sie auf der Seite Fabric-Migrationsbewertung (Vorschau) die Liste der Pipelines, die für die Migration unterstützt werden.

  2. Wählen Sie Weiteraus.

    Screenshot der Seite zur Fabric-Migrationsbewertung, auf der Pipelines aufgeführt sind, die für die Migration bereit sind.

Azure Data Factory in Fabric einbinden

  1. Wählen Sie den Fabric Arbeitsbereich aus, in dem Sie die Azure Data Factory Instanz bereitstellen möchten.

  2. Wählen Sie "Mount" aus.

  3. Nachdem der Einbindungsvorgang abgeschlossen ist, wählen Sie In Fabric fortfahren.

    Screenshot des Bildschirms zur Auswahl des Fabric-Arbeitsbereichs, der zum Einbinden einer Azure Data Factory-Instanz verwendet wird.

    Screenshot des Bildschirms

Option B: Von Fabric starten

Verwenden Sie diese Option, wenn Sie bereits wissen, welche Azure Data Factory Instanz Sie migrieren möchten und direkt von Fabric starten möchten.

Azure Data Factory aus Fabric einbinden

  1. Öffnen Sie Ihren Fabric-Arbeitsbereich.

  2. Wählen Sie Neues Element aus.

  3. Wählen Sie Azure Data Factory aus.

    Screenshot der Ansicht „Neues Element“ im Microsoft Fabric-Arbeitsbereich mit der Auswahl von Azure Data Factory.

  4. Wählen Sie die Azure Data Factory Instanz aus, die bereitgestellt werden soll.

  5. Wählen Sie OK aus.

    Screenshot des Dialogfelds

Migrieren von Pipelines

Nachdem Sie Azure Data Factory in Fabric bereitgestellt haben, fahren Sie mit dem Migrationsworkflow fort.

Zu migrierende Pipelines auswählen

  1. Öffnen Sie das bereitgestellte Azure Data Factory Element in Fabric.

  2. Wählen Sie Zu Fabric migrieren (Vorschau) aus.

    Screenshot des bereitgestellten Azure Data Factory Elements in Fabric mit der Option

  3. Wählen Sie die Pipeline aus, die den Mapping-Datenfluss enthält.

  4. Wählen Sie " Verbindungen überprüfen" aus.

    Screenshot des Bildschirms

Zuordnen verknüpfter Dienste zu Fabric-Verbindungen

  1. Auf der Seite "Kartenverbindungen " folgendes:

    • Überprüfen Sie die mit Azure Data Factory verknüpften Dienste.
    • Ordnen Sie sie Fabric Verbindungen zu.

  2. Klicken Sie auf Bestätigen.

    Screenshot der Seite „Map connections“ für die Zuordnung von verknüpften Diensten in Azure Data Factory zu Fabric-Verbindungen.

Überprüfen der Migrationsergebnisse

Nach Abschluss der Migration führt das Tool Folgendes aus:

  • Migriert Pipelines und Mapping Data Flows gemeinsam.
  • Konvertiert Zuordnungsdatenflüsse in MDF-Transformationen in Dataflow Gen2.
  • Legt migrierte Artefakte in einem neuen Ordner im Fabric-Arbeitsbereich ab.

Wählen Sie "Im Arbeitsbereich anzeigen" aus.

Screenshot der Seite mit den Migrationsergebnissen mit migrierten Ressourcen und deren Status.

Überprüfen migrierter Zuordnungsdatenflusstransformationen

Öffnen Sie nach der Migration den Migrationsordner, und überprüfen Sie die aktualisierten MDF-Transformationen, bevor Sie sie ausführen.

Öffnen des migrierten Dataflow Gen2-Elements

  1. Öffnen Sie das migrierte Dataflow Gen2-Element.

  2. Überprüfen Sie die migrierte MDF-Transformationslogik.

  3. Überprüfen Sie das Transformationsdiagramm mithilfe der MDF-Transformationssymbolleiste.

    Screenshot der Erstellungserfahrung für die Zuordnung von Datenflusstransformationen mit dem migrierten Transformationsdiagramm.

Speichern der Migrierten Zuordnungsdatenflusstransformation

  1. Öffnen Sie das Menü "Speichern und Ausführen" .

  2. Klicken Sie auf Speichern.

    Screenshot des Menüs

Note

Derzeit wird für MDF-Transformationen in der öffentlichen Vorschau nur die Aktion Speichern unterstützt.

Migrierte Pipelines ausführen

Führen Sie nach der Validierung die migrierte Fabric-Pipeline aus.

Konfigurieren Sie den Pipelinelauf

  1. Öffnen Sie die migrierte Fabric-Pipeline.

  2. Wählen Sie die Dataflow-Aktivität aus.

  3. Überprüfen Sie die ausgewählte MDF-Transformationsabfrage.

  4. Konfigurieren Sie bei Bedarf Spark-Laufzeiteinstellungen.

    Screenshot des Pipeline-Editors mit der Konfiguration der Dataflow-Aktivität für eine Zuordnungsdatenfluss-Transformation.

Migrierte Pipeline ausführen

  1. Überprüfen Sie die Pipeline.

  2. Führen Sie die Pipeline manuell aus, oder konfigurieren Sie Zeitpläne und Trigger.

    Screenshot der Pipelineausführungs- und Terminplanungsoptionen für die migrierte Pipeline.

Ausführungen migrierter Zuordnungsdatenflusstransformationen überwachen

Sie können migrierte Pipeline- und MDF-Transformationsausführungen überwachen:

  • Pipelineausgabebereich
  • Monitoring Hub
  • Aktivitätsläufe
  • Ausführungsdetails der Datenflussaktivität

Screenshot des Pipelineausgabebereichs mit dem Status der Ausführung der Datenflow-Aktivität.

So überprüfen Sie die Ausführungsdetails:

  1. Öffnen Sie die Details zur Pipelineausführung.

  2. Wählen Sie die Dataflow-Aktivität aus "Aktivitätsausführungen" aus.

  3. Überprüfen Sie den Ausführungsstatus und die Laufzeitdetails.

    Screenshot des Monitoring-Hubs, das Ausführungen von Pipeline-Aktivitäten und ihre Status zeigt.

    Screenshot der Ausführungsdetails der Datenflussaktivität mit Verarbeitungsmetriken.

Einschränkungen

Die folgenden Einschränkungen gelten derzeit während der öffentlichen Vorschau:

Fläche Einschränkung
Flowlets Wird nicht unterstützt.
Datenfluss Bibliothek Wird nicht unterstützt.
Benutzerdefinierte Funktionen (User-Defined Functions, UDFs) Wird nicht unterstützt.
Datenflussausführung MDF-Transformationen können nur über die Pipeline-Dataflow-Aktivität ausgeführt werden. Das Aktualisieren des Datenflusses wird nicht unterstützt.
Verwaltetes virtuelles Netzwerk Verwaltete Virtual Network Unterstützung ist nicht verfügbar.
Spark-Laufzeitausführung MDF-Transformationen verwenden derzeit eine Spark-Laufzeitinfrastruktur, ähnlich der in Azure Data Factory und Azure Synapse Analytics Mapping Data Flows verwendeten.

Verwandte Inhalte

  • Last updated on