Exportieren in Fabric Lakehouse mithilfe von Data Factory
Übersicht
Die Integration der Delta-Freigabe in Microsoft Fabric Data Factory ermöglicht den nahtlosen Zugriff auf und die Verarbeitung freigegebener Delta-Tabellen für Ihre Analyse-Workflows mit Procore Analytics 2.0. Delta Sharing, ein offenes Protokoll für die sichere Datenzusammenarbeit, stellt sicher, dass Unternehmen Daten ohne Duplizierung austauschen können.
Voraussetzungen
- Procore Analytics 2.0 SKU
- Anmeldeinformationen für die Delta-Freigabe:
- Rufen Sie die share.json (oder eine gleichwertige) Delta Sharing-Anmeldedaten Datei von Ihrem Datenanbieter ab.
- Diese Datei sollte Folgendes enthalten:
- Endpunkt-URL: Die URL des Delta-Sharing-Servers.
- Inhaber-Token: Wird für den sicheren Datenzugriff verwendet.
- Microsoft Fabric-Einrichtung:
- Ein Microsoft Fabric-Mandantenkonto mit einem aktiven Abonnement.
- Zugriff auf einen Microsoft Fabric-fähigen Arbeitsbereich.
Schritte
- Wechseln zur Data Factory-Umgebung
- Konfigurieren des Datenflusses
- Durchführen von Datentransformationen
- Validierung und Überwachung
Wechseln zur Data Factory-Umgebung
- Navigieren Sie zu Ihrem Microsoft Fabric Workspace.
- Wählen Sie Neu und dann Dataflow Gen2 aus.
Konfigurieren des Datenflusses
- Wechseln Sie zum Datenfluss-Editor.
- Klicken Sie auf Daten abrufen und wählen Sie Mehr.
- Wählen Sie unter Neue Quelle die Option Deltafreigabe Andere als Datenquelle aus.
- Geben Sie die folgenden Details ein:
- URL: Aus Ihrer Konfigurationsdatei für die Deltafreigabe.
- Bearer Token: Befindet sich in Ihrer config.share-Datei.
- Klicken Sie auf Weiter und wählen Sie die gewünschten Tabellen aus.
- Klicken Sie auf Erstellen , um die Einrichtung abzuschließen.
Durchführen von Datentransformationen
Nachdem Sie den Datenfluss konfiguriert haben, können Sie nun Transformationen auf die freigegebenen Delta-Daten anwenden. Wählen Sie Ihre Option für die Delta-Freigabe von Daten aus der folgenden Liste aus:
- Datenziel hinzufügen
- Seehaus erstellen/öffnen
Datenziel hinzufügen
- Wechseln Sie zu Data Factory.
- Klicken Sie auf Datenziel hinzufügen.
- Wählen Sie Lakehouse als Ziel aus und klicken Sie auf Weiter.
- Wählen Sie Ihr Zielziel aus und bestätigen Sie mit einem Klick auf Weiter.
Create-Open Lakehouse
- Erstellen/öffnen Sie yourLakehouse und klicken Sie auf Daten abrufen.
- Wählen Sie Neuer Dataflow Gen2 aus.
- Klicken Sie auf Daten abrufen, dann auf Mehr , und suchen Sie nach Delta Sharing.
- Geben Sie das URL-Bearertoken aus Ihrer config.share-Datei ein, und wählen Sie dann Next aus.
- Wählen Sie Ihre Daten/Tabellen zum Herunterladen aus und klicken Sie auf Weiter.
- Nach diesen Manipulationen sollten Sie alle ausgewählten Daten in Ihrem Fabric Lakehouse haben.
Validierung und Überwachung
Testen Sie Ihre Datenpipelines und -flüsse, um eine reibungslose Ausführung zu gewährleisten. Verwenden von Überwachungstools in Daten
Factory, um den Fortschritt und die Protokolle für jede Aktivität zu verfolgen.