ETL erstellen

Suite
Customer Experience Employee Experience Strategy & Research
Produkt
Qualtrics
Was finden Sie hier?

Informationen zum Erstellen von ETL

Die Qualtrics Workflows-Plattform enthält eine Reihe von Aufgaben, um den Import von Daten aus Zielsystemen von Drittanbietern in Qualtrics oder den Export von Daten aus Qualtrics in Ziele von Drittanbietern zu unterstützen. Diese Aufgaben folgen dem Framework Extraktion, Transformation, Laden (ETL). Mithilfe von ETL können Sie automatisierte und geplante Workflows erstellen, um Daten aus Drittanbieterquellen in Qualtrics zu übertragen und Daten aus Qualtrics an Ziele von Drittanbietern zu exportieren.

Um einen ETL Workflow zu erstellen, müssen Sie 1 oder mehrere Extraktoraufgaben und 1 oder mehrere Laderaufgaben erstellen. Sie sind nur durch die Gesamtlimit für Aufgaben in 1 Workflow.

Tipp: ETL kann 24 Stunden dauern. Wenn die Aufgabe nicht innerhalb von 24 Stunden erfolgreich ist, schlägt die Aufgabe fehl.
Tipp: ETL können jeweils nur einen Workflow ausführen. Gleichzeitig ausgeführte Workflows können fehlschlagen.

Allgemeines Setup für Extraktor- und Loader-Aufgaben

Tipp: Einen allgemeinen Leitfaden zur Verwendung von Workflows finden Sie unter. Grundlegende Übersicht über Workflows.
Klicken Sie auf der Seite „Eigenständige Workflows“ oder auf der Registerkarte „Workflows“ in einem Projekt auf Workflow anlegen .
Klicken Sie auf „Workflow, und wählen Sie etl
Klicken Sie auf „Workflow, und wählen Sie etl
Auswählen Extrahieren, Transformieren und Laden (ETL)-Daten.
ETL werden in der Regel nach einem wiederkehrenden Plan ausgeführt. Wählen Sie einen Plan für Ihren Workflow aus. Siehe Eingeplante Workflows finden Sie weitere Informationen zum Festlegen des Plan eines Workflow.
Wählen Sie einen Plan aus, und wählen Sie "Sichern".
Wählen Sie einen Plan aus, und wählen Sie "Sichern".
Klicken Sie auf Speichern.
Klicken Sie auf Datenquelle (ETL) , um eine zu verwendende Aufgabe auszuwählen. Siehe Verfügbare Extraktoraufgaben für eine Liste von Aufgaben, die Sie verwenden können. Sie können in einem Workflow mehrere Extraktoren hinzufügen.
einrichten des Extraktors und des Laders und Hinzufügen von Schleifen, falls erforderlich
einrichten des Extraktors und des Laders und Hinzufügen von Schleifen, falls erforderlich
Wenn Sie Daten vor dem Laden transformieren möchten, klicken Sie auf Datentransformation. Dieser Schritt ist optional. Siehe Aufgabe für weitere Details.
Klicken Sie auf Datenziel hinzufügen , um eine zu verwendende Aufgabe auszuwählen. Siehe Verfügbare Loader-Aufgaben für eine Liste von Aufgaben, die Sie verwenden können. Sie können in einem Workflow mehrere Loader hinzufügen.
Dieser Schritt ist optional, aber nützlich, um Sie zu benachrichtigen, wenn in Ihrem Workflow ein Fehler auftritt. Gehe zu Einstellungen einrichten Workflow um benachrichtigt zu werden, wenn Ihr Workflow jemals fehlschlägt.
die Registerkarte "Einstellungen" und der Schalter zum Ein- und Ausschalten befinden sich oben auf der Seite
die Registerkarte "Einstellungen" und der Schalter zum Ein- und Ausschalten befinden sich oben auf der Seite
Vergessen Sie nicht, Ihren Workflow zu aktivieren.
TIPP: Nachdem Sie Ihren Workflow eingerichtet haben, klicken Sie auf Sofort ausführen, um Ihren ETL Workflow zu testen und sicherzustellen, dass er funktioniert.
die Schaltfläche "Sofort ausführen" oben auf der Seite
die Schaltfläche "Sofort ausführen" oben auf der Seite
Tipp: Sie können Ihren ETL zusätzliche Aufgaben hinzufügen. Fügen Sie beispielsweise eine Aufgabe um in einem Webhook zu posten.

Daten werden zurückgeladen

Bei einer Konfigurationsänderung zwischen ETL, die voneinander abhängig sind, wird eine Drucktaste angezeigt, mit der alle Daten mit der neuen Konfiguration neu geladen werden können. Klicken Sie auf Daten neu laden wenn Sie die alten Daten erneut verarbeiten möchten.

die Schaltfläche "Daten neu laden" bei einer geänderten ETL-Aufgabe
die Schaltfläche "Daten neu laden" bei einer geänderten ETL-Aufgabe
Achtung: Wird neu geladen alle Daten aus der bearbeiteten Aufgabe. Normalerweise verarbeiten ETL nur neue Daten seit dem letzten Lauf. Wenn diese Option jedoch ausgewählt ist, werden bei der weiter Ausführung des Workflow alle Daten seit dem Anlegen des Workflow verarbeitet.
Beispiel: Wenn eine Aufgabe zum Extrahieren von Antworten aus Umfragen normalerweise ausgeführt wird, werden nur neue Antworten seit dem letzten Lauf verarbeitet. Wenn die Daten jedoch neu geladen werden, werden bei der weiter Ausführung des Workflow alle Antworten in der Umfrage verarbeitet.

Extrahieren von Daten aus einem bestimmten Datumsbereich

Mit bestimmten ETL-Workflows können Sie Daten aus einem bestimmten Datumsbereich extrahieren. Dies kann eine gute Möglichkeit sein, bereits extrahierte Daten erneut zu verarbeiten oder zu testen, ob Ihre Einrichtung funktioniert.

Die Extraktion von Daten aus einem bestimmten Bereich hat keine Auswirkungen auf andere geplante Läufe.

Beispiel: Ein Ticket wurde bereits von Ihrem Workflow bearbeitet. Seitdem haben sich die Daten darüber jedoch geändert. Um das Ticket erneut zu bearbeiten, verwenden Sie diese Funktion.
TIPP: Diese Funktion ist nur für geplante ETL-Workflows verfügbar.

Unterstützte Aufgaben des Extraktors

Sie können nur Daten aus einem bestimmten Datumsbereich extrahieren, wenn Sie eine der folgenden Aufgaben verwenden:

TIPP: Die Extraktion von Datumsbereichen funktioniert nur, wenn Sie 1 unterstützte Extraktoraufgabe in Ihrem Workflow haben.

Ausführen eines Workflows mit einem benutzerdefinierten Datumsbereich

Führen Sie die folgenden Schritte aus, um Daten nur aus dem von Ihnen gewählten Datumsbereich zu extrahieren.

Erstellen Sie einen vollständigen ETL-Workflow mit einer der unterstützten Extraktoraufgaben.
ETL Workflow
ETL Workflow
Klicken Sie auf Sofortige Ausführung.
Klicken Sie auf Erweiterte Einstellungen.
Erweiterte Einstellungen, die die Ausführung von Workflows mit benutzerdefiniertem Datumsbereich ermöglichen
Erweiterte Einstellungen, die die Ausführung von Workflows mit benutzerdefiniertem Datumsbereich ermöglichen
Wählen Sie Workflow mit benutzerdefiniertem Datumsbereich ausführen.
Klicken Sie auf Weiter.
Wählen Sie ein Startdatum und eine Startzeit.
Auswählen eines Datums und einer Uhrzeit für den benutzerdefinierten Datumsbereich
Auswählen eines Datums und einer Uhrzeit für den benutzerdefinierten Datumsbereich
TIPP: Sie können frühestens am 1. Januar 1970 beginnen.
Wählen Sie ein Enddatum und eine Uhrzeit.
TIPP: Das späteste Enddatum und die späteste Endzeit, die Sie wählen können, ist das aktuelle. Solange er aktiviert ist, extrahiert Ihr Workflow zukünftige Daten, während er nach seinem Plan weiterläuft.
Wählen Sie eine Zone für das Timing.
Klicken Sie auf Ja bestätigen.

Fehlersuche bei einem Lauf

Gehen Sie zu Ihrem Ausführungsverlauf des Workflows. Klicken Sie auf die Aufgabe der Extraktion und sehen Sie sich das JSON an. In der Ausgabe sollten die Felder CDAP_DateRangeExport den von Ihnen gewählten Datumsbereich wiedergeben. (In den CDAP_Worker-Feldern wird dagegen angezeigt, wann Sie den Test durchgeführt haben)

Ausgabe des Ausführungsverlaufs
Ausgabe des Ausführungsverlaufs

Verfügbare Extraktoraufgaben

Im Folgenden finden Sie einige der derzeit verfügbaren Extraktoraufgaben:

Tipp: Sie können auch eine Liste der Extraktoren über das Site-Menü auf der linken Seite anzeigen.

Verfügbare Loader-Aufgaben

Im Folgenden finden Sie einige der derzeit verfügbaren Ladeaufgaben:

Tipp: Sie können auch eine Liste der Loader über das Website-Menü auf der linken Seite anzeigen.

Verfügbare Datentransformationsaufgaben

Die folgenden Aufgaben stehen Ihnen für die Transformation der Daten zur Verfügung, die Sie in Ihren ETL verarbeiten:

  • Aufgabe: Ändern Sie das Format von Zeichenfolgen und Datumsangaben, berechnen Sie die Differenz zwischen Datumsangaben, führen Sie mathematische Operation für numerische Felder aus und vieles mehr.
  • Aufgabe: Kombinieren Sie mehrere Datensets in einem einzigen Datenset.
  • Aufgabe “Daten umschreiben und ersetzen”: Redigieren Sie Daten innerhalb Ihres Workflows auf der Grundlage von Regex- oder Substitutionsregeln.

Workflow-Grenzen

Für ETL-Workflow-Läufe gelten die folgenden Grenzen:

  • Jeder Lauf kann bis zu 200 Dateien verarbeiten
  • Jeder Lauf kann insgesamt bis zu 10 GB an Daten verarbeiten
  • Aufgaben können Dateien mit einer Größe von bis zu 5 GB verarbeiten
TIPP: Beachten Sie, dass jeder Lauf alle Aufgaben umfasst, die innerhalb des Workflows ausgeführt werden.

Schauen Sie auch in der Dokumentation der jeweiligen Aufgabe nach, da einige Aufgaben kleinere Grenzwerte haben.

Fehlerbehebung bei Datenextraktions- und Ladeaufgaben

Achtung!: Ein ETL Workflow wird automatisch deaktiviert, wenn er in den letzten 13 Tagen eines der folgenden Kriterien erfüllt hat:

  • Jeder Vollstreckungsversuch war ein Fehlschlag.
  • Es hat mindestens 10 Fehlschläge gegeben.
  • Jede Ausführung scheitert aus dem gleichen Grund.
  • Die erste und die letzte Hinrichtung lagen mindestens 10 Tage auseinander.

Unvollständige Workflows

Datenextraktor- und Loader-Aufgaben müssen zusammen verwendet werden. Wenn Ihnen ein Teil der Einrichtung fehlt, werden Sie vom Workflow-Editor benachrichtigt.

Beispiel: In diesem Beispiel fehlt unsere Aufgabe. Der Workflow-Editor warnt uns, dass in unserer Aufgabe derzeit ein Ziel fehlt.
die fehlende Destinationsfehlermeldung
die fehlende Destinationsfehlermeldung
Beispiel: In diesem Beispiel fehlt unsere Aufgabe. Der Aufgaben-Editor weist uns darauf hin, dass “Sie mindestens eine Aufgabe zur Datenquelle hinzufügen müssen”
Anlegen einer Aufgabe ohne Extraktor. Die Aufgabe weist Sie darauf hin, dass Sie zuerst einen Extraktor einrichten müssen.
Anlegen einer Aufgabe ohne Extraktor. Die Aufgabe weist Sie darauf hin, dass Sie zuerst einen Extraktor einrichten müssen.

Workflows schlagen fehl

Wenn Ihre Aufgaben fehlschlagen oder nicht ordnungsgemäß ausgelöst werden, sollten Sie zuerst schauen, Workflow-Reporting & Historie. Diese enthält Informationen über jedes Mal, wenn Ihr Workflow ausgelöst wird, und die Ergebnisse dieses Workflow.

In der &-Historie hat jeder Teil Ihres Workflow einen eigenen Eintrag, sodass Sie leicht feststellen können, wo ein Fehler aufgetreten ist.

Beispiel: Im folgenden Beispiel verwenden wir eine Aufgabe zum Extrahieren von Daten aus SFTP-Dateien und eine Aufgabe zum Hinzufügen von Kontakten und Transaktionen zu XMD. Sie stellen fest, dass die Aufgabe fehlgeschlagen ist, die Aufgabe jedoch erfolgreich war. Das bedeutet, dass unsere Aufgabe falsch konfiguriert ist, aber unsere Aufgabe in Ordnung ist.
Reporting-Abschnitt. Die Aufgabe ist fehlgeschlagen, aber die Aufgabe war erfolgreich.
Reporting-Abschnitt. Die Aufgabe ist fehlgeschlagen, aber die Aufgabe war erfolgreich.

Nachdem Sie das Problem identifiziert haben, können Sie auf Sicht Unter Details finden Sie weitere Informationen, die Ihnen bei der Diagnose der Problembehebung helfen. Dadurch wird die JSON für die Aufgabe abgerufen. Blättern Sie nach unten zum Aufgabe , um eventuelle Fehler zu finden.

Beispiel: In diesem Beispiel sehen wir, dass die Aufgabe fehlgeschlagen ist, weil die Verbindung ungültige Parameter für eine Aufgabe zum Extrahieren von Daten aus SFTP .
Der Aufgabe einer fehlgeschlagenen Aktion gibt den Fehler aus, der besagt, dass sie fehlgeschlagen ist.
Der Aufgabe einer fehlgeschlagenen Aktion gibt den Fehler aus, der besagt, dass sie fehlgeschlagen ist.

Nachdem Sie Ihren Workflow bearbeitet und das Problem behoben haben, können Sie zum Berichtsverlauf & zurückkehren und auf Wiederholen um den Workflow erneut auszuführen.

die Wiederholungsdrucktaste zum Wiederholen eines fehlgeschlagenen Workflow
die Wiederholungsdrucktaste zum Wiederholen eines fehlgeschlagenen Workflow

FAQs

Habe ich Zugriff auf alle Erweiterungen, die über die Workflow-Vorlagen verfügbar sind?

Gibt es einen Link zu allen Workflow-Ereignisauslösern, Kontrollabläufen und Aufgaben?

Was sind Workflow-Vorlagen?

Was sind Workflows? / Wo sind Aktionen?
Viele Seiten dieses Portals wurden mithilfe maschineller Übersetzung aus dem Englischen übersetzt. Obwohl wir bei Qualtrics die bestmögliche maschinelle Übersetzung ausgewählt haben, um ein möglichst gutes Ergebnis zu bieten, ist maschinelle Übersetzung nie perfekt. Der englische Originaltext gilt als offizielle Version. Abweichungen zwischen dem englischen Originaltext und den maschinellen Übersetzungen sind nicht rechtlich bindend.

Hat Ihnen das weitergeholfen?

Das von Ihnen eingereichte Feedback, dient lediglich dazu, diese Seite zu verbessern.

Großartig! Vielen Dank für die Rückmeldung!

Vielen Dank für die Rückmeldung!