Snowflake Abfrageaktivität
Einführung
Eine Snowflake -Query-Aktivität unter Verwendung ihrer Snowflake-Verbindung, ruft eine CSV-Datei mit Tabellen- oder Ansichtsdaten aus Snowflake ab und soll als Quelle zum Bereitstellen von Daten in einer Operation verwendet werden.
Notiz
Abhängig von Ihren Snowflake Berechtigungen gibt die Query-Aktivität nur Daten zurück, auf die Sie Zugriff haben. Wenn Sie beispielsweise nur über Berechtigungen zum Anzeigen von Daten verfügen, gibt die Get-Aktivität nur Ansichtsdaten und keine Tabellendaten zurück.
Erstellen einer Snowflake Abfrageaktivität
Eine Instanz einer Snowflake Query-Aktivität wird aus einer Snowflake-Verbindung erstellt mithilfe des Aktivitätstyps Abfrage.
Um eine Instanz einer Aktivität zu erstellen, ziehen Sie den Aktivitätstyp auf die Design-Canvas oder kopieren Sie den Aktivitätstyp und fügen Sie ihn auf der Design-Canvas ein. Weitere Informationen finden Sie unter Erstellen einer Aktivitätsinstanz in Komponentenwiederverwendung.
Eine vorhandene Snowflake -Query-Aktivität kann von diesen Orten aus bearbeitet werden:
- Die Design-Canvas (siehe Aktionsmenü in Entwurfsfläche).
- Die Tab Komponenten des Projektbereichs (siehe Aktionsmenü im Projektbereich Tab Komponenten).
Konfigurieren einer Snowflake Abfrageaktivität
Führen Sie die folgenden Schritte aus, um eine Snowflake -Abfrage-Aktivität zu konfigurieren:
-
Schritt 1: Geben Sie einen Namen ein und wählen Sie ein Objekt aus
Geben Sie einen Namen für die Aktivität ein und wählen Sie ein Objekt aus. -
Schritt 2: Erstellen Sie Ihre Abfrage
Legen Sie mithilfe der Objektfelder Bedingungen für eine Abfrage fest und wenden Sie die Paginierung auf eine Abfrage an. -
Schritt 3: Überprüfen Sie die Datenschemata
Alle vom Endpoint generierten Anforderungs- oder Antwortschemata werden angezeigt.
Schritt 1: Geben Sie einen Namen ein und wählen Sie ein Objekt aus
Geben Sie in diesem Schritt einen Namen für die Aktivität ein und wählen Sie eine Tabelle oder Ansicht aus (siehe Übersicht über Ansichten von Snowflake)). Jedes Benutzeroberflächenelement dieses Schritts wird unten beschrieben.
-
Name: Geben Sie einen Namen zur Identifizierung der Aktivität ein. Der Name muss für jede Snowflake Query-Aktivität eindeutig sein und darf keine Schrägstriche enthalten
/
oder Doppelpunkte:
. -
Objekt auswählen: In diesem Abschnitt werden die im Snowflake Endpoint verfügbaren Objekte angezeigt. Beim erneuten Öffnen einer vorhandenen Aktivitätskonfiguration wird nur das ausgewählte Objekt angezeigt, anstatt die gesamte Objektliste neu zu laden.
-
Ausgewähltes Snowflake: Nachdem ein Objekt ausgewählt wurde, wird es hier aufgelistet.
-
Suchen: Geben Sie den Wert einer beliebigen Spalte in das Suchfeld ein, um die Liste der Objekte zu filtern. Bei der Suche wird die Groß-/Kleinschreibung nicht beachtet. Wenn in der Tabelle bereits Objekte angezeigt werden, werden die Tabellenergebnisse mit jedem Tastendruck in Echtzeit gefiltert. Um Objekte während der Suche vom Endpoint neu zu laden, geben Sie Suchkriterien ein und aktualisieren Sie dann, wie unten beschrieben.
-
Aktualisieren: Klicken Sie auf das Aktualisierungssymbol oder das Wort Aktualisieren, um Objekte vom Snowflake Endpoint neu zu laden. Dies kann nützlich sein, wenn Objekte zu Snowflake hinzugefügt wurden. Diese Aktion aktualisiert alle Metadaten, die zum Erstellen der in der Konfiguration angezeigten Objekttabelle verwendet werden.
-
Auswählen eines Objekts: Klicken Sie in der Tabelle irgendwo auf eine Zeile, um ein Objekt auszuwählen. Es kann nur ein Objekt ausgewählt werden. Die für jedes Objekt verfügbaren Informationen werden vom Snowflake Endpoint abgerufen:
-
Name: Der Name eines Objekts, entweder einer Tabelle oder einer Ansicht.
-
Typ: Der Typ des Objekts, entweder eine Tabelle oder eine Ansicht.
-
Tipp
Wenn die Tabelle nicht mit verfügbaren Objekten gefüllt wird, wird die Snowflake-Verbindung ist möglicherweise nicht erfolgreich. Stellen Sie sicher, dass Sie verbunden sind, indem Sie die Verbindung erneut öffnen und die Anmeldeinformationen erneut testen.
-
-
Speichern und beenden: Klicken Sie, wenn aktiviert, um die Konfiguration für diesen Schritt zu speichern und die Aktivitätskonfiguration zu schließen.
-
Weiter: Klicken Sie, um die Konfiguration für diesen Schritt vorübergehend zu speichern und mit dem nächsten Schritt fortzufahren. Die Konfiguration wird erst gespeichert, wenn Sie im letzten Schritt auf die Schaltfläche Fertig klicken.
-
Änderungen verwerfen: Klicken Sie nach dem Vornehmen von Änderungen, um die Konfiguration zu schließen, ohne die an einem Schritt vorgenommenen Änderungen zu speichern. Sie werden in einer Meldung aufgefordert, zu bestätigen, dass Sie die Änderungen verwerfen möchten.
Schritt 2: Erstellen Sie Ihre Abfrage
In diesem Schritt erstellen Sie eine Abfrage, indem Sie Bedingungen für Objektfelder festlegen und die Seitennummerierung entweder über den Abfrage oder durch manuelle Eingabe einer Abfrage anwenden. Jedes Benutzeroberflächenelement dieses Schritts wird unten beschrieben.
Notiz
Sie können den Abfrage Generator umgehen und eine Abfrage in das Feld Abfragezeichenfolge eingeben.
Tipp
Felder mit variablem Symbol Unterstützung der Verwendung von globalen Variablen, Projektvariablen und Jitterbit-Variablen. Beginnen Sie entweder mit einer öffnenden eckigen Klammer [
in das Feld oder durch Klicken auf das Variablensymbol, um eine Liste der vorhandenen Variablen anzuzeigen, aus denen Sie auswählen können.
-
Suchen: Geben Sie einen beliebigen Teil eines Feldnamens in das Suchfeld ein, um die Liste der Felder für das ausgewählte Objekt zu filtern. Bei der Suche wird nicht zwischen Groß- und Kleinschreibung unterschieden. Die aufgelisteten Ergebnisse werden mit jedem Tastendruck in Echtzeit gefiltert.
-
Aktualisieren: Klicken Sie auf das Aktualisierungssymbol oder das Wort Aktualisieren, um die Felder des Objekts vom Snowflake Endpoint neu zu laden.
-
Alles auswählen: Wenn Sie das Suchfeld zum Filtern verwenden, können Sie mit diesem Kontrollkästchen alle sichtbaren Felder auf einmal auswählen.
-
Felder auswählen: Aktivieren Sie die Kontrollkästchen der Felder, die in die Abfrage aufgenommen werden sollen, damit sie automatisch zur Abfrage in der Abfragezeichenfolge hinzugefügt werden. Sie können auch Alle Felder gleichzeitig mithilfe des Kontrollkästchens auswählen.
-
Paging: Um eine Paging-Klausel hinzuzufügen (eine Begrenzung der Anzahl der Datensätze mit einem optionalen Datensatz-Offset), können Sie das Dropdown-Menü verwenden, um die Paging-Begrenzung festzulegen, und das Feld, um einen Offset einzugeben. Wenn kein Offset angegeben ist, wird standardmäßig 0 verwendet. Eine einzelne Paging-Klausel wird unterstützt. Wenn keine Paging-Klausel enthalten ist, werden alle Datensätze zurückgegeben.
-
Übernehmen: Klicken Sie hier, um die Klausel automatisch basierend auf den Dropdown-Auswahlen und dem eingegebenen Wert zu erstellen. Die automatisch erstellte Paging-Klausel wird im Textfeld Abfragezeichenfolge angezeigt.
-
Entfernen: Klicken Sie hier, um eine angewendete Paging-Klausel zu entfernen.
-
-
Bedingungen: Um Bedingungsklauseln hinzuzufügen, verwenden Sie die folgenden Felder als Eingabe für die Erstellung der Klauseln, die dann im Textfeld Abfragezeichenfolge angezeigt werden.
-
Feld: Verwenden Sie die Dropdown-Liste, um ein Feld aus dem ausgewählten Objekt auszuwählen.
-
Operator: Verwenden Sie die Dropdown-Liste, um einen Operator auszuwählen, der für den Felddatentyp geeignet ist:
Operator Bezeichnung Beschreibung = Ist gleich != Ungleich IN (Wert1, Wert2) In In Werteliste. LIKE 'string' Gefällt mir Gefällt mir string. LIKE 'string%' Beginnt mit Beginnt mit string. LIKE '%string' Endet mit Endet mit string. LIKE '%string%' Enthält Enthält string. < Kleiner als <= Kleiner oder gleich > Größer als >= Größer oder gleich -
Wert: Geben Sie den gewünschten Wert ein, der mit den Dropdown-Auswahlen verwendet werden soll.
-
Hinzufügen: Klicken Sie hier, um die Klausel automatisch basierend auf den Dropdown-Auswahlen und dem eingegebenen Wert zu erstellen. Die bedingte Klausel wird dem Textfeld Abfragezeichenfolge hinzugefügt.
-
Alle entfernen: Klicken Sie hier, um alle eingegebenen Bedingungssätze zu entfernen.
-
-
Abfragezeichenfolge: Wenn Sie Felder auswählen, Bedingungen angeben und die Seitennummerierung festlegen, wird die Abfrage in diesem Textfeld automatisch mit den ausgewählten Feldern, Bedingungen und Seitenbegrenzungen ausgefüllt. Dieses Feld ist editierbar, d. h. Sie können eine Abfrage manuell eingeben oder die automatisch ausgefüllte Anweisung bearbeiten.
Hinweis
Die Werte aller globalen Variablen, die in der Abfragezeichenfolge verwendet werden, werden bei Verwendung der Schaltfläche Abfrage testen nicht ausgefüllt, selbst wenn ein Standardwert angegeben ist. Globale Variablenwerte werden zur Laufzeit abgerufen, wenn die Abfrage ausgeführt wird. Um die Abfrage mit einem Standardvariablenwert zu testen, verwenden Sie eine Projektvariable stattdessen.
Wichtig
Um eine Abfrage zu verwenden, die andere Elemente enthält als die über diese Schnittstelle ausgewählten, müssen Sie auch das Kontrollkästchen Statisches Schema verwenden aktivieren.
-
Statisches Schema verwenden: Wählen Sie diese Option aus, um das Schema auf ein statisches Schema festzulegen, das unabhängig von der Abfrage ist. Dadurch können benutzerdefinierte Abfrage verwendet werden, die in das Textfeld Abfragezeichenfolge eingegeben wurden.
-
Abfrage testen: Klicken Sie hier, um die Abfrage zu validieren. Wenn die Abfrage gültig ist, werden maximal 50 aus der Abfrage abgerufene Datensätze in einer Tabelle angezeigt. Wenn die Abfrage nicht gültig ist, werden entsprechende Fehlermeldungen angezeigt.
Notiz
Während der Laufzeit des Operation wird das Limit von 50 Datensätzen nicht erzwungen, es sei denn, es wird im Feld Paging angegeben (siehe zuvor). Wenn Sie die Abfragezeichenfolge manuell bearbeiten, muss die Abfrage gültig sein und über diese Schaltfläche bestätigt werden, damit die Schaltfläche Weiter aktiviert werden kann.
-
Zurück: Klicken Sie hier, um die Konfiguration für diesen Schritt vorübergehend zu speichern und zum vorherigen Schritt zurückzukehren.
-
Weiter: Klicken Sie hier, um die Konfiguration für diesen Schritt vorübergehend zu speichern und mit dem nächsten Schritt fortzufahren. Die Konfiguration wird erst gespeichert, wenn Sie im letzten Schritt auf die Schaltfläche Fertig klicken.
-
Änderungen verwerfen Klicken Sie nach dem Vornehmen von Änderungen hierauf, um die Konfiguration zu schließen, ohne die an einem Schritt vorgenommenen Änderungen zu speichern. Sie werden in einer Meldung aufgefordert, zu bestätigen, dass Sie die Änderungen verwerfen möchten.
Schritt 3: Überprüfen der Datenschemata
Alle vom Endpoint generierten Anforderungs- oder Antwortschemata werden angezeigt. Jedes Benutzeroberflächenelement dieses Schritts wird unten beschrieben.
-
Datenschemata: Diese Datenschemata werden von benachbarten Transformations übernommen und beim Transformation erneut angezeigt.
Notiz
Die in einer Transformation bereitgestellten Daten haben Vorrang vor der Aktivitätskonfiguration.
Der Snowflake-Konnektor verwendet Version 3.19.0 des Snowflake JDBC-Treibers und die Snowflake SQL-Befehle. Informationen zu den Schema und -feldern finden Sie in der API -Dokumentation.
Die Standardanforderungs- und Antwortdatenschemata bestehen aus diesen Knoten und Feldern:
-
Anfrage
Schemafeld/-knoten anfordern Hinweise queryRequest
Knoten der Abfrage. whereClause
Knoten der WHERE-Klausel-Anforderung. columnName
Spaltenname der WHERE-Klausel. condition
Bedingung der WHERE-Klausel. value
Wert der WHERE-Klausel. -
Antwort
Antwortschemafeld/-knoten Hinweise _ table
_Knoten, der den Tabellennamen NAME anzeigt. Entity
Knoten der Entität. column_A
Wert für die erste Spalte, COLOR. column_B
Wert für die zweite Spalte, FLOWER. . . .
Werte für die nachfolgenden Tabellenspalten.
Wenn Statische Schemas verwenden ausgewählt ist, besteht das Schema aus diesen Knoten und Feldern:
-
Antwort
Antwortschemafeld/-knoten Hinweise queryResponse
Knoten der Abfrage. row
Knoten der Antwortzeile. item
Knoten des Antwortelements. columnName
Spaltenname des Antwortelements. columnValue
Spaltenwert des Antwortelements.
-
-
Aktualisieren: Klicken Sie auf das Aktualisierungssymbol oder das Wort Aktualisieren, um Schemas vom Snowflake Endpoint neu zu generieren. Diese Aktion generiert ein Schema auch an anderen Stellen im gesamten Projekt neu, an denen auf dasselbe Schema verwiesen wird, z. B. in einer angrenzenden Transformation.
-
Zurück: Klicken Sie hier, um die Konfiguration für diesen Schritt vorübergehend zu speichern und zum vorherigen Schritt zurückzukehren.
-
Fertig: Klicken Sie, um die Konfiguration für alle Schritte zu speichern und die Aktivitätskonfiguration zu schließen.
-
Änderungen verwerfen Klicken Sie nach dem Vornehmen von Änderungen hierauf, um die Konfiguration zu schließen, ohne die an einem Schritt vorgenommenen Änderungen zu speichern. Sie werden in einer Meldung aufgefordert, zu bestätigen, dass Sie die Änderungen verwerfen möchten.
Nächste Schritte
Nachdem Sie eine Snowflake -Query-Aktivität konfiguriert haben, schließen Sie die Konfiguration der Operation ab, indem Sie andere Aktivitäten, Transformations oder Scripts als Operation hinzufügen und konfigurieren. Sie können auch die Operation konfigurieren, die die Möglichkeit umfassen, Operationen zu verketten, die sich im gleichen oder in unterschiedlichen Workflows befinden.
Auf Menüaktionen für eine Aktivität kann über den Projektbereich und die Design-Canvas zugegriffen werden. Weitere Informationen finden Sie unter Aktionsmenü“ in Connector-Grundlagen.
Snowflake Query-Aktivitäten können mit diesen Operation als Quelle verwendet werden:
- Transformation
- Zwei-Ziel-Archivmuster (nur als erste Quelle)
- HTTP-Archivmuster mit zwei Zielen (nur als erste Quelle)
- Zwei-Transformationsmuster (als erste oder zweite Quelle)
Um die Aktivität mit Skriptfunktionen zu verwenden, schreiben Sie die Daten an einen temporären Speicherort und verwenden Sie dann diesen temporären Speicherort in der Skriptfunktion.
Wenn Sie bereit sind, einsetzen und ausführen den Operation und validieren Sie das Verhalten durch Überprüfen der Operation.