Zum Inhalt springen

Google BigQuery Abfrageaktivität

Einführung

Eine Google BigQuery Query-Aktivität unter Verwendung ihrer Google BigQuery-Verbindung, fragt eine Tabelle in einem Datensatz in Google BigQuery ab und soll als Quelle in einer Operation verwendet werden.

Erstellen einer Google BigQuery Abfrageaktivität

Eine Instanz einer Google BigQuery Query-Aktivität wird aus einer Google BigQuery-Verbindung erstellt mithilfe des Aktivitätstyps Abfrage.

Um eine Instanz einer Aktivität zu erstellen, ziehen Sie den Aktivitätstyp auf die Design-Canvas oder kopieren Sie den Aktivitätstyp und fügen Sie ihn auf der Design-Canvas ein. Weitere Informationen finden Sie unter Erstellen einer Aktivitätsinstanz in Komponentenwiederverwendung.

Eine vorhandene Google BigQuery Query-Aktivität kann an diesen Orten bearbeitet werden:

Konfigurieren einer Google BigQuery Abfrageaktivität

Führen Sie die folgenden Schritte aus, um eine Google BigQuery -Abfrage-Aktivität zu konfigurieren:

Schritt 1: Geben Sie einen Namen ein und wählen Sie den Datensatz aus

Geben Sie in diesem Schritt einen Namen für die Aktivität ein und wählen Sie den Datensatz aus. Jedes Benutzeroberflächenelement dieses Schritts wird unten beschrieben.

Google BigQuery Abfrageaktivität - Konfigurationsschritt 1

  • Name: Geben Sie einen Namen zur Identifizierung der Aktivität ein. Der Name muss für jede Google BigQuery Query-Aktivität eindeutig sein und darf keine Schrägstriche enthalten / oder Doppelpunkte :.

  • Wählen Sie den Datensatz aus: Dieser Abschnitt zeigt die im Google BigQuery Endpoint verfügbaren Datensätze an.

    • Ausgewählter Datensatz: Nachdem ein Datensatz ausgewählt wurde, wird er hier aufgelistet.

    • Suchen: Geben Sie den Wert einer beliebigen Spalte in das Suchfeld ein, um die Liste der Datensätze zu filtern. Bei der Suche wird die Groß-/Kleinschreibung nicht beachtet. Wenn in der Tabelle bereits Datensätze angezeigt werden, werden die Tabellenergebnisse mit jedem Tastendruck in Echtzeit gefiltert. Um während der Suche Datensätze vom Endpoint neu zu laden, geben Sie Suchkriterien ein und aktualisieren Sie dann, wie unten beschrieben.

    • Aktualisieren: Klicken Sie auf das Aktualisierungssymbol oder das Wort Aktualisieren, um Datasets vom Google BigQuery Endpoint neu zu laden. Dies kann nützlich sein, wenn Datasets zu Google BigQuery hinzugefügt wurden. Diese Aktion aktualisiert alle Metadaten, die zum Erstellen der in der Konfiguration angezeigten Dataset-Tabelle verwendet werden.

    • Datensatz auswählen: Klicken Sie in der Tabelle irgendwo auf eine Zeile, um einen Datensatz auszuwählen. Es kann nur ein Datensatz ausgewählt werden. Die für jeden Datensatz verfügbaren Informationen werden vom Google BigQuery Endpoint abgerufen:

      • Name: Der Name des Datensatzes.

      • Beschreibung: Die Beschreibung des Datensatzes.

    Tipp

    Wenn die Tabelle nicht mit verfügbaren Datensätzen gefüllt wird, wird die Google BigQuery Verbindung ist möglicherweise nicht erfolgreich. Stellen Sie sicher, dass Sie verbunden sind, indem Sie die Verbindung erneut öffnen und die Anmeldeinformationen erneut testen.

  • Speichern und beenden: Klicken Sie, wenn aktiviert, um die Konfiguration für diesen Schritt zu speichern und die Aktivitätskonfiguration zu schließen.

  • Weiter: Klicken Sie, um die Konfiguration für diesen Schritt vorübergehend zu speichern und mit dem nächsten Schritt fortzufahren. Die Konfiguration wird erst gespeichert, wenn Sie im letzten Schritt auf die Schaltfläche Fertig klicken.

  • Änderungen verwerfen: Klicken Sie nach dem Vornehmen von Änderungen, um die Konfiguration zu schließen, ohne die an einem Schritt vorgenommenen Änderungen zu speichern. Sie werden in einer Meldung aufgefordert, zu bestätigen, dass Sie die Änderungen verwerfen möchten.

Schritt 2: Tabelle auswählen

Wählen Sie in diesem Schritt die Tabelle aus. Jedes Benutzeroberflächenelement dieses Schritts wird unten beschrieben.

Google BigQuery Abfrageaktivität - Konfigurationsschritt 2

  • Tabelle auswählen: In diesem Abschnitt werden die im Google BigQuery Endpoint verfügbaren Tabellen angezeigt.

    • Ausgewählter Datensatz: Der im vorherigen Schritt ausgewählte Datensatz wird hier aufgelistet.

    • Ausgewählte Tabelle: Nachdem eine Tabelle ausgewählt wurde, wird sie hier aufgelistet.

    • Suchen: Geben Sie den Wert einer beliebigen Spalte in das Suchfeld ein, um die Liste der Tabellen zu filtern. Die Suche ist nicht groß- und kleinschreibungsabhängig. Wenn in der Tabelle bereits Tabellen angezeigt werden, werden die Tabellenergebnisse mit jedem Tastendruck in Echtzeit gefiltert. Um Tabellen während der Suche vom Endpoint neu zu laden, geben Sie Suchkriterien ein und aktualisieren Sie dann, wie unten beschrieben.

    • Aktualisieren: Klicken Sie auf das Aktualisierungssymbol oder das Wort Aktualisieren, um Tabellen vom Google BigQuery Endpoint neu zu laden. Dies kann nützlich sein, wenn Tabellen zu Google BigQuery hinzugefügt wurden. Diese Aktion aktualisiert alle Metadaten, die zum Erstellen der in der Konfiguration angezeigten Tabellentabelle verwendet werden.

    • Tabelle auswählen: Klicken Sie innerhalb der Tabelle irgendwo auf eine Zeile, um eine Tabelle auszuwählen. Es kann nur eine Tabelle ausgewählt werden. Die für jede Tabelle verfügbaren Informationen werden vom Google BigQuery Endpoint abgerufen:

      • Name: Der Name der Tabelle.

      • Beschreibung: Die Beschreibung der Tabelle.

    Tipp

    Wenn die Tabelle nicht mit verfügbaren Tabellen gefüllt wird, wird die Google BigQuery Verbindung ist möglicherweise nicht erfolgreich. Stellen Sie sicher, dass Sie verbunden sind, indem Sie die Verbindung erneut öffnen und die Anmeldeinformationen erneut testen.

  • Zurück: Klicken Sie hier, um die Konfiguration für diesen Schritt vorübergehend zu speichern und zum vorherigen Schritt zurückzukehren.

  • Weiter: Klicken Sie hier, um die Konfiguration für diesen Schritt vorübergehend zu speichern und mit dem nächsten Schritt fortzufahren. Die Konfiguration wird erst gespeichert, wenn Sie im letzten Schritt auf die Schaltfläche Fertig klicken.

  • Änderungen verwerfen: Klicken Sie nach dem Vornehmen von Änderungen hier, um die Konfiguration zu schließen, ohne die an einem Schritt vorgenommenen Änderungen zu speichern. In einer Meldung werden Sie aufgefordert zu bestätigen, dass Sie die Änderungen verwerfen möchten.

Schritt 3: Erstellen Sie Ihre Abfrage

In diesem Schritt erstellen Sie eine Abfrage, indem Sie Bedingungen für Objektfelder festlegen und die Seitennummerierung entweder über den Abfrage oder durch manuelle Eingabe einer Abfrage anwenden. Jedes Benutzeroberflächenelement dieses Schritts wird unten beschrieben.

Notiz

Sie können den Abfrage Generator umgehen und eine Abfrage in das Feld Abfragezeichenfolge eingeben.

Google BigQuery Abfrageaktivitätskonfiguration Schritt 3

Tipp

Felder mit variablem Symbol Unterstützung der Verwendung von globalen Variablen, Projektvariablen und Jitterbit-Variablen. Beginnen Sie entweder mit einer öffnenden eckigen Klammer [ in das Feld oder durch Klicken auf das Variablensymbol, um eine Liste der vorhandenen Variablen anzuzeigen, aus denen Sie auswählen können.

  • Suchen: Geben Sie einen beliebigen Teil eines Feldnamens in das Suchfeld ein, um die Liste der Felder für das ausgewählte Objekt zu filtern. Bei der Suche wird nicht zwischen Groß- und Kleinschreibung unterschieden. Die aufgelisteten Ergebnisse werden mit jedem Tastendruck in Echtzeit gefiltert.

  • Aktualisieren: Klicken Sie auf das Aktualisierungssymbol oder das Wort Aktualisieren, um die Felder des Objekts vom Google BigQuery Endpoint neu zu laden.

  • Alles auswählen: Wenn Sie das Suchfeld zum Filtern verwenden, können Sie mit diesem Kontrollkästchen alle sichtbaren Felder auf einmal auswählen.

  • Felder auswählen: Aktivieren Sie die Kontrollkästchen der Felder, die in die Abfrage aufgenommen werden sollen, damit sie automatisch zur Abfrage in der Abfragezeichenfolge hinzugefügt werden. Sie können auch Alle Felder gleichzeitig mithilfe des Kontrollkästchens auswählen.

  • Paging: Um eine Paging-Klausel hinzuzufügen (eine Begrenzung der Anzahl der Datensätze mit einem optionalen Datensatz-Offset), können Sie das Dropdown-Menü verwenden, um die Paging-Begrenzung festzulegen, und das Feld, um einen Offset einzugeben. Wenn kein Offset angegeben ist, wird standardmäßig 0 verwendet. Eine einzelne Paging-Klausel wird unterstützt. Wenn keine Paging-Klausel enthalten ist, werden alle Datensätze zurückgegeben.

    • Übernehmen: Klicken Sie hier, um die Klausel automatisch basierend auf den Dropdown-Auswahlen und dem eingegebenen Wert zu erstellen. Die automatisch erstellte Paging-Klausel wird im Textfeld Abfragezeichenfolge angezeigt.

    • Entfernen: Klicken Sie hier, um eine angewendete Paging-Klausel zu entfernen.

  • Bedingungen: Um Bedingungsklauseln hinzuzufügen, verwenden Sie die folgenden Felder als Eingabe für die Erstellung der Klauseln, die dann im Textfeld Abfragezeichenfolge angezeigt werden.

    • Feld: Verwenden Sie die Dropdown-Liste, um ein Feld aus dem ausgewählten Objekt auszuwählen.

    • Operator: Verwenden Sie die Dropdown-Liste, um einen Operator auszuwählen, der für den Felddatentyp geeignet ist:

      Operator Bezeichnung Beschreibung
      = Ist gleich
      != Ungleich
      IN (Wert1, Wert2) In In Werteliste.
      IST NULL Ist Null Hat keinen Wert.
      IST NICHT NULL Ist nicht Null Hat einen Wert.
      LIKE 'string' Gefällt mir Gefällt mir string.
      LIKE 'string%' Beginnt mit Beginnt mit string.
      LIKE '%string' Endet mit Endet mit string.
      LIKE '%string%' Enthält Enthält string.
      < Kleiner als
      <= Kleiner oder gleich
      > Größer als
      >= Größer oder gleich

    • Wert: Geben Sie den gewünschten Wert ein, der mit den Dropdown-Auswahlen verwendet werden soll.

    • Hinzufügen: Klicken Sie hier, um die Klausel automatisch basierend auf den Dropdown-Auswahlen und dem eingegebenen Wert zu erstellen. Die bedingte Klausel wird dem Textfeld Abfragezeichenfolge hinzugefügt.

    • Alle entfernen: Klicken Sie hier, um alle eingegebenen Bedingungssätze zu entfernen.

  • Abfragezeichenfolge: Wenn Sie Felder auswählen, Bedingungen angeben und die Seitennummerierung festlegen, wird die Abfrage in diesem Textfeld automatisch mit den ausgewählten Feldern, Bedingungen und Seitenbegrenzungen ausgefüllt. Dieses Feld ist editierbar, d. h. Sie können eine Abfrage manuell eingeben oder die automatisch ausgefüllte Anweisung bearbeiten.

    Hinweis

    Die Werte aller globalen Variablen, die in der Abfragezeichenfolge verwendet werden, werden bei Verwendung der Schaltfläche Abfrage testen nicht ausgefüllt, selbst wenn ein Standardwert angegeben ist. Globale Variablenwerte werden zur Laufzeit abgerufen, wenn die Abfrage ausgeführt wird. Um die Abfrage mit einem Standardvariablenwert zu testen, verwenden Sie eine Projektvariable stattdessen.

  • Abfrage testen: Klicken Sie hier, um die Abfrage zu validieren. Wenn die Abfrage gültig ist, werden maximal 50 aus der Abfrage abgerufene Datensätze in einer Tabelle angezeigt. Wenn die Abfrage nicht gültig ist, werden entsprechende Fehlermeldungen angezeigt. Wenn Sie die Abfragezeichenfolge manuell bearbeiten, muss die Abfrage gültig sein und über diese Schaltfläche validiert werden, damit die Schaltfläche Weiter aktiviert werden kann.

    Notiz

    Während der Laufzeit eines Operation wird die Begrenzung auf 50 Datensätze nicht erzwungen, sofern sie nicht im Feld Paging angegeben ist (siehe oben).

  • Zurück: Klicken Sie hier, um die Konfiguration für diesen Schritt vorübergehend zu speichern und zum vorherigen Schritt zurückzukehren.

  • Weiter: Klicken Sie hier, um die Konfiguration für diesen Schritt vorübergehend zu speichern und mit dem nächsten Schritt fortzufahren. Die Konfiguration wird erst gespeichert, wenn Sie im letzten Schritt auf die Schaltfläche Fertig klicken.

  • Änderungen verwerfen Klicken Sie nach dem Vornehmen von Änderungen hierauf, um die Konfiguration zu schließen, ohne die an einem Schritt vorgenommenen Änderungen zu speichern. Sie werden in einer Meldung aufgefordert, zu bestätigen, dass Sie die Änderungen verwerfen möchten.

Schritt 4: Überprüfen der Datenschemata

Alle Anforderungs- oder Antwortschemata werden angezeigt. Jedes Benutzeroberflächenelement dieses Schritts wird unten beschrieben.

Google BigQuery Abfrageaktivitätskonfiguration Schritt 4

  • Datenschemata: Diese Datenschemata werden von benachbarten Transformations übernommen und beim Transformation erneut angezeigt.

    Der Google BigQuery Konnektor verwendet die Google SDK-Version 25.4.0. Informationen zu den Schema und -feldern finden Sie in der SDK-Dokumentation.

    Die Abfrage-Aktivität verwendet JSON in ihrem Schema.

  • Aktualisieren: Klicken Sie auf das Aktualisierungssymbol oder das Wort Aktualisieren, um Schemas vom Google BigQuery Endpoint neu zu generieren. Diese Aktion generiert ein Schema auch an anderen Stellen im gesamten Projekt neu, an denen auf dasselbe Schema verwiesen wird, z. B. in einer angrenzenden Transformation.

  • Zurück: Klicken Sie hier, um die Konfiguration für diesen Schritt vorübergehend zu speichern und zum vorherigen Schritt zurückzukehren.

  • Fertig: Klicken Sie, um die Konfiguration für alle Schritte zu speichern und die Aktivitätskonfiguration zu schließen.

  • Änderungen verwerfen Klicken Sie nach dem Vornehmen von Änderungen hierauf, um die Konfiguration zu schließen, ohne die an einem Schritt vorgenommenen Änderungen zu speichern. Sie werden in einer Meldung aufgefordert, zu bestätigen, dass Sie die Änderungen verwerfen möchten.

Nächste Schritte

Nachdem Sie eine Google BigQuery Query-Aktivität konfiguriert haben, schließen Sie die Konfiguration des Operation ab, indem Sie andere Aktivitäten, Transformations oder Scripts als Operation hinzufügen und konfigurieren. Sie können auch die Operation konfigurieren, die die Möglichkeit umfassen, Vorgänge zu verketten, die sich im gleichen oder in unterschiedlichen Workflows befinden.

Auf Menüaktionen für eine Aktivität kann über den Projektbereich und die Design-Canvas zugegriffen werden. Weitere Informationen finden Sie unter Aktionsmenü in Connector-Grundlagen.

Mit diesen Operation können Google BigQuery Query-Aktivitäten als Quelle verwendet werden:

Um die Aktivität mit Skriptfunktionen zu verwenden, schreiben Sie die Daten an einen temporären Speicherort und verwenden Sie dann diesen temporären Speicherort in der Skriptfunktion.

Wenn Sie bereit sind, einsetzen und ausführen den Operation und validieren Sie das Verhalten durch Überprüfen der Operation.