Google BigQuery Aktivität „Struktur erstellen“
Einführung
Eine Google BigQuery Aktivität Struktur erstellen unter Verwendung ihrer Google BigQuery-Verbindung, erstellt Datasets oder Tabellen in Google BigQuery und soll als Ziel zum Verbrauchen von Daten in einer Operation verwendet werden.
Kontingente und Limits
Google BigQuery erzwingt Kontingente und Limits, die die Rate und das Volumen der erstellten Strukturen begrenzen. Wenn diese Limits erreicht sind, kann der Operation mit einem Success
Operation, auch wenn nicht alle angeforderten Strukturen erstellt werden. Überprüfen Sie die Operation auf vom Google BigQuery SDK zurückgegebene Ratenbegrenzungsfehler. Weitere Informationen finden Sie in der Google-Dokumentation.
Erstellen einer Google BigQuery Aktivität „Struktur erstellen“
Eine Instanz einer Google BigQuery Aktivität Struktur erstellen wird aus einer Google BigQuery-Verbindung erstellt mithilfe des Aktivitätstyps Struktur erstellen.
Um eine Instanz einer Aktivität zu erstellen, ziehen Sie den Aktivitätstyp auf die Design-Canvas oder kopieren Sie ihn und fügen Sie ihn dort ein. Weitere Informationen finden Sie unter Erstellen einer Aktivitäts- oder Tool-Instanz in Komponentenwiederverwendung.
Eine vorhandene Google BigQuery Aktivität Struktur erstellen kann an diesen Stellen bearbeitet werden:
- Die Design-Canvas (siehe Aktionsmenü in Design-Leinwand).
- Die Tab Komponenten im Projektbereich (siehe Aktionsmenü im Projektbereich Tab Komponenten).
Konfigurieren einer Google BigQuery Aktivität „Struktur erstellen“
Führen Sie die folgenden Schritte aus, um eine Google BigQuery Aktivität Struktur erstellen zu konfigurieren:
-
Schritt 1: Geben Sie einen Namen ein und wählen Sie ein Objekt aus
Geben Sie einen Namen für die Aktivität ein und wählen Sie ein Objekt aus. -
Schritt 2: Unterobjekt auswählen
Wählen Sie ein Unterobjekt aus. -
Schritt 3: Datenschemata überprüfen
Alle Anfrage- und Antwortschemata werden angezeigt.
Schritt 1: Name eingeben und Objekt auswählen
Geben Sie in diesem Schritt einen Namen für die Aktivität ein und wählen Sie ein Objekt aus. Jedes Benutzeroberflächenelement dieses Schritts wird unten beschrieben.
-
Name: Geben Sie einen Namen zur Identifizierung der Aktivität ein. Der Name muss für jede Google BigQuery Aktivität Struktur erstellen eindeutig sein und darf keine Schrägstriche enthalten.
/
oder Doppelpunkte:
. -
Objekt auswählen: In diesem Abschnitt werden die im Google BigQuery Endpoint verfügbaren Objekte angezeigt.
-
Ausgewähltes Objekt: Nachdem ein Objekt ausgewählt wurde, wird es hier aufgelistet.
-
Suchen: Geben Sie den Wert einer beliebigen Spalte in das Suchfeld ein, um die Objektliste zu filtern. Die Suche berücksichtigt keine Groß- und Kleinschreibung. Wenn in der Tabelle bereits Objekte angezeigt werden, werden die Tabellenergebnisse mit jedem Tastendruck in Echtzeit gefiltert. Um Objekte während der Suche vom Endpoint neu zu laden, geben Sie Suchkriterien ein und aktualisieren Sie anschließend die Tabelle, wie unten beschrieben.
-
Aktualisieren: Klicken Sie auf das Aktualisierungssymbol oder das Wort Aktualisieren, um Objekte vom Google BigQuery Endpoint neu zu laden. Dies kann nützlich sein, wenn Objekte zu Google BigQuery hinzugefügt wurden. Diese Aktion aktualisiert alle Metadaten, die zum Erstellen der in der Konfiguration angezeigten Objekttabelle verwendet wurden.
-
Objekt auswählen: Klicken Sie in der Tabelle auf eine beliebige Zeile, um ein Objekt auszuwählen. Es kann nur ein Objekt ausgewählt werden. Die für jedes Objekt verfügbaren Informationen werden vom Google BigQuery Endpoint abgerufen:
-
Name: Der Name des Objekts.
-
Beschreibung: Die Beschreibung des Objekts.
-
Tipp
Wenn die Tabelle nicht mit verfügbaren Objekten gefüllt wird, wird die Google BigQuery Verbindung ist möglicherweise nicht erfolgreich. Stellen Sie sicher, dass Sie verbunden sind, indem Sie die Verbindung erneut öffnen und die Anmeldeinformationen erneut testen.
-
-
Bei Fehler fortsetzen: Wählen Sie diese Option aus, um die Aktivitätsausführung fortzusetzen, wenn bei einem Datensatz in einer Batch-Anfrage ein Fehler auftritt. Eventuelle Fehler werden in das Operation geschrieben.
-
Rollback: Treten während der Strukturerstellung Fehler auf, macht diese Option (sofern aktiviert) alle vor dem Fehler vorgenommenen Änderungen rückgängig. Ist sie deaktiviert, bleiben alle vor dem Fehler vorgenommenen Änderungen erhalten.
-
Speichern & Beenden: Klicken Sie hier, um die Konfiguration für diesen Schritt zu speichern und die Aktivitätskonfiguration zu schließen.
-
Weiter: Klicken Sie hier, um die Konfiguration für diesen Schritt vorübergehend zu speichern und mit dem nächsten Schritt fortzufahren. Die Konfiguration wird erst gespeichert, wenn Sie im letzten Schritt auf die Schaltfläche Fertig klicken.
-
Änderungen verwerfen: Klicken Sie nach dem Vornehmen von Änderungen hier, um die Konfiguration zu schließen, ohne die Änderungen an einem Schritt zu speichern. Sie werden in einer Meldung aufgefordert, das Verwerfen der Änderungen zu bestätigen.
Schritt 2: Wählen Sie ein Unterobjekt aus
Wählen Sie in diesem Schritt ein Unterobjekt aus. Jedes Benutzeroberflächenelement dieses Schritts wird unten beschrieben.
-
Wählen Sie ein Unterobjekt aus: In diesem Abschnitt werden die im Google BigQuery Endpoint verfügbaren Unterobjekte angezeigt.
-
Ausgewähltes Objekt: Das im vorherigen Schritt ausgewählte Objekt wird hier aufgelistet.
-
Ausgewähltes Unterobjekt: Nachdem ein Unterobjekt ausgewählt wurde, wird es hier aufgelistet.
-
Suchen: Geben Sie den Wert einer beliebigen Spalte in das Suchfeld ein, um die Liste der Unterobjekte zu filtern. Die Suche berücksichtigt keine Groß- und Kleinschreibung. Wenn bereits Unterobjekte in der Tabelle angezeigt werden, werden die Tabellenergebnisse mit jedem Tastendruck in Echtzeit gefiltert. Um Unterobjekte während der Suche vom Endpoint neu zu laden, geben Sie Suchkriterien ein und aktualisieren Sie anschließend die Tabelle, wie unten beschrieben.
-
Aktualisieren: Klicken Sie auf das Aktualisierungssymbol oder das Wort Aktualisieren, um Unterobjekte vom Google BigQuery Endpoint neu zu laden. Dies kann nützlich sein, wenn Unterobjekte zu Google BigQuery hinzugefügt wurden. Diese Aktion aktualisiert alle Metadaten, die zum Erstellen der in der Konfiguration angezeigten Tabelle der Unterobjekte verwendet wurden.
-
Unterobjekt auswählen: Klicken Sie in der Tabelle auf eine beliebige Zeile, um ein Unterobjekt auszuwählen. Es kann nur ein Unterobjekt ausgewählt werden. Die für jedes Unterobjekt verfügbaren Informationen werden vom Google BigQuery Endpoint abgerufen:
-
Name: Der Name des Unterobjekts.
-
Beschreibung: Die Beschreibung des Unterobjekts.
-
Tipp
Wenn die Tabelle nicht mit verfügbaren Unterobjekten gefüllt wird, wird die Google BigQuery Verbindung ist möglicherweise nicht erfolgreich. Stellen Sie sicher, dass Sie verbunden sind, indem Sie die Verbindung erneut öffnen und die Anmeldeinformationen erneut testen.
-
-
Zurück: Klicken Sie hier, um die Konfiguration für diesen Schritt vorübergehend zu speichern und zum vorherigen Schritt zurückzukehren.
-
Weiter: Klicken Sie hier, um die Konfiguration für diesen Schritt vorübergehend zu speichern und mit dem nächsten Schritt fortzufahren. Die Konfiguration wird erst gespeichert, wenn Sie im letzten Schritt auf die Schaltfläche Fertig klicken.
-
Änderungen verwerfen: Klicken Sie nach dem Vornehmen von Änderungen hier, um die Konfiguration zu schließen, ohne die Änderungen an einem Schritt zu speichern. Sie werden in einer Meldung aufgefordert, das Verwerfen der Änderungen zu bestätigen.
Schritt 3: Überprüfen der Datenschemata
Alle Anforderungs- oder Antwortschemata werden angezeigt. Jedes Benutzeroberflächenelement dieses Schritts wird unten beschrieben.
-
Datenschemata: Diese Datenschemata werden von benachbarten Transformations übernommen und beim Transformation erneut angezeigt.
Der Google BigQuery Konnektor verwendet die Google SDK-Version 25.4.0. Informationen zu den Schema und -feldern finden Sie in der SDK-Dokumentation.
Die Aktivität Struktur erstellen verwendet JSON sowohl in ihren Anforderungs- als auch in ihren Antwortschemata.
Wichtig
Google BigQuery erzwingt Kontingente und Limits, die die Rate und das Volumen der erstellten Strukturen begrenzen. Wenn diese Limits erreicht sind, wird die Aktivität mit einem
Success
Operation, auch wenn nicht alle angeforderten Strukturen erstellt werden. Weitere Informationen finden Sie in der Google-Dokumentation.Info
Das Anfrageschema
columnDataType
Das Feld unterstützt die folgenden Datentypen (ohne Berücksichtigung der Groß- und Kleinschreibung):BIGNUMERIC
,BOOLEAN
,BYTES
,DATE
,DATETIME
,FLOAT
,GEOGRAPHY
,INTEGER
,INTERVAL
,JSON
,NUMERIC
,RECORD
,STRING
,TIME
, UndTIMESTAMP
. -
Aktualisieren: Klicken Sie auf das Aktualisierungssymbol oder das Wort Aktualisieren, um Schemas vom Google BigQuery Endpoint neu zu generieren. Diese Aktion generiert ein Schema auch an anderen Stellen im Projekt neu, an denen auf dasselbe Schema verwiesen wird, z. B. in einer angrenzenden Transformation.
-
Zurück: Klicken Sie hier, um die Konfiguration für diesen Schritt vorübergehend zu speichern und zum vorherigen Schritt zurückzukehren.
-
Fertig: Klicken Sie hier, um die Konfiguration für alle Schritte zu speichern und die Aktivitätskonfiguration zu schließen.
-
Änderungen verwerfen: Klicken Sie nach dem Vornehmen von Änderungen auf, um die Konfiguration zu schließen, ohne die Änderungen in einem Schritt zu speichern. Sie werden in einer Meldung aufgefordert, das Verwerfen der Änderungen zu bestätigen.
Nächste Schritte
Nachdem Sie eine Google BigQuery Aktivität Struktur erstellen konfiguriert haben, schließen Sie die Konfiguration des Operation ab, indem Sie andere Aktivitäten oder Tools hinzufügen und konfigurieren als Operation. Sie können auch die Operation konfigurieren, darunter die Möglichkeit, Vorgänge im selben oder in verschiedenen Workflows miteinander zu verketten.
Menüaktionen für eine Aktivität sind über den Projektbereich und die Design-Canvas zugänglich. Weitere Informationen finden Sie unter Aktionsmenü“ in Connector-Grundlagen.
Google BigQuery Struktur erstellen-Aktivitäten können als Ziel mit diesen Operation verwendet werden:
- Transformation
- Zwei-Transformationsmuster (als erstes oder zweites Ziel)
Um die Aktivität mit Skriptfunktionen zu verwenden, schreiben Sie die Daten an einen temporären Speicherort und verwenden Sie diesen temporären Speicherort dann in der Skriptfunktion.
Wenn Sie bereit sind, einsetzen und ausführen den Operation und validieren Sie das Verhalten, indem Sie die Operation.