Saltar al contenido

Actividad Crear Estructura de Google BigQuery

Introducción

Una actividad de Crear Estructura de Google BigQuery, utilizando su conexión de Google BigQuery, crea conjuntos de datos o tablas en Google BigQuery y está destinada a ser utilizada como un objetivo para consumir datos en una operación.

Cuotas y límites

Google BigQuery impone cuotas y límites, que restringen la tasa y el volumen de estructuras que se están creando. Cuando se alcanzan estos límites, la operación puede completarse con un estado de Success estado de operación incluso si no se crean todas las estructuras solicitadas. Verifique los registros de la operación para cualquier error de límite de tasa devuelto por el SDK de Google BigQuery. Para más información, consulte la documentación de Google.

Crear una actividad Crear Estructura de Google BigQuery

Una instancia de una actividad de Crear Estructura de Google BigQuery se crea a partir de una conexión de Google BigQuery utilizando su tipo de actividad Crear Estructura.

Para crear una instancia de una actividad, arrastre el tipo de actividad al lienzo de diseño o copie el tipo de actividad y pégalo en el lienzo de diseño. Para más detalles, consulte Crear una instancia de actividad o herramienta en Reutilización de componentes.

Una actividad existente de Crear Estructura de Google BigQuery se puede editar desde estas ubicaciones:

Configurar una actividad de Crear Estructura de Google BigQuery

Sigue estos pasos para configurar una actividad de Crear Estructura de Google BigQuery:

Paso 1: Ingresa un nombre y selecciona un objeto

En este paso, proporciona un nombre para la actividad y selecciona un objeto. Cada elemento de la interfaz de usuario de este paso se describe a continuación.

Configuración de la actividad de Crear Estructura de Google BigQuery paso 1

  • Nombre: Ingresa un nombre para identificar la actividad. El nombre debe ser único para cada actividad de Crear Estructura de Google BigQuery y no debe contener barras diagonales / ni dos puntos :.

  • Seleccionar Objeto: Esta sección muestra los objetos disponibles en el punto final de Google BigQuery.

    • Objeto Seleccionado: Después de seleccionar un objeto, se lista aquí.

    • Buscar: Ingresa el valor de cualquier columna en el cuadro de búsqueda para filtrar la lista de objetos. La búsqueda no distingue entre mayúsculas y minúsculas. Si los objetos ya se muestran en la tabla, los resultados de la tabla se filtran en tiempo real con cada pulsación de tecla. Para recargar objetos desde el punto final al buscar, ingresa criterios de búsqueda y luego actualiza, como se describe a continuación.

    • Actualizar: Haz clic en el ícono de actualizar o en la palabra Actualizar para recargar objetos desde el punto final de Google BigQuery. Esto puede ser útil si se han agregado objetos a Google BigQuery. Esta acción actualiza todos los metadatos utilizados para construir la tabla de objetos mostrada en la configuración.

    • Seleccionando un Objeto: Dentro de la tabla, haz clic en cualquier parte de una fila para seleccionar un objeto. Solo se puede seleccionar un objeto. La información disponible para cada objeto se obtiene del punto final de Google BigQuery:

      • Nombre: El nombre del objeto.

      • Descripción: La descripción del objeto.

    Consejo

    Si la tabla no se llena con los objetos disponibles, la conexión de Google BigQuery puede no ser exitosa. Asegúrate de estar conectado volviendo a abrir la conexión y volviendo a probar las credenciales.

  • Continuar en caso de error: Selecciona para continuar la ejecución de la actividad si se encuentra un error para un conjunto de datos en una solicitud por lotes. Si se encuentran errores, se escriben en el registro de operaciones.

  • Revertir: Si ocurren errores durante la creación de la estructura, esta opción (cuando está seleccionada) revierte cualquier cambio realizado antes del error. Si no está seleccionada, cualquier cambio realizado antes del error persistirá.

  • Guardar y salir: Si está habilitado, haz clic para guardar la configuración de este paso y cerrar la configuración de la actividad.

  • Siguiente: Haz clic para almacenar temporalmente la configuración de este paso y continuar al siguiente paso. La configuración no se guardará hasta que hagas clic en el botón Finalizado en el último paso.

  • Descartar cambios: Después de realizar cambios, haz clic para cerrar la configuración sin guardar los cambios realizados en ningún paso. Un mensaje te pedirá que confirmes que deseas descartar los cambios.

Paso 2: Seleccionar un subobjeto

En este paso, selecciona un subobjeto. Cada elemento de la interfaz de usuario de este paso se describe a continuación.

Configuración de la actividad Crear estructura de Google BigQuery paso 2

  • Seleccionar un subobjeto: Esta sección muestra los subobjetos disponibles en el punto final de Google BigQuery.

    • Objeto seleccionado: El objeto seleccionado en el paso anterior se enumera aquí.

    • Subobjeto seleccionado: Después de seleccionar un subobjeto, se enumera aquí.

    • Buscar: Ingresa el valor de cualquier columna en el cuadro de búsqueda para filtrar la lista de subobjetos. La búsqueda no distingue entre mayúsculas y minúsculas. Si los subobjetos ya se muestran en la tabla, los resultados de la tabla se filtran en tiempo real con cada pulsación de tecla. Para recargar subobjetos desde el punto final al buscar, ingresa criterios de búsqueda y luego actualiza, como se describe a continuación.

    • Actualizar: Haga clic en el ícono de actualizar o en la palabra Actualizar para recargar los sub-objetos desde el endpoint de Google BigQuery. Esto puede ser útil si se han agregado sub-objetos a Google BigQuery. Esta acción actualiza todos los metadatos utilizados para construir la tabla de sub-objetos que se muestra en la configuración.

    • Seleccionar un Sub-objeto: Dentro de la tabla, haga clic en cualquier parte de una fila para seleccionar un sub-objeto. Solo se puede seleccionar un sub-objeto. La información disponible para cada sub-objeto se obtiene del endpoint de Google BigQuery:

      • Nombre: El nombre del sub-objeto.

      • Descripción: La descripción del sub-objeto.

    Consejo

    Si la tabla no se llena con los sub-objetos disponibles, la conexión a Google BigQuery puede no ser exitosa. Asegúrese de estar conectado volviendo a abrir la conexión y volviendo a probar las credenciales.

  • Atrás: Haga clic para almacenar temporalmente la configuración de este paso y regresar al paso anterior.

  • Siguiente: Haga clic para almacenar temporalmente la configuración de este paso y continuar al siguiente paso. La configuración no se guardará hasta que haga clic en el botón Finalizado en el último paso.

  • Descartar Cambios: Después de realizar cambios, haga clic para cerrar la configuración sin guardar los cambios realizados en ningún paso. Un mensaje le pide que confirme que desea descartar los cambios.

Paso 3: Revisar los esquemas de datos

Cualquier esquema de solicitud o respuesta se muestra. Cada elemento de la interfaz de usuario de este paso se describe a continuación.

Configuración de la actividad Crear Estructura de Google BigQuery paso 3

  • Esquemas de Datos: Estos esquemas de datos son heredados por transformaciones adyacentes y se muestran nuevamente durante el mapeo de transformaciones.

    El conector de Google BigQuery utiliza la versión 25.4.0 del SDK de Google. Consulte la documentación del SDK para obtener información sobre los nodos y campos del esquema.

    La actividad Crear Estructura utiliza JSON tanto en sus esquemas de solicitud como de respuesta.

    Importante

    Google BigQuery impone cuotas y límites, que restringen la tasa y el volumen de estructuras que se están creando. Cuando se alcanzan estos límites, la actividad se completará con un Success estado de operación, incluso si no se crean todas las estructuras solicitadas. Para más información, consulta la documentación de Google.

    Info

    El campo columnDataType del esquema de solicitud admite estos tipos de datos (sin distinción entre mayúsculas y minúsculas): BIGNUMERIC, BOOLEAN, BYTES, DATE, DATETIME, FLOAT, GEOGRAPHY, INTEGER, INTERVAL, JSON, NUMERIC, RECORD, STRING, TIME y TIMESTAMP.

  • Actualizar: Haz clic en el ícono de actualizar o en la palabra Actualizar para regenerar esquemas desde el punto final de Google BigQuery. Esta acción también regenera un esquema en otras ubicaciones del proyecto donde se hace referencia al mismo esquema, como en una transformación adyacente.

  • Regresar: Haz clic para almacenar temporalmente la configuración de este paso y volver al paso anterior.

  • Terminado: Haz clic para guardar la configuración de todos los pasos y cerrar la configuración de la actividad.

  • Descartar Cambios: Después de realizar cambios, haz clic para cerrar la configuración sin guardar los cambios realizados en ningún paso. Un mensaje te pedirá que confirmes que deseas descartar los cambios.

Próximos pasos

Después de configurar una actividad de Google BigQuery Crear Estructura, completa la configuración de la operación agregando y configurando otras actividades o herramientas como pasos de operación. También puedes configurar los ajustes de la operación, que incluyen la capacidad de encadenar operaciones que están en los mismos o diferentes flujos de trabajo.

Las acciones del menú para una actividad son accesibles desde el panel del proyecto y el lienzo de diseño. Para más detalles, consulta Menú de acciones de actividad en Conceptos básicos de conectores.

Las actividades de Crear Estructura de Google BigQuery se pueden utilizar como un objetivo con estos patrones de operación:

Para utilizar la actividad con funciones de scripting, escriba los datos en una ubicación temporal y luego use esa ubicación temporal en la función de scripting.

Cuando esté listo, despliegue y ejecute la operación y valide el comportamiento revisando los registros de operación.