Actividad de Fusión de Copos de Snowflake
Introducción
Una actividad Snowflake Fusionar, usando su conexión Snowflake, inserta o actualiza un archivo CSV de datos de tabla en Snowflake y está diseñado para usarse como destino para consumir datos en una operación. La actividad Snowflake Fusionar no admite la eliminación de un registro existente.
Nota
La actividad Fusionar de Snowflake es similar a una actividad upsert utilizada en otros conectores.
Crear una Actividad de Combinación de Copos de Snowflake
Se crea una instancia de una actividad Snowflake Fusionar a partir de una conexión Snowflake usando su tipo de actividad Fusionar.
Para crear una instancia de una actividad, arrastre el tipo de actividad al tela de diseño o cópielo y péguelo en el tela de diseño. Para obtener más información, consulte Creación de una instancia de actividad en Reutilización de componentes.
Una actividad Fusionar de Snowflake existente se puede editar desde estas ubicaciones:
- El tela de diseño (consulte Menú de acciones de componentes en Tela de Diseño).
- La pestaña Componentes del panel del proyecto (consulte Menú de acciones de componentes en Pestaña Componentes del panel de proyecto).
Configurar una Actividad de Combinación de Copos de Snowflake
Siga estos pasos para configurar una actividad Fusionar de Snowflake:
-
Paso 1: Ingrese un nombre y seleccione una mesa
Proporcione un nombre para la actividad y seleccione una mesa. -
Paso 2: Seleccione Combinar claves
Especifique las columnas que se utilizarán para las claves de combinación. -
Paso 3: Seleccione un enfoque
Se admiten diferentes enfoques para fusionar datos en Snowflake. Elija entre Mapeo directo o Archivo de escenario. Al utilizar el enfoque Archivo de etapa, puede seleccionar las opciones Usar etapa existente o Usar etapa temporal. -
Paso 4: revisar los esquemas de datos
Se muestran los esquemas de solicitud y respuesta generados desde el extremo. Los esquemas mostrados dependen del Enfoque especificado en el paso anterior.
Paso 1: Ingrese un Nombre y Seleccione una Mesa
En este paso, proporcione un nombre para la actividad y seleccione una tabla. Cada elemento de la interfaz de usuario de este paso se describe a continuación.
-
Nombre: Introduzca un nombre para identificar la actividad. El nombre debe ser único para cada actividad Fusionar de Snowflake y no debe contener barras diagonales
/
o dos puntos:
. -
Seleccione una tabla: Esta sección muestra las tablas disponibles en el extremo de Snowflake. Al volver a abrir una configuración de actividad existente, solo se muestra la tabla seleccionada en lugar de recargar toda la lista de tablas.
-
Tabla seleccionada: Después de seleccionar una tabla, aparece aquí.
-
Buscar: Ingrese el valor de cualquier columna en el cuadro de búsqueda para filtrar la lista de tablas. La búsqueda no distingue entre mayúsculas y minúsculas. Si las tablas ya se muestran dentro de la tabla, los resultados de la tabla se filtran en tiempo real con cada pulsación de tecla. Para recargar tablas desde el extremo durante la búsqueda, ingrese los criterios de búsqueda y luego actualice, como se describe a continuación.
-
Actualizar: Haga clic en el icono de actualización o la palabra Actualizar para recargar tablas desde el extremo de Snowflake. Esto puede resultar útil si se han agregado tablas a Snowflake. Esta acción actualiza todos los metadatos utilizados para crear la tabla de tablas que se muestra en la configuración.
-
Seleccionar una tabla: Dentro de la tabla, haga clic en cualquier lugar de una fila para seleccionar una tabla. Sólo se puede seleccionar una tabla. La información disponible para cada tabla se obtiene del extremo de Snowflake:
-
Nombre: El nombre de una tabla.
-
Tipo: El tipo, que es una tabla.
-
Consejo
Si la tabla no se completa con las tablas disponibles, la conexión Snowflake puede no tener éxito. Asegúrese de estar conectado volviendo a abrir la conexión y volviendo a probar las credenciales.
-
-
Guardar y salir: Si está habilitado, haga clic para guardar la configuración para este paso y cerrar la configuración de la actividad.
-
Siguiente: Haga clic para almacenar temporalmente la configuración para este paso y continuar con el siguiente. La configuración no se guardará hasta que haga clic en el botón Finalizado en el último paso.
-
Descartar cambios: Después de realizar cambios, haga clic para cerrar la configuración sin guardar los cambios realizados en ningún paso. Un mensaje le pide que confirme que desea descartar los cambios.
Paso 2: Seleccione Combinar Claves
En este paso, especifique las columnas que se utilizarán para las claves de combinación. Cada elemento de la interfaz de usuario de este paso se describe a continuación.
-
Claves de combinación: Seleccione las columnas que se utilizarán como claves de actualización para la combinación.
-
Volver: Haga clic para almacenar temporalmente la configuración de este paso y volver al paso anterior.
-
Siguiente: Haga clic para almacenar temporalmente la configuración para este paso y continuar con el siguiente. La configuración no se guardará hasta que haga clic en el botón Finalizado en el último paso.
-
Descartar cambios: Después de realizar cambios, haga clic para cerrar la configuración sin guardar los cambios realizados en ningún paso. Un mensaje le pide que confirme que desea descartar los cambios.
Paso 3: Seleccione un Enfoque
Se admiten diferentes enfoques para fusionar datos en Snowflake. Elija entre Mapeo directo o Archivo de escenario. Cuando se utiliza el método Archivo de etapa, se seleccionan las opciones Usar etapa existente o Usar etapa temporal.
- Enfoque de mapeo directo
- Enfoque de archivo de etapa (usar etapa existente)
- Enfoque de archivo de etapa (usar etapa temporal)
Enfoque de Mapeo Directo
-
Enfoque: Utilice el menú desplegable para seleccionar Mapeo directo.
-
Nombre de etapa temporal: Ingrese un nombre que se usará para una etapa temporal en Snowflake.
-
Volver: Haga clic para almacenar temporalmente la configuración de este paso y volver al paso anterior.
-
Siguiente: Haga clic para almacenar temporalmente la configuración para este paso y continuar con el siguiente. El la configuración no se guardará hasta que haga clic en el botón Finalizado en el último paso.
-
Descartar cambios: Después de realizar cambios, haga clic para cerrar la configuración sin guardar los cambios realizados en ningún paso. Un mensaje le pide que confirme que desea descartar los cambios.
Enfoque de Archivo de Etapa (usar Etapa Existente)
-
Enfoque: Utilice el menú desplegable para seleccionar Stage File.
-
Tipo de etapa: Utilice el menú desplegable para seleccionar Usar etapa existente.
-
Seleccione una etapa: Esta sección muestra las etapas disponibles en el extremo de Snowflake. Al reabrir una existente configuración de actividad, solo se muestra la etapa seleccionada en lugar de recargar toda la lista de etapas.
-
Etapa seleccionada: Después de seleccionar una etapa, se enumera aquí.
-
Buscar: Ingrese el valor de cualquier columna en el cuadro de búsqueda para filtrar la lista de etapas. La búsqueda no es distingue entre mayúsculas y minúsculas. Si las tablas ya se muestran dentro de la tabla, los resultados de la tabla se filtran en tiempo real con cada pulsación de tecla. Para recargar tablas desde el extremo durante la búsqueda, ingrese los criterios de búsqueda y luego actualice, como se describe a continuación.
-
Actualizar: Haga clic en el icono de actualización o la palabra Actualizar para recargar tablas desde el extremo de Snowflake. Esto puede ser útil si ha agregado recientemente tablas para Snowflake. Esta acción actualiza todos los metadatos utilizados para crear el tabla de tablas que se muestran en la configuración.
-
Seleccionar una etapa: Dentro de la tabla, haga clic en cualquier lugar de una fila para seleccionar una etapa. Sólo una etapa puede ser seleccionado. La información disponible para cada etapa se obtiene del extremo de Snowflake:
-
Nombre: El nombre artístico de Snowflake.
-
Tipo: El tipo de escenario de Snowflake. Para obtener información sobre las diferencias entre etapas internas y externas, consulte la documentación de Snowflake sobre creación de etapas.
-
Consejo
Si la tabla no se completa con las etapas disponibles, la conexión Snowflake puede no tener éxito. Asegúrese de estar conectado volviendo a abrir la conexión y volviendo a probar las credenciales.
-
-
Volver: Haga clic para almacenar temporalmente la configuración de este paso y volver al paso anterior.
-
Siguiente: Haga clic para almacenar temporalmente la configuración para este paso y continuar con el siguiente. El la configuración no se guardará hasta que haga clic en el botón Finalizado en el último paso.
-
Descartar cambios: Después de realizar cambios, haga clic para cerrar la configuración sin guardar los cambios realizados en ningún paso. Un mensaje le pide que confirme que desea descartar los cambios.
Enfoque de Archivo de Etapa (usar Etapa Temporal)
-
Enfoque: Utilice el menú desplegable para seleccionar Stage File.
-
Tipo de etapa: Utilice el menú desplegable para seleccionar Usar etapa temporal.
-
Nombre de etapa temporal: Ingrese un nombre que se usará para una etapa temporal en Snowflake.
-
Volver: Haga clic para almacenar temporalmente la configuración de este paso y volver al paso anterior.
-
Siguiente: Haga clic para almacenar temporalmente la configuración para este paso y continuar con el siguiente. El la configuración no se guardará hasta que haga clic en el botón Finalizado en el último paso.
-
Descartar cambios: Después de realizar cambios, haga clic para cerrar la configuración sin guardar los cambios realizados en ningún paso. Un mensaje le pide que confirme que desea descartar los cambios.
Paso 4: Revisar los Esquemas de Datos
Se muestran los esquemas de solicitud y respuesta generados desde el extremo. Los esquemas mostrados dependen del Enfoque especificado en el paso anterior.
Estas subsecciones describen las estructuras de solicitud y respuesta para cada enfoque:
Estas acciones están disponibles con cada enfoque:
-
Esquemas de datos: Estos esquemas de datos se heredan mediante transformaciones adyacentes y se muestran nuevamente durante asignación de transformación.
Nota
Los datos proporcionados en una transformación tienen prioridad sobre la configuración de la actividad.
El conector Snowflake utiliza el Controlador JDBC Snowflake y los comandos SQL de Snowflake. Consulte la documentación de la API para obtener información sobre los campos y nodos del esquema.
-
Actualizar: Haga clic en el icono de actualización o la palabra Actualizar para regenerar esquemas desde el extremo. Esta acción también regenera el esquema en otras ubicaciones a lo largo el proyecto donde se hace referencia al mismo esquema, como en una transformación adyacente.
-
Volver: Haga clic para almacenar temporalmente la configuración de este paso y volver al paso anterior.
-
Terminado: Haga clic para guardar la configuración de todos los pasos y cerrar la configuración de la actividad.
-
Descartar cambios: Después de realizar cambios, haga clic para cerrar la configuración sin guardar los cambios realizados en ningún paso. Un mensaje le pide que confirme que desea descartar los cambios.
Enfoque de Mapeo Directo
Estos son los campos de esquema visibles en la captura de pantalla de ejemplo anterior:
-
Pedido
Solicitar campo/nodo de esquema Notas updateRequest
Nodo de la solicitud de fusión. table
Nodo que muestra el nombre de la tabla NOMBRE. item
Nodo del artículo. column_A
Valor para el nombre de la primera columna, COLOR. column_B
Valor para el nombre de la segunda columna, FLOWER. . . .
Valores para las columnas siguientes de la tabla. -
Respuesta
Campo/nodo del esquema de respuesta Notas mergeResponse
Nodo de la respuesta de fusión. noOfRowsUpdated
Recuento de filas actualizado. noOfRowsInserted
Recuento de las filas insertadas. errors
Nodo de los errores. item
Nodo de los elementos de error. errorMessage
Mensaje de error para el elemento de error.
Enfoque de Archivo por Etapas
Estos son los campos de esquema visibles en la captura de pantalla de ejemplo anterior:
-
Pedido
Solicitar campo/nodo de esquema Notas mergeRequest
Nodo de la solicitud de fusión. stageName
Ruta o prefijo bajo el cual se cargarán los datos en el escenario Snowflake. fileContent
Contenido del archivo de datos, en formato CSV, que se preparará para su actualización en la tabla Snowflake. destPrefix
Prefijo del archivo de destino que se utilizará en el escenario Snowflake. destFileName
Nombre del archivo de destino que se utilizará en el escenario Snowflake. Importante
Si se selecciona Usar etapa existente y el Tipo de la etapa seleccionada es externo,
stageName
yfileContent
están excluidos del esquema de solicitud.Para obtener información sobre las diferencias entre las etapas internas y externas, consulte la documentación de Snowflake sobre creación de etapas.
-
Respuesta
Campo/nodo del esquema de respuesta Notas mergeResponse
Nodo de la respuesta de fusión. noOfRowsUpdated
Recuento de filas actualizado. noOfRowsInserted
Recuento de las filas insertadas. errors
Nodo de los errores. item
Nodo de los elementos de error. errorMessage
Mensaje de error para el elemento de error.
Próximos Pasos
Después de configurar una actividad Merge de Snowflake, complete la configuración de la operación agregando y configurando otras actividades, transformaciones o secuencias de comandos como pasos de la operación. También puede configurar los ajustes de operación, que incluyen la capacidad de encadenar operaciones que se encuentran en el mismo flujos de trabajo o en diferentes.
Se puede acceder a las acciones del menú para una actividad desde el panel del proyecto y el tela de diseño. Para obtener más información, consulte Menú de acciones de actividad en Conceptos básicos del conector.
Las actividades de Snowflake Merge se pueden utilizar como objetivo con estos patrones de operación:
- Patrón de transformación
- Patrón de dos transformaciones (como primer o segundo objetivo)
Para usar la actividad con funciones de secuencias de comandos, escriba los datos en una ubicación temporal y luego use esa ubicación temporal en la función de secuencias de comandos.
Cuando esté listo, desplegar y ejecutar la operación y validar el comportamiento comprobando los registros de operación.