Actividad de fusión de Snowflake
Introducción
Una actividad Fusionar de Snowflake, que utiliza su conexión de Snowflake, inserta o actualiza un archivo CSV de datos de tabla en Snowflake y está pensado para usarse como destino para consumir datos en una operación. La actividad Fusionar de Snowflake no permite eliminar un registro existente.
Nota
La actividad Fusionar de Snowflake es similar a una actividad de inserción y actualización que se utiliza en otros conectores.
Crear una actividad de fusión de Snowflake
Se crea una instancia de una actividad Merge de Snowflake a partir de una conexión Snowflake utilizando su tipo de actividad Fusionar.
Para crear una instancia de una actividad, arrastre el tipo de actividad al tela de diseño o copie el tipo de actividad y péguelo en el tela de diseño. Para obtener más detalles, consulte Creación de una instancia de actividad en Reutilización de componentes.
Se puede editar una actividad de Fusionar Snowflake existente desde estas ubicaciones:
- El tela de diseño (vea menú de acciones del componente en Lienzo de diseño).
- La pestaña Componentes del panel del proyecto (vea menú de acciones de componentes en la pestañaComponentes del panel Proyecto).
Configurar una actividad de combinación de Snowflake
Siga estos pasos para configurar una actividad Fusionar de Snowflake:
-
Paso 1: Ingrese un nombre y seleccione una tabla
Proporcione un nombre para la actividad y seleccione una tabla. -
Paso 2: Seleccionar claves de combinación
Especifique las columnas que se utilizarán para las claves de combinación. -
Paso 3: Seleccione un enfoque
Se admiten distintos enfoques para fusionar datos en Snowflake. Elija entre Mapeo directo o Archivo de etapa. Cuando utilice el enfoque Archivo de etapa, puede seleccionar las opciones Usar etapa existente o Usar etapa temporal. -
Paso 4: Revisar los esquemas de datos
Se muestran los esquemas de solicitud y respuesta generados desde el extremo. Los esquemas que se muestran dependen del enfoque especificado en el paso anterior.
Paso 1: Ingrese un nombre y seleccione una tabla
En este paso, proporcione un nombre para la actividad y seleccione una tabla. A continuación se describe cada elemento de la interfaz de usuario de este paso.
-
Nombre: Ingrese un nombre para identificar la actividad. El nombre debe ser único para cada actividad de Fusionar de Snowflake y no debe contener barras diagonales.
/
o dos puntos:
. -
Seleccionar una tabla: Esta sección muestra las tablas disponibles en el extremo de Snowflake. Al volver a abrir una configuración de actividad existente, solo se muestra la tabla seleccionada en lugar de volver a cargar la lista completa de tablas.
-
Tabla seleccionada: Después de seleccionar una tabla, esta aparece aquí.
-
Buscar: Ingrese el valor de cualquier columna en el cuadro de búsqueda para filtrar la lista de tablas. La búsqueda no distingue entre mayúsculas y minúsculas. Si ya se muestran tablas dentro de la tabla, los resultados de la tabla se filtran en tiempo real con cada pulsación de tecla. Para volver a cargar las tablas desde el extremo al realizar una búsqueda, ingrese los criterios de búsqueda y luego actualice, como se describe a continuación.
-
Actualizar: Haga clic en el icono de actualización o la palabra Refresh para recargar las tablas desde el extremo de Snowflake. Esto puede resultar útil si se han agregado tablas a Snowflake. Esta acción actualiza todos los metadatos utilizados para crear la tabla de tablas que se muestra en la configuración.
-
Selección de una tabla: Dentro de la tabla, haga clic en cualquier parte de una fila para seleccionar una tabla. Solo se puede seleccionar una tabla. La información disponible para cada tabla se obtiene desde el extremo de Snowflake:
-
Nombre: El nombre de una tabla.
-
Tipo: El tipo, que es una tabla.
-
Consejo
Si la tabla no se completa con las tablas disponibles, la conexión Snowflake puede no funcionar correctamente. Asegúrese de estar conectado volviendo a abrir la conexión y volviendo a probar las credenciales.
-
-
Guardar y salir: Si está habilitado, haga clic para guardar la configuración de este paso y cerrar la configuración de la actividad.
-
Siguiente: Haga clic para almacenar temporalmente la configuración de este paso y continuar con el siguiente paso. La configuración no se guardará hasta que haga clic en el botón Terminado en el último paso.
-
Descartar cambios: Después de realizar cambios, haga clic para cerrar la configuración sin guardar los cambios realizados en ningún paso. Un mensaje le solicitará que confirme que desea descartar los cambios.
Paso 2: Seleccionar claves de combinación
En este paso, especifique las columnas que se utilizarán para las claves de combinación. A continuación, se describe cada elemento de la interfaz de usuario de este paso.
-
Claves de fusión: Seleccione las columnas que se utilizarán como claves de actualización para la fusión.
-
Atrás: Haga clic para almacenar temporalmente la configuración de este paso y volver al paso anterior.
-
Siguiente: Haga clic para almacenar temporalmente la configuración de este paso y continuar con el siguiente paso. La configuración no se guardará hasta que haga clic en el botón Terminado en el último paso.
-
Descartar cambios: Después de realizar cambios, haga clic para cerrar la configuración sin guardar los cambios realizados en ningún paso. Un mensaje le solicitará que confirme que desea descartar los cambios.
Paso 3: Seleccionar un enfoque
Se admiten distintos enfoques para fusionar datos en Snowflake. Elija entre Mapeo directo o Archivo de etapa. Cuando utilice el enfoque Archivo de etapa, seleccione las opciones Usar etapa existente o Usar etapa temporal.
- Enfoque de mapeo directo
- Enfoque de archivo de etapa (utilizar etapa existente)
- Enfoque de archivo de etapa (utilizar etapa temporal)
Enfoque de mapeo directo
-
Enfoque: Utilice el menú desplegable para seleccionar Mapeo directo.
-
Nombre de escenario temporal: Ingrese un nombre que se usará para un escenario temporal en Snowflake.
-
Atrás: Haga clic para almacenar temporalmente la configuración de este paso y regresar al paso anterior.
-
Siguiente: Haga clic para almacenar temporalmente la configuración de este paso y continuar con el siguiente paso. La configuración no se guardará hasta que haga clic en el botón Finalizado en el último paso.
-
Descartar cambios: Después de realizar cambios, haga clic para cerrar la configuración sin guardar los cambios realizados en ninguna paso. Un mensaje le solicitará que confirme que desea descartar los cambios.
Enfoque de archivo de etapa (utilizar etapa existente)
-
Enfoque: Utilice el menú desplegable para seleccionar Archivo de etapa.
-
Tipo de etapa: Utilice el menú desplegable para seleccionar Usar etapa existente.
-
Seleccionar una etapa: Esta sección muestra las etapas disponibles en el extremo de Snowflake. Al volver a abrir una etapa existente configuración de la actividad, solo se muestra la etapa seleccionada en lugar de recargar toda la lista de etapas.
-
Etapa seleccionada: Después de seleccionar una etapa, esta aparece aquí.
-
Buscar: Ingrese el valor de cualquier columna en el cuadro de búsqueda para filtrar la lista de etapas. La búsqueda no es Distingue entre mayúsculas y minúsculas. Si ya se muestran tablas dentro de la tabla, los resultados de la tabla se filtran en tiempo real con cada pulsación de tecla. Para volver a cargar las tablas desde el extremo durante la búsqueda, introduzca los criterios de búsqueda y, a continuación, actualice. como se describe a continuación.
-
Actualizar: Haga clic en el icono de actualización o la palabra Refrescar a recargar tablas desde el extremo de Snowflake. Esto puede ser útil si ha agregado recientemente tablas a Snowflake. Esta acción actualiza todos los metadatos utilizados para crear la tabla de tablas mostradas en la configuración.
-
Selección de una etapa: Dentro de la tabla, haga clic en cualquier parte de una fila para seleccionar una etapa. Solo se puede seleccionar una etapa. seleccionado. La información disponible para cada etapa se obtiene del extremo de Snowflake:
-
Nombre: El nombre artístico de Snowflake.
-
Tipo: El tipo de etapa de Snowflake. Para obtener información sobre las diferencias entre las etapas internas y externas, consulte la documentación de Snowflake sobre crear etapas.
-
Consejo
Si la tabla no se completa con las etapas disponibles, la conexión Snowflake puede no funcionar correctamente. Asegúrese de estar conectado volviendo a abrir la conexión y volviendo a probar las credenciales.
-
-
Atrás: Haga clic para almacenar temporalmente la configuración de este paso y volver al paso anterior.
-
Siguiente: Haga clic para almacenar temporalmente la configuración de este paso y continuar con el siguiente paso. La configuración no se guardará hasta que haga clic en el botón Terminado en el último paso.
-
Descartar cambios: Después de realizar cambios, haga clic para cerrar la configuración sin guardar los cambios realizados en ningún paso. Un mensaje le solicitará que confirme que desea descartar los cambios.
Enfoque de archivo de etapa (Usar etapa temporal)
-
Enfoque: Utilice el menú desplegable para seleccionar Archivo de etapa.
-
Tipo de escenario: Utilice el menú desplegable para seleccionar Usar escenario temporal.
-
Nombre de escenario temporal: Ingrese un nombre que se usará para un escenario temporal en Snowflake.
-
Atrás: Haga clic para almacenar temporalmente la configuración de este paso y regresar al paso anterior.
-
Siguiente: Haga clic para almacenar temporalmente la configuración de este paso y continuar con el siguiente paso. La configuración no se guardará hasta que haga clic en el botón Finalizado en el último paso.
-
Descartar cambios: Después de realizar cambios, haga clic para cerrar la configuración sin guardar los cambios realizados en ninguna paso. Un mensaje le solicitará que confirme que desea descartar los cambios.
Paso 4: Revisar los esquemas de datos
Se muestran los esquemas de solicitud y respuesta generados desde el extremo. Los esquemas que se muestran dependen del enfoque especificado en el paso anterior.
Estas subsecciones describen las estructuras de solicitud y respuesta para cada enfoque:
Estas acciones están disponibles con cada enfoque:
-
Esquemas de datos: Estos esquemas de datos son heredados por transformaciones adyacentes y se muestran nuevamente durante el mapeo de transformación.
Nota
Los datos suministrados en una transformación tienen prioridad sobre la configuración de la actividad.
El conector Snowflake utiliza versión 3.19.0 del controlador JDBC de Snowflake, y los comandos SQL de Snowflake. Consulte la documentación de la API para obtener información sobre los nodos y campos del esquema.
-
Actualizar: Haga clic en el icono de actualización o la palabra Refrescar a regenerar esquemas desde el extremo. Esta acción también regenera el esquema en otras ubicaciones a lo largo de el proyecto donde se hace referencia al mismo esquema, como en una transformación adyacente.
-
Atrás: Haga clic para almacenar temporalmente la configuración de este paso y regresar al paso anterior.
-
Terminado: Haga clic para guardar la configuración de todos los pasos y cerrar la configuración de la actividad.
-
Descartar cambios: Después de realizar cambios, haga clic para cerrar la configuración sin guardar los cambios realizados en ninguna paso. Un mensaje le solicitará que confirme que desea descartar los cambios.
Enfoque de mapeo directo
Estos son los campos de esquema visibles en la captura de pantalla de ejemplo anterior:
-
Pedido
Campo/Nodo del esquema de solicitud Notas updateRequest
Nodo de la solicitud de fusión. _ table
_Nodo que muestra el nombre de la tabla NOMBRE. item
Nodo del artículo. column_A
Valor para el nombre de la primera columna, COLOR. column_B
Valor para el nombre de la segunda columna, FLOR. . . .
Valores para las columnas de la tabla siguientes. -
Respuesta
Campo/nodo del esquema de respuesta Notas mergeResponse
Nodo de la respuesta de fusión. noOfRowsUpdated
Conteo de filas actualizadas. noOfRowsInserted
Conteo de filas insertadas. errors
Nodo de los errores. item
Nodo de los elementos de error. errorMessage
Mensaje de error para el elemento de error.
Enfoque de archivo de etapa
Estos son los campos de esquema visibles en la captura de pantalla de ejemplo anterior:
-
Pedido
Campo/Nodo del esquema de solicitud Notas mergeRequest
Nodo de la solicitud de fusión. stageName
Ruta o prefijo bajo el cual se cargarán los datos en la etapa Snowflake. fileContent
Contenido del archivo de datos, en formato CSV, que se preparará para su actualización en la tabla Snowflake. destPrefix
Prefijo del archivo de destino que se utilizará en la etapa Snowflake. destFileName
Nombre del archivo de destino que se utilizará en la etapa Snowflake. Importante
Si se selecciona Usar etapa existente y el Tipo de la etapa seleccionada es externa,
stageName
yfileContent
están excluidos del esquema de solicitud.Para obtener información sobre las diferencias entre las etapas internas y externas, consulte la documentación de Snowflake sobre creación de etapas.
-
Respuesta
Campo/Nodo del esquema de respuesta Notas mergeResponse
Nodo de la respuesta de fusión. noOfRowsUpdated
Conteo de filas actualizadas. noOfRowsInserted
Conteo de filas insertadas. errors
Nodo de los errores. item
Nodo de los elementos de error. errorMessage
Mensaje de error para el elemento de error.
Próximos pasos
Después de configurar una actividad Merge de Snowflake, complete la configuración de la operación agregando y configurando otras actividades, transformaciones o secuencias de comandos como pasos de la operación. También puede configurar los ajustes de la operación, que incluyen la capacidad de encadenar operaciones que se encuentran en el mismo flujo de trabajo o en flujos de trabajo diferentes.
Se puede acceder a las acciones del menú de una actividad desde el panel del proyecto y el tela de diseño. Para obtener más información, consulte menú de acciones de la actividad en Conceptos básicos del conector.
Las actividades de Fusionar de Snowflake se pueden usar como un objetivo con estos patrones de operación:
- Patrón de Transformación
- Patrón de dos transformaciones (como primer o segundo objetivo)
Para utilizar la actividad con funciones de script, escriba los datos en una ubicación temporal y luego use esa ubicación temporal en la función de script.
Cuando esté listo, desplegar y ejecute la operación y validar el comportamiento comprobando los registros de operación.