Actividad de Listar Objetos de Amazon S3
Introducción
Una actividad de Amazon S3 Listar Objetos, utilizando su conexión de Amazon S3, devuelve algunos o todos (hasta 100,000) de los objetos en un bucket de Amazon S3 y está destinada a ser utilizada como un objetivo para consumir datos en una operación.
Requisitos Previos
La actividad Listar Objetos requiere los siguientes permisos de Amazon S3:
Permiso necesario | Funcionalidad |
---|---|
s3:ListAllMyBuckets | Probar la conexión y recuperar metadatos de la actividad durante la configuración de la actividad |
s3:GetObject , s3:GetObjectTagging y s3:ListBucket | Ejecución de la actividad Listar Objetos |
Crear una actividad de Listar Objetos de Amazon S3
Una instancia de una actividad de Amazon S3 Listar Objetos se crea a partir de una conexión de Amazon S3 utilizando su tipo de actividad Listar Objetos.
Para crear una instancia de una actividad, arrastre el tipo de actividad al lienzo de diseño o copie el tipo de actividad y péguelo en el lienzo de diseño. Para más detalles, consulte Crear una instancia de actividad o herramienta en Reutilización de componentes.
Una actividad existente de Amazon S3 Listar Objetos se puede editar desde estas ubicaciones:
- El lienzo de diseño (ver Menú de acciones del componente en Lienzo de diseño).
- La pestaña Componentes del panel del proyecto (ver Menú de acciones del componente en Pestaña de componentes del panel del proyecto).
Configurar una actividad de Listar Objetos de Amazon S3
Sigue estos pasos para configurar una actividad de Listar Objetos de Amazon S3:
-
Paso 1: Ingresa un nombre y selecciona un bucket
Proporciona un nombre para la actividad y selecciona un bucket que se utilizará. -
Paso 2: Revisa los esquemas de datos
Se muestran los esquemas de solicitud o respuesta generados desde el punto final.
Paso 1: Ingresa un nombre y selecciona un bucket
En este paso, proporciona un nombre para la actividad y selecciona un bucket que se utilizará.
La interfaz utilizada en este paso de la configuración de una actividad de Listar Objetos de Amazon S3 depende de las Opciones de Bucket seleccionadas:
-
Usar listas: Esta opción llenará una lista de buckets existentes para elegir.
-
Usar entradas de texto: Para esta opción, ingresarás manualmente el nombre del bucket de Amazon S3.
Usar listas
Si se selecciona Usar Listas para las Opciones de Bucket, se presenta esta interfaz:
-
Nombre: Ingresa un nombre para identificar la actividad. El nombre debe ser único para cada actividad de Listar Objetos de Amazon S3 y no debe contener barras inclinadas (
/
) o dos puntos (:
). -
Seleccionar un Bucket: Desde la lista poblada, selecciona el bucket que contiene los objetos.
-
Configuraciones Opcionales: Haz clic para expandir configuraciones opcionales adicionales:
-
Prefijo de Objeto: Ingresa un prefijo para limitar la respuesta a las claves que comienzan con el prefijo especificado.
- Excluir Coincidencia Exacta del Prefijo de los Resultados: Selecciona para excluir coincidencias exactas para el prefijo especificado en Prefijo de Objeto.
-
Delimitador: Ingresa un carácter para usar como delimitador (máximo de 1 carácter).
-
Máx. Claves: Ingresa el número máximo de claves que se devolverán en la respuesta. Por defecto, la actividad devuelve hasta 1,000 nombres de claves. El máximo es 100,000 claves.
-
Comenzar Después: Ingresa una clave para devolver una respuesta que comience después de la clave especificada. El valor máximo es de 1,024 caracteres.
-
Región de AWS (Anula la Región del Bucket): Selecciona una Región de Amazon S3.
-
Usar entradas de texto
Si se selecciona Usar Entradas de Texto para Opciones de Bucket, se presenta esta interfaz:
-
Nombre: Ingresa un nombre para identificar la actividad. El nombre debe ser único para cada actividad de Listar Objetos de Amazon S3 y no debe contener barras inclinadas (
/
) o dos puntos (:
). -
Nombre del Bucket: Ingresa el nombre del bucket de Amazon S3 que contiene los objetos.
-
Configuraciones Opcionales: Haz clic para expandir configuraciones opcionales adicionales:
-
Prefijo de Objeto: Ingresa un prefijo para limitar la respuesta a las claves que comienzan con el prefijo especificado.
- Excluir Coincidencia Exacta del Prefijo de los Resultados: Selecciona para excluir coincidencias exactas para el prefijo especificado en Prefijo de Objeto.
-
Delimitador: Ingresa un carácter para usar como delimitador (máximo de 1 carácter).
-
Máx. Claves: Ingresa el número máximo de claves que se devolverán en la respuesta. Por defecto, la actividad devuelve 1,000 claves. El máximo es 100,000 claves.
-
Comenzar Después: Ingresa una clave para devolver una respuesta que comience después de la clave especificada. El valor máximo es de 1,024 caracteres.
-
Región de AWS (Anula la Región del Bucket): Selecciona una Región de Amazon S3.
-
-
Guardar y Salir: Si está habilitado, haz clic para guardar la configuración de este paso y cerrar la configuración de la actividad.
-
Siguiente: Haz clic para almacenar temporalmente la configuración de este paso y continuar al siguiente paso. La configuración no se guardará hasta que hagas clic en el botón Finalizado en el último paso.
-
Descartar Cambios: Después de realizar cambios, haz clic para cerrar la configuración sin guardar los cambios realizados en ningún paso. Un mensaje te pide que confirmes que deseas descartar los cambios.
Paso 2: Revisar los esquemas de datos
Cualquier esquema de solicitud o respuesta generado desde el punto final se muestra. Cada elemento de la interfaz de usuario de este paso se describe a continuación.
-
Esquemas de Datos: Se muestran los esquemas de solicitud y respuesta para esta actividad. Estos esquemas de datos son heredados por transformaciones adyacentes y se muestran nuevamente durante el mapeo de transformaciones.
El conector de Amazon S3 utiliza la AWS SDK para Java versión 2.29.34. Consulta la documentación de la API para obtener información sobre los nodos y campos del esquema.
Los esquemas de datos de solicitud y respuesta constan de estos nodos y campos:
Campo del Esquema de Respuesta Descripción keyCount El número de claves devueltas List La lista de claves, resultados devueltos en orden binario UTF-8 key Cadena con la clave de la carga multipart iniciada size Tamaño ETag La etiqueta de entidad que identifica el nuevo objeto utilizando el método getETag lastModified Valor de fecha y hora del encabezado Last-Modified, que indica la fecha y hora en que Amazon S3 registró por última vez una modificación al objeto asociado, utilizando el método getLastModified error Contenedor para todos los elementos de error errorCode Una cadena que identifica de manera única una condición de error message Una descripción genérica de la condición de error -
Actualizar: Haz clic en el ícono de actualizar o en la palabra Actualizar para regenerar esquemas desde el punto final de Amazon S3. Esta acción también regenera un esquema en otras ubicaciones a lo largo del proyecto donde se hace referencia al mismo esquema, como en una transformación adyacente.
-
Regresar: Haz clic para almacenar temporalmente la configuración de este paso y volver al paso anterior.
-
Terminado: Haz clic para guardar la configuración de todos los pasos y cerrar la configuración de la actividad.
-
Descartar cambios: Después de realizar cambios, haz clic para cerrar la configuración sin guardar los cambios realizados en ningún paso. Un mensaje te pedirá que confirmes que deseas descartar los cambios.
Próximos pasos
Después de configurar una actividad de Listar Objetos de Amazon S3, completa la configuración de la operación agregando y configurando otras actividades o herramientas como pasos de operación. También puedes configurar los ajustes de la operación, que incluyen la capacidad de encadenar operaciones que están en los mismos o diferentes flujos de trabajo.
Las acciones del menú para una actividad son accesibles desde el panel del proyecto y el lienzo de diseño. Para más detalles, consulta el menú de acciones de actividad en Conceptos básicos de conectores.
Las actividades de Listar Objetos de Amazon S3 pueden usarse como un objetivo con estos patrones de operación:
- Patrón de transformación
- Patrón de archivo de dos objetivos (como la primera fuente únicamente)
- Patrón de archivo HTTP de dos objetivos (como la primera fuente únicamente)
Para utilizar la actividad con funciones de scripting, escribe los datos en una ubicación temporal y luego utiliza esa ubicación temporal en la función de scripting.
Cuando estés listo, despliega y ejecuta la operación y valida el comportamiento revisando los registros de la operación.