Atividade de objetos de lista do Amazon S3¶

Introdução¶

Uma atividade List Objects do Amazon S3, usando sua conexão Amazon S3, retorna alguns ou todos (até 100.000) dos objetos em um bucket do Amazon S3 e deve ser usado como um alvo para consumir dados em uma operação.

Criar uma atividade de lista de objetos do Amazon S3¶

Uma instância de uma atividade List Objects do Amazon S3 é criada a partir de uma conexão do Amazon S3 usando seu tipo de atividade List Objects.

Para criar uma instância de uma atividade, arraste o tipo de atividade para a quadro de design ou copie o tipo de atividade e cole-o na quadro de design. Para obter detalhes, consulte Criando uma instância de atividade em Reutilização de componentes.

Uma atividade existente Listar objetos do Amazon S3 pode ser editada nestes locais:

• A quadro de design (veja menu de ações do componente em Tela de design).
• A aba Componentes do painel do projeto (consulte menu de ações do componente na aba Componentes do painel Projeto).

Configurar uma atividade de lista de objetos do Amazon S3¶

Siga estas etapas para configurar uma atividade Listar objetos do Amazon S3:

• Etapa 1: Insira um nome e selecione um bucket
  Forneça um nome para a atividade e selecione um bucket a ser usado.

• Etapa 2: Revise os esquemas de dados
  Quaisquer esquemas de solicitação ou resposta gerados a partir do endpoint são exibidos.

Etapa 1: insira um nome e selecione um bucket¶

Nesta etapa, forneça um nome para a atividade e selecione um bucket a ser usado.

A interface usada nesta etapa da configuração de uma atividade List Objects do Amazon S3 depende das Bucket Options selecionadas:

• Usar listas: Esta opção preencherá uma lista de buckets existentes para escolher.

• Use entradas de texto: Para esta opção, você digitará manualmente o nome do Amazon S3 balde.

Usar listas¶

Se Usar listas for selecionado para Opções de bucket, esta interface será apresentada:

• Nome: Insira um nome para identificar a atividade. O nome deve ser exclusivo para cada atividade List Objects do Amazon S3 e não deve conter barras (/) ou dois pontos (:).

• Selecione um bucket: Na lista preenchida, selecione o bucket que contém os objetos.

• Configurações opcionais: Clique para expandir configurações opcionais adicionais:

  

  • Prefixo do objeto: Insira um prefixo para limitar a resposta às chaves que começam com o prefixo especificado.

    • Excluir correspondência exata de prefixo dos resultados: Selecione para excluir correspondências exatas para o prefixo especificado em Prefixo do objeto.

  • Delimitador: Insira um caractere para usar como delimitador (máximo de 1 caractere).

  • Max Keys: Insira o número máximo de chaves retornadas para serem retornadas na resposta. Por padrão, a atividade retorna até 1.000 nomes de chaves. O máximo é 100.000 chaves.

  • Start After: Insira uma chave para retornar uma resposta que comece após a chave especificada. O valor máximo é 1.024 caracteres.

  • Região AWS (substitui a região do bucket): Selecione uma Região Amazon S3.

Usar entradas de texto¶

Se Usar entradas de texto estiver selecionado para Opções de bucket, esta interface será apresentada:

• Nome: Insira um nome para identificar a atividade. O nome deve ser exclusivo para cada atividade List Objects do Amazon S3 e não deve conter barras (/) ou dois pontos (:).

• Nome do bucket: Insira o nome do bucket do AmazonS3 que contém os objetos.

• Configurações opcionais: Clique para expandir configurações opcionais adicionais:

  

  • Prefixo do objeto: Insira um prefixo para limitar a resposta às chaves que começam com o prefixo especificado.

    • Excluir correspondência exata de prefixo dos resultados: Selecione para excluir correspondências exatas para o prefixo especificado em Prefixo do objeto.

  • Delimitador: Insira um caractere para usar como delimitador (máximo de 1 caractere).

  • Max Keys: Insira o número máximo de chaves a serem retornadas na resposta. Por padrão, a atividade retorna 1.000 chaves. O máximo é 100.000 chaves.

  • Start After: Insira uma chave para retornar uma resposta que comece após a chave especificada. O valor máximo é 1.024 caracteres.

  • Região AWS (substitui a região do bucket): Selecione uma Região Amazon S3.

• Salvar e sair: Se habilitado, clique para salvar a configuração para esta etapa e fechar a configuração da atividade.

• Próximo: Clique para armazenar temporariamente a configuração para esta etapa e continuar para a próxima etapa. A configuração não será salva até que você clique no botão Concluído na última etapa.

• Descartar alterações: Após fazer alterações, clique para fechar a configuração sem salvar as alterações feitas em nenhuma etapa. Uma mensagem pede para você confirmar que deseja descartar as alterações.

Etapa 2: Revise os esquemas de dados¶

Quaisquer esquemas de solicitação ou resposta gerados do endpoint são exibidos. Cada elemento de interface do usuário desta etapa é descrito abaixo.

• Esquemas de dados: Os esquemas de solicitação e resposta para esta atividade são exibidos. Esses esquemas de dados são herdados por transformações adjacentes e são exibidos novamente durante o mapeamento de transformação.

  O conector Amazon S3 usa o AWS SDK para Java versão 1.12.770. Consulte a documentação da API para obter informações sobre os nós e campos do esquema.

  Os esquemas de dados de solicitação e resposta consistem nestes nós e campos:

  Campo de esquema de resposta	Descrição
  keyCount	O número de chaves retornadas
  Lista	A lista de chaves, resultados retornados em ordem binária UTF-8
  chave	String com a chave do upload multiparte iniciado
  tamanho	Tamanho
  ETag	A tag de entidade que identifica o novo objeto usando getETag método
  lastModified	Valor de data e hora do cabeçalho Last-Modified, indicando a data e a hora em que o Amazon S3 registrou pela última vez uma modificação no objeto associado, usando o método getLastModified método
  erro	Contêiner para todos os elementos de erro
  errorCode	Uma string que identifica exclusivamente uma condição de erro
  mensagem	Uma descrição genérica da condição de erro

• Atualizar: Clique no ícone de atualização ou a palavra Refresh para regenerar esquemas do endpoint do Amazon S3. Esta ação também regenera um esquema em outros locais em todo o projeto onde o mesmo esquema é referenciado, como em uma transformação adjacente.

• Voltar: Clique para armazenar temporariamente a configuração desta etapa e retornar à etapa anterior.

• Concluído: Clique para salvar a configuração de todas as etapas e fechar a configuração da atividade.

• Descartar alterações: Após fazer alterações, clique para fechar a configuração sem salvar as alterações feitas em nenhuma etapa. Uma mensagem pede para você confirmar que deseja descartar as alterações.

Próximos passos¶

Após configurar uma atividade List Objects do Amazon S3, conclua a configuração da operação adicionando e configurando outras atividades, transformações ou scripts como etapas da operação. Você também pode configurar as definições da operação, que incluem a capacidade de encadear operações que estejam no mesmo fluxo de trabalho ou em workflows diferentes.

As ações de menu para uma atividade são acessíveis a partir do painel do projeto e da quadro de design. Para obter detalhes, consulte menu de ações de atividade em Noções básicas do conector.

As atividades List Objects do Amazon S3 podem ser usadas como um alvo com esses padrões de operação:

• Padrão de Transformação
• Padrão de arquivo de dois alvos (apenas como primeira fonte)
• Padrão de arquivo HTTP de dois alvos (apenas como primeira fonte)

Para usar a atividade com funções de script, grave os dados em um local temporário e use esse local temporário na função de script.

Quando estiver pronto, implantar e executar a operação e validar o comportamento verificando os logs de operação.