Snowflake Obter atividade

Introdução

Uma atividade Get do Snowflake, usando sua conexão Snowflake, recupera um arquivo CSV de dados de tabela ou exibição do Snowflake e se destina a ser usado como uma fonte para fornecer dados em uma operação.

Crie uma atividade Obter Snowflake

Uma instância de uma atividade Snowflake Get é criada a partir de uma conexão Snowflake usando seu tipo de atividade Get.

Para criar uma instância de uma atividade, arraste o tipo de atividade para a quadro de design ou copie o tipo de atividade e cole-o na quadro de design. Para obter detalhes, consulte Criando uma instância de atividade em Reutilização de componentes.

Uma atividade Get existente do Snowflake pode ser editada nestes locais:

• A quadro de design (veja menu de ações do componente em Tela de design).
• A aba Componentes do painel do projeto (consulte menu de ações do componente na aba Componentes do painel Projeto).

Configurar uma atividade Snowflake Get

Siga estas etapas para configurar uma atividade Get do Snowflake:

• Etapa 1: Insira um nome e selecione um objeto
  Forneça um nome para a atividade e selecione um objeto, seja uma tabela ou uma visualização.

• Etapa 2: Revise os esquemas de dados
  Quaisquer esquemas de solicitação ou resposta gerados a partir do endpoint são exibidos.

Etapa 1: insira um nome e selecione um objeto

Nesta etapa, forneça um nome para a atividade e selecione uma tabela ou exibição (consulte Visão geral das exibições do Snowflake). Cada elemento da interface do usuário desta etapa é descrito abaixo.

• Nome: Insira um nome para identificar a atividade. O nome deve ser exclusivo para cada atividade Snowflake Get e não deve conter barras / ou dois pontos :.

• Selecione um objeto: Esta seção exibe objetos disponíveis no endpoint do Snowflake. Ao reabrir uma configuração de atividade existente, somente o objeto selecionado é exibido em vez de recarregar a lista inteira de objetos.

  • Objeto Snowflake Selecionado: Depois que um objeto é selecionado, ele é listado aqui.

  • Pesquisar: Insira qualquer valor de coluna na caixa de pesquisa para filtrar a lista de objetos. A pesquisa não diferencia maiúsculas de minúsculas. Se os objetos já estiverem exibidos na tabela, os resultados da tabela serão filtrados em tempo real a cada pressionamento de tecla. Para recarregar objetos do endpoint ao pesquisar, insira os critérios de pesquisa e atualize, conforme descrito abaixo.

  • Atualizar: Clique no ícone de atualização ou a palavra Refresh para recarregar objetos do endpoint do Snowflake. Isso pode ser útil se objetos foram adicionados ao Snowflake. Esta ação atualiza todos os metadados usados para construir a tabela de objetos exibida na configuração.

  • Selecionando um objeto: Dentro da tabela, clique em qualquer lugar em uma linha para selecionar um objeto. Apenas um objeto pode ser selecionado. As informações disponíveis para cada objeto são obtidas do endpoint do Snowflake:

    • Nome: O nome de um objeto, seja uma tabela ou uma exibição.

    • Tipo: O tipo do objeto, seja uma tabela ou uma exibição.

  Dica

  Se a tabela não for preenchida com objetos disponíveis, a conexão Snowflake pode não ser bem-sucedido. Certifique-se de que você está conectado reabrindo a conexão e testando novamente as credenciais.

• NullIf: O valor a ser retornado se um resultado for NULL.

• Campo opcionalmente fechado por: O caractere opcional usado para fechar o campo NullIf.

• Salvar e sair: Se habilitado, clique para salvar a configuração para esta etapa e fechar a configuração da atividade.

• Próximo: Clique para armazenar temporariamente a configuração para esta etapa e continuar para a próxima etapa. A configuração não será salva até que você clique no botão Concluído na última etapa.

• Descartar alterações: Após fazer alterações, clique para fechar a configuração sem salvar as alterações feitas em nenhuma etapa. Uma mensagem pede para você confirmar que deseja descartar as alterações.

Etapa 2: Revise os esquemas de dados

Quaisquer esquemas de solicitação ou resposta gerados do endpoint são exibidos. Cada elemento de interface do usuário desta etapa é descrito abaixo.

• Esquemas de dados: Esses esquemas de dados são herdados por transformações adjacentes e são exibidos novamente durante o mapeamento de transformação.

  Nota

  Os dados fornecidos em uma transformação têm precedência sobre a configuração da atividade.

  O conector Snowflake usa versão 3.19.0 do Driver Snowflake JDBC e os comandos SQL do Snowflake. Consulte a documentação da API para obter informações sobre os nós e campos do esquema.

  Os esquemas de dados de solicitação e resposta consistem nestes nós e campos:

  • Solicitação

    Campo/Nó do Esquema de Solicitação	Notas
    stageName	Nome do estágio interno do Snowflake usado ao obter dados da tabela. Nota O stageName é o nome de uma área de preparação interna do Snowflake, que precisa ser preexistente antes de executar uma operação usando esta atividade. O arquivo é primeiro copiado para a área de preparação antes de ficar disponível para o conector.
    fileName	Nome do arquivo no estágio interno do Snowflake para ser usado ao obter dados da tabela.
    compressData	Sinalizador booleano para compactar os dados antes de enviá-los para o estágio interno do Snowflake.
    fileFormat	Nó do formato do arquivo.
    nullIf	Valor de exibição para NULLIF.
    FIELD_OPTIONALLY_ENCLOSED_BY	Delimitador usado para delimitar o NULLIF entrada.

  • Resposta

    Campo/Nó do Esquema de Resposta	Notas
    fileName	Nome do arquivo no estágio interno do Snowflake usado ao obter dados da tabela (idêntico à solicitação).
    content	Conteúdo da tabela Snowflake em formato CSV.

• Atualizar: Clique no ícone de atualização ou a palavra Refresh para regenerar esquemas do endpoint Snowflake. Esta ação também regenera um esquema em outros locais ao longo do projeto onde o mesmo esquema é referenciado, como em uma transformação adjacente.

• Voltar: Clique para armazenar temporariamente a configuração desta etapa e retornar à etapa anterior.

• Concluído: Clique para salvar a configuração de todas as etapas e fechar a configuração da atividade.

• Descartar alterações: Após fazer alterações, clique para fechar a configuração sem salvar as alterações feitas em nenhuma etapa. Uma mensagem pede para você confirmar que deseja descartar as alterações.

Próximos passos

Após configurar uma atividade Get do Snowflake, conclua a configuração da operação adicionando e configurando outras atividades, transformações ou scripts como etapas da operação. Você também pode configurar as definições da operação, que incluem a capacidade de encadear operações que estejam no mesmo fluxo de trabalho ou em workflows diferentes.

As ações de menu para uma atividade são acessíveis a partir do painel do projeto e da quadro de design. Para obter detalhes, consulte menu de ações de atividade em Noções básicas do conector.

As atividades Get do Snowflake podem ser usadas como uma fonte com esses padrões de operação:

• Padrão de Transformação
• Padrão de arquivo de dois alvos (apenas como primeira fonte)
• Padrão de arquivo HTTP de dois alvos (apenas como primeira fonte)
• Padrão de duas transformações (como primeira ou segunda fonte)

Para usar a atividade com funções de script, grave os dados em um local temporário e use esse local temporário na função de script.

Quando estiver pronto, implantar e executar a operação e validar o comportamento verificando os logs de operação.