Ir para o conteúdo

Atividade de Consulta Snowflake

Introdução

Uma atividade de Consulta Snowflake, utilizando sua conexão Snowflake, recupera um arquivo CSV de dados de tabela ou visualização do Snowflake e é destinada a ser usada como uma fonte para fornecer dados em uma operação.

Nota

Dependendo das suas permissões no Snowflake, a atividade de Consulta retornará apenas os dados aos quais você tem acesso. Por exemplo, se você tiver permissões apenas para visualizar dados, a atividade de Obter retornará apenas dados de visualização e não retornará dados de tabela.

Criar uma atividade de Consulta Snowflake

Uma instância de uma atividade de Consulta Snowflake é criada a partir de uma conexão Snowflake usando seu tipo de atividade Consulta.

Para criar uma instância de uma atividade, arraste o tipo de atividade para a tela de design ou copie o tipo de atividade e cole-o na tela de design. Para detalhes, veja Criar uma instância de atividade ou ferramenta em Reutilização de componentes.

Uma atividade de Consulta Snowflake existente pode ser editada a partir destes locais:

Configurar uma atividade de Consulta Snowflake

Siga estas etapas para configurar uma atividade de Consulta Snowflake:

Passo 1: Insira um nome e selecione um objeto

Neste passo, forneça um nome para a atividade e selecione uma tabela ou visualização (veja a Visão Geral das Visualizações do Snowflake). Cada elemento da interface do usuário deste passo é descrito abaixo.

  • Nome: Insira um nome para identificar a atividade. O nome deve ser exclusivo para cada atividade de Consulta do Snowflake e não deve conter barras / ou dois pontos :.

  • Selecionar um Objeto: Esta seção exibe os objetos disponíveis no endpoint do Snowflake. Ao reabrir uma configuração de atividade existente, apenas o objeto selecionado é exibido em vez de recarregar toda a lista de objetos.

    • Objeto Selecionado do Snowflake: Após um objeto ser selecionado, ele é listado aqui.

    • Pesquisar: Insira o valor de qualquer coluna na caixa de pesquisa para filtrar a lista de objetos. A pesquisa não diferencia maiúsculas de minúsculas. Se os objetos já estiverem exibidos na tabela, os resultados da tabela são filtrados em tempo real a cada tecla pressionada. Para recarregar objetos do endpoint ao pesquisar, insira os critérios de pesquisa e, em seguida, atualize, conforme descrito abaixo.

    • Atualizar: Clique no ícone de atualizar ou na palavra Atualizar para recarregar objetos do endpoint do Snowflake. Isso pode ser útil se objetos foram adicionados ao Snowflake. Esta ação atualiza todos os metadados usados para construir a tabela de objetos exibida na configuração.

    • Selecionando um Objeto: Dentro da tabela, clique em qualquer lugar em uma linha para selecionar um objeto. Apenas um objeto pode ser selecionado. As informações disponíveis para cada objeto são obtidas do endpoint do Snowflake:

      • Nome: O nome de um objeto, seja uma tabela ou uma visualização.

      • Tipo: O tipo do objeto, seja uma tabela ou uma visualização.

    Dica

    Se a tabela não for preenchida com objetos disponíveis, a conexão com o Snowflake pode não ter sido bem-sucedida. Certifique-se de que está conectado reabrindo a conexão e testando novamente as credenciais.

  • Salvar e Sair: Se ativado, clique para salvar a configuração para esta etapa e fechar a configuração da atividade.

  • Próximo: Clique para armazenar temporariamente a configuração para esta etapa e continuar para a próxima etapa. A configuração não será salva até que você clique no botão Concluído na última etapa.

  • Descartar Alterações: Após fazer alterações, clique para fechar a configuração sem salvar as alterações feitas em qualquer etapa. Uma mensagem pede para você confirmar que deseja descartar as alterações.

Etapa 2: Construa sua consulta

Nesta etapa, construa uma declaração de consulta definindo condições para os campos do objeto e aplicando paginação, seja através do construtor de consultas ou inserindo manualmente uma declaração de consulta. Cada elemento da interface do usuário desta etapa é descrito abaixo.

Nota

Você pode ignorar o construtor de consultas e inserir uma declaração de consulta no campo String da consulta.

Dica

Campos com um ícone de variável suportam o uso de variáveis globais, variáveis de projeto e variáveis Jitterbit. Comece digitando um colchete aberto [ no campo ou clicando no ícone de variável para exibir um menu com as variáveis existentes para escolher.

  • Pesquisar: Insira qualquer parte de um nome de campo na caixa de pesquisa para filtrar a lista de campos para o objeto selecionado. A pesquisa não diferencia maiúsculas de minúsculas. Os resultados listados são filtrados em tempo real a cada tecla pressionada.

  • Atualizar: Clique no ícone de atualizar ou na palavra Atualizar para recarregar os campos do objeto do endpoint Snowflake.

  • Selecionar Todos: Ao usar a caixa de pesquisa para filtrar, você pode usar esta caixa de seleção para selecionar todos os campos visíveis de uma vez.

  • Selecionar campos: Selecione as caixas de seleção dos campos que você deseja incluir na consulta para que sejam adicionados automaticamente à declaração de consulta na String da consulta. Você também pode Selecionar Todos os campos de uma vez usando a caixa de seleção.

  • Paginação: Para adicionar uma cláusula de paginação (um limite no número de registros com um deslocamento de registro opcional), você pode usar o menu suspenso para definir o limite de paginação e o campo para inserir um deslocamento. Se um deslocamento não for especificado, o padrão é 0. Uma única cláusula de paginação é suportada. Se a cláusula de paginação não for incluída, todos os registros são retornados.

    • Aplicar: Clique para construir automaticamente a cláusula com base nas seleções do menu suspenso e no valor inserido. A cláusula de paginação construída automaticamente aparece na caixa de texto String de consulta.

    • Remover: Clique para remover uma cláusula de paginação que foi aplicada.

  • Condições: Para adicionar cláusulas condicionais, use os campos abaixo como entrada para ajudar a construir as cláusulas, que então aparecem na caixa de texto String de consulta.

    • Campo: Use o menu suspenso para selecionar um campo do objeto selecionado.

    • Operador: Use o menu suspenso para selecionar um operador que seja apropriado para o tipo de dado do campo:

      Operador Rótulo Descrição
      = Igual
      != Diferente
      IN (valor1, valor2) Em Na lista de valores.
      LIKE 'string' Como Como string.
      LIKE 'string%' Começa com Começa com string.
      LIKE '%string' Termina com Termina com string.
      LIKE '%string%' Contém Contém string.
      < Menor que
      <= Menor ou igual
      > Maior que
      >= Maior ou igual

    • Valor: Insira o valor desejado para usar com as seleções do menu suspenso.

    • Adicionar: Clique para construir automaticamente a cláusula com base nas seleções do menu suspenso e no valor inserido. A cláusula condicional é adicionada à caixa de texto String de consulta.

  • Remover Tudo: Clique para remover todas as cláusulas condicionais inseridas.

  • String de consulta: À medida que você seleciona campos, especifica condições e define paginação, a declaração de consulta nesta caixa de texto é preenchida automaticamente com os campos selecionados, condições e limites de paginação. Este campo é editável, o que significa que você pode inserir manualmente uma declaração de consulta ou editar a declaração preenchida automaticamente.

    Nota

    Os valores de quaisquer variáveis globais usadas na String de consulta não são preenchidos ao usar o botão Testar Consulta, mesmo que um valor padrão seja especificado. Os valores das variáveis globais serão obtidos em tempo de execução quando a consulta for executada. Para testar a consulta com um valor de variável padrão, use uma variável de projeto em vez disso.

    Importante

    Para usar uma declaração de consulta que contenha elementos além daqueles selecionados por meio desta interface, você também deve selecionar a caixa de seleção Usar Esquema Estático.

  • Usar Esquema Estático: Selecione para definir o esquema de resposta para um esquema estático que é independente da declaração de consulta. Isso permite que declarações de consulta personalizadas inseridas na caixa de texto String de consulta sejam usadas.

  • Testar Consulta: Clique para validar a consulta. Se a consulta for válida, um máximo de 50 registros recuperados da consulta é exibido em uma tabela. Se a consulta não for válida, mensagens de erro relevantes são exibidas.

    Nota

    Durante a execução, o limite de 50 registros não é aplicado, a menos que seja especificado no campo Paginação (descrito anteriormente). Se você editar a String de consulta manualmente, a consulta deve ser válida e validada por meio deste botão para habilitar o botão Próximo.

  • Voltar: Clique para armazenar temporariamente a configuração para esta etapa e retornar à etapa anterior.

  • Próximo: Clique para armazenar temporariamente a configuração para esta etapa e continuar para a próxima etapa. A configuração não será salva até que você clique no botão Concluído na última etapa.

  • Descartar Alterações: Após fazer alterações, clique para fechar a configuração sem salvar as alterações feitas em qualquer etapa. Uma mensagem pede que você confirme que deseja descartar as alterações.

Etapa 3: Revisar os esquemas de dados

Quaisquer esquemas de solicitação ou resposta gerados a partir do endpoint são exibidos. Cada elemento da interface do usuário desta etapa é descrito abaixo.

  • Esquemas de Dados: Esses esquemas de dados são herdados por transformações adjacentes e são exibidos novamente durante o mapeamento de transformação.

    Nota

    Os dados fornecidos em uma transformação têm precedência sobre a configuração da atividade.

    O conector Snowflake utiliza a versão 3.19.0 do Driver JDBC do Snowflake e os comandos SQL do Snowflake. Consulte a documentação da API para obter informações sobre os nós e campos do esquema.

    Os esquemas de dados de solicitação e resposta padrão consistem nos seguintes nós e campos:

    • Solicitação

      Campo/Nó do Esquema de Solicitação Notas
      queryRequest Nó da solicitação de consulta.
      whereClause Nó da solicitação da cláusula WHERE.
      columnName Nome da coluna da cláusula WHERE.
      condition Condição da cláusula WHERE.
      value Valor da cláusula WHERE.

    • Resposta

      Campo/Nó do Esquema de Resposta Notas
      table Nó mostrando o nome da tabela NAME.
      Entity Nó da entidade.
      column_A Valor para a primeira coluna, COLOR.
      column_B Valor para a segunda coluna, FLOWER.
      . . . Valores para as colunas da tabela subsequentes.

Quando Usar Esquemas Estáticos está selecionado, o esquema de dados da resposta consiste nos seguintes nós e campos:

  • Resposta

    | Campo/Nó do Esquema de Resposta | Notas                              |
| ------------------------------- | ---------------------------------- |
| **`queryResponse`**            | Nó da resposta da consulta.        |
|                                 |                                    |
| **`row`**                      | Nó da linha da resposta.          |
|                                 |                                    |
| **`item`**                     | Nó do item da resposta.           |
| `columnName`                   | Nome da coluna do item da resposta.|
| `columnValue`                  | Valor da coluna do item da resposta.|

  • Atualizar: Clique no ícone de atualizar ou na palavra Atualizar para regenerar esquemas do endpoint do Snowflake. Esta ação também regenera um esquema em outros locais ao longo do projeto onde o mesmo esquema é referenciado, como em uma transformação adjacente.

  • Voltar: Clique para armazenar temporariamente a configuração para esta etapa e retornar à etapa anterior.

  • Concluído: Clique para salvar a configuração de todas as etapas e fechar a configuração da atividade.

  • Descartar Alterações: Após fazer alterações, clique para fechar a configuração sem salvar as alterações feitas em qualquer etapa. Uma mensagem pede que você confirme que deseja descartar as alterações.

Próximas etapas

Após configurar uma atividade de Consulta do Snowflake, complete a configuração da operação adicionando e configurando outras atividades ou ferramentas como etapas da operação. Você também pode configurar as configurações da operação, que incluem a capacidade de encadear operações que estão no mesmo ou em diferentes fluxos de trabalho.

As ações do menu para uma atividade estão acessíveis a partir do painel do projeto e da tela de design. Para detalhes, veja o menu de ações da atividade em Noções básicas sobre conectores.

As atividades de Consulta do Snowflake podem ser usadas como uma fonte com esses padrões de operação:

Para usar a atividade com funções de script, escreva os dados em um local temporário e, em seguida, use esse local temporário na função de script.

Quando estiver pronto, implante e execute a operação e valide o comportamento verificando os logs da operação.