Ir para o conteúdo

Conector Apache Parquet para Jitterbit Studio

Resumo

O conector Apache Parquet estabelece acesso ao Apache Parquet.

O conector Apache Parquet fornece uma interface para criar uma conexão Apache Parquet, a base utilizada para gerar instâncias de atividades Apache Parquet. Essas atividades, uma vez configuradas, interagem com o Apache Parquet por meio da conexão.

O conector Apache Parquet é acessado na aba Endpoints e conectores do projeto da paleta de componentes de design (veja a Paleta de componentes de design).

Nota

Este conector pode ser usado apenas com agentes privados. Além disso, é um conector baseado no Connector SDK, que pode ser mencionado pela Jitterbit ao comunicar alterações feitas em conectores construídos com o Connector SDK.

Endpoints criados com este conector estão incluídos no relatório de uso de endpoints e contam para sua licença.

Documentação da conexão

Além da conexão Apache Parquet, consulte a página abrangente de detalhes da conexão Apache Parquet. Detalhes de configuração como estes estão incluídos nessa página:

  • Introdução: Passos iniciais para estabelecer uma conexão.
  • Recursos Avançados: Visualizações definidas pelo usuário e configuração SSL.
  • Modelo de Dados: O modelo de dados que o conector usa para representar o endpoint.
  • Propriedades de Configurações Avançadas: Propriedades que podem ser definidas para configurar uma conexão para configurações básicas e avançadas.

Documentação da atividade

Juntas, uma conexão específica do Apache Parquet e suas atividades são referidas como um endpoint Apache Parquet:

Tipos de atividade do Apache Parquet

  • Consulta: Recupera registros de uma tabela no Apache Parquet e é destinado a ser usado como uma fonte em uma operação.

  • Criar: Insere um registro em uma tabela no Apache Parquet e é destinado a ser usado como um destino em uma operação.

  • Executar: Executa um procedimento no Apache Parquet e é destinado a ser usado como um destino em uma operação.

Pré-requisitos e versões de API suportadas

O conector Apache Parquet requer o uso de uma versão de agente 10.1 ou posterior. Essas versões de agente baixam automaticamente a versão mais recente do conector quando necessário.

Este conector requer o uso de um agente privado.

Consulte a documentação para obter informações sobre os nós e campos do esquema.

Autenticação OAuth

A autenticação OAuth é suportada conforme descrito em Configurar conexões OAuth.

Solução de problemas

Se você encontrar problemas com o conector Apache Parquet, estas etapas de solução de problemas são recomendadas:

  1. Clique no botão Testar na configuração da conexão para garantir que a conexão seja bem-sucedida e para garantir que a versão mais recente do conector seja baixada para o agente (a menos que esteja usando a política de organização Desativar Atualização Automática do Conector).

  2. Verifique os logs de operação para qualquer informação registrada durante a execução da operação.

  3. Ative o registro de depuração de operações para agentes privados para gerar arquivos e dados de log adicionais.

  4. Ative o registro detalhado do conector para este conector adicionando esta entrada de configuração de logger ao arquivo logback.xml do seu agente privado:

    <logger name="org.jitterbit.connector.verbose.logging.Parquet" level="TRACE"/>
    

    Para mais informações sobre o registro detalhado do conector, consulte Registro detalhado para conectores usando agentes privados Jitterbit.

  5. Verifique os logs do agente para mais informações.

  6. Para considerações adicionais de solução de problemas, consulte Solução de problemas de operações.