Ir para o conteúdo

Conector Apache Parquet no Jitterbit Studio

Resumo

O conector Apache Parquet estabelece acesso ao Apache Parquet.

O conector Apache Parquet fornece uma interface para criar uma conexão Apache Parquet, a base usada para gerar instâncias de atividades Apache Parquet. Essas atividades, uma vez configuradas, interagem com o Apache Parquet através da conexão.

Acessa-se o conector Apache Parquet pela aba Project endpoints and connectors (Endpoints e conectores do projeto) da paleta de componentes de design (consulte Design component palette).

Os endpoints criados com este conector estão incluídos no relatório de uso de endpoints e contam para sua licença.

Documentação de conexão

Além da conexão Apache Parquet, consulte a página abrangente de detalhes de conexão Apache Parquet. Detalhes de configuração como estes estão incluídos nessa página:

  • Getting Started: Etapas iniciais para estabelecer uma conexão.
  • Advanced Features: Visualizações definidas pelo usuário e configuração de SSL.
  • Data Model: O modelo de dados que o conector usa para representar o endpoint.
  • Advanced Configurations Properties: Propriedades que podem ser definidas para configurar uma conexão para configurações básicas e avançadas.

Documentação de atividades

Juntos, uma conexão Apache Parquet específica e suas atividades são chamados de endpoint Apache Parquet:

Tipos de atividades Apache Parquet

  • Query: Recupera registros de uma tabela no Apache Parquet e destina-se a ser usado como origem em uma operação.

  • Create: Insere um registro em uma tabela no Apache Parquet e destina-se a ser usado como destino em uma operação.

  • Execute: Executa um procedimento no Apache Parquet e destina-se a ser usado como destino em uma operação.

Pré-requisitos e versões de API suportadas

Este conector pode ser usado apenas com agentes privados.

Os agentes baixam automaticamente a versão mais recente deste conector quando necessário. Em agentes privados, você pode suspender essas atualizações com a política organizacional Disable Auto Connector Update.

Consulte a documentação para obter informações sobre os nós de esquema e campos.

Autenticação OAuth

A autenticação OAuth é suportada conforme descrito em Configure OAuth connections.

Solução de problemas

Se você tiver problemas com o conector Apache Parquet, recomenda-se seguir estas etapas de solução de problemas:

  1. Clique no botão Test na configuração de conexão para garantir que a conexão seja bem-sucedida e para garantir que a versão mais recente do conector seja baixada no agente (a menos que esteja usando a política organizacional Disable Auto Connector Update).

  2. Verifique os logs de operação para qualquer informação escrita durante a execução da operação.

  3. Ative o log de depuração de operação para agentes privados para gerar arquivos de log e dados adicionais.

  4. Ative o registro detalhado do conector para este conector adicionando esta entrada de configuração de logger ao arquivo logback.xml do seu agente privado:

    <logger name="org.jitterbit.connector.verbose.logging.Parquet" level="TRACE"/>
    

    Para mais informações sobre registro detalhado do conector, consulte Registro detalhado para conectores usando agentes privados Jitterbit.

  5. Verifique os logs do agente para mais informações.

  6. Para considerações adicionais de solução de problemas, consulte Solução de problemas de operação.