Ir para o conteúdo

Conector HDFS para Jitterbit Studio

Resumo

O conector HDFS estabelece acesso ao HDFS.

O conector HDFS fornece uma interface para criar uma conexão HDFS, a base utilizada para gerar instâncias de atividades HDFS. Essas atividades, uma vez configuradas, interagem com o HDFS por meio da conexão.

O conector HDFS é acessado na aba Endpoints e conectores do projeto da paleta de componentes de design (veja Paleta de componentes de design).

Nota

Este conector pode ser usado apenas com agentes privados. Além disso, é um conector baseado no Connector SDK, que pode ser mencionado pela Jitterbit ao comunicar alterações feitas em conectores construídos com o Connector SDK.

Endpoints criados com este conector estão incluídos na reportagem de uso de endpoints e contam para sua licença.

Documentação da conexão

Além da conexão HDFS, consulte a página abrangente de detalhes da conexão HDFS. Detalhes de configuração como estes estão incluídos nessa página:

  • Introdução: Passos iniciais para estabelecer uma conexão.
  • Recursos Avançados: Visualizações definidas pelo usuário e configuração SSL.
  • Modelo de Dados: O modelo de dados que o conector usa para representar o endpoint.
  • Propriedades de Configurações Avançadas: Propriedades que podem ser definidas para configurar uma conexão para configurações básicas e avançadas.

Documentação da atividade

Juntas, uma conexão HDFS específica e suas atividades são referidas como um endpoint HDFS:

Tipos de atividades HDFS

  • Consulta: Recupera registros de uma tabela no HDFS e é destinado a ser usado como uma fonte em uma operação.

  • Executar: Executa um procedimento no HDFS e é destinado a ser usado como um alvo em uma operação.

Pré-requisitos e versões de API suportadas

O conector HDFS requer o uso de uma versão de agente 10.1 ou posterior. Essas versões de agente baixam automaticamente a versão mais recente do conector quando necessário.

Este conector requer o uso de um agente privado.

Consulte a documentação do endpoint para informações sobre os nós e campos do esquema.

Solução de problemas

Se você encontrar problemas com o conector HDFS, estas etapas de solução de problemas são recomendadas:

  1. Clique no botão Testar na configuração de conexão para garantir que a conexão seja bem-sucedida e para garantir que a versão mais recente do conector seja baixada para o agente (a menos que esteja usando a política de organização Desativar Atualização Automática do Conector).

  2. Verifique os logs de operação para qualquer informação registrada durante a execução da operação.

  3. Ative o registro de depuração de operação para agentes privados para gerar arquivos de log e dados adicionais.

  4. Ative o registro detalhado do conector para este conector adicionando esta entrada de configuração de logger ao arquivo logback.xml do seu agente privado:

    <logger name="org.jitterbit.connector.verbose.logging.HDFS" level="TRACE"/>

Para mais informações sobre o registro detalhado de conectores, consulte Registro detalhado para conectores usando agentes privados Jitterbit.

  1. Verifique os registros do agente para mais informações.

  2. Para considerações adicionais de solução de problemas, consulte Solução de problemas de operação.