Ir para o conteúdo

Conector HDFS para Jitterbit Integration Studio

Resumo

O conector HDFS estabelece acesso a HDFS.

O conector HDFS fornece uma interface para criar uma conexão HDFS, a base usada para gerar instâncias de atividades do HDFS. Essas atividades, uma vez configuradas, interagem com o HDFS por meio da conexão.

O conector HDFS é acessado na aba endpoints e conectores do projeto da paleta de componentes de design (consulte paleta de componentes de design).

Nota

Este conector pode ser usado apenas com agentes privados. Além disso, é um Connector SDK, que pode ser referenciado pelo Jitterbit ao comunicar alterações feitas em conectores criados com o Connector SDK.

Documentação de conexão

Além da conexão HDFS, veja os detalhes abrangentes da conexão HDFS página. Detalhes de configuração como estes estão incluídos nessa página:

  • Introdução: Passos iniciais para estabelecer uma conexão.
  • Recursos avançados: Visualizações definidas pelo usuário e configuração SSL.
  • Modelo de dados: O modelo de dados que o conector usa para representar o endpoint.
  • Propriedades de configurações avançadas: Propriedades que podem ser definidas para configurar uma conexão para configurações básicas e avançadas.

Documentação da atividade

Juntas, uma conexão HDFS específica e suas atividades são chamadas de endpoint HDFS:

Tipos de atividade HDFS

  • Consulta: Recupera registros de uma tabela no HDFS e deve ser usado como fonte em uma operação.

  • Executar: Executa um procedimento no HDFS e deve ser usado como um alvo em uma operação.

Pré-requisitos e versões de API suportadas

O conector HDFS requer o uso de uma versão de agente 10.1 ou posterior. Essas versões de agente baixam automaticamente a versão mais recente do conector quando necessário.

Este conector requer o uso de um agente privado.

Consulte a documentação do endpoint para obter informações sobre os nós e campos do esquema.

Solução de problemas

Se você tiver problemas com o conector HDFS, estas etapas de solução de problemas são recomendadas:

  1. Clique no botão Testar na configuração de conexão para garantir que a conexão seja bem-sucedida e que a versão mais recente do conector seja baixada para o agente (a menos que você esteja usando a política da organização Desativar atualização automática do conector).

  2. Verifique os registros de operação para qualquer informação escrita durante a execução da operação.

  3. Habilite registro de depurar de operação para agentes privados para gerar arquivos de log e dados adicionais.

  4. Habilite conector verbose logging para este conector usando esta entrada de configuração específica de nome e nível do registrador:

    <logger name="org.jitterbit.connector.verbose.logging.HDFS" level="TRACE"/>

  5. Verifique os logs do agente para mais informações.

  6. Para considerações adicionais sobre solução de problemas, consulte Solução de problemas de operação.