Ir para o conteúdo

Conector Apache Kafka para Jitterbit Studio

Resumo

O conector Apache Kafka estabelece acesso ao Apache Kafka.

O conector Apache Kafka fornece uma interface para criar uma conexão com o Apache Kafka, a base utilizada para gerar instâncias de atividades do Apache Kafka. Essas atividades, uma vez configuradas, interagem com o Apache Kafka por meio da conexão.

O conector Apache Kafka é acessado na aba Endpoints e conectores do projeto na paleta de componentes de design (veja Paleta de componentes de design).

Visão geral do conector

Este conector é usado para primeiro configurar uma conexão Apache Kafka. Os tipos de atividades associados a essa conexão são então usados para criar instâncias de atividades que se destinam a ser usadas como fontes (para fornecer dados em uma operação) ou alvos (para consumir dados em uma operação).

Juntos, uma conexão específica do Apache Kafka e suas atividades são referidos como um endpoint do Apache Kafka:

Tipos de atividades do Apache Kafka

Nota

Este conector é um conector baseado no SDK de Conector, que pode ser referido pelo Jitterbit ao comunicar mudanças feitas em conectores construídos com o SDK de Conector.

Os endpoints criados com este conector estão incluídos no relatório de uso de endpoints e contam para a sua licença.

Pré-requisitos e versões de API suportadas

O conector Apache Kafka requer o uso de uma versão de agente 10.1 ou posterior. Essas versões de agente baixam automaticamente a versão mais recente do conector quando necessário.

O conector Apache Kafka utiliza a API Core do Apache Kafka. Consulte a documentação da API para obter informações sobre os nós e campos do esquema.

Solução de problemas

Se você encontrar problemas com o conector Apache Kafka, estas etapas de solução de problemas são recomendadas:

  1. Clique no botão Testar na configuração da conexão para garantir que a conexão seja bem-sucedida e que a versão mais recente do conector seja baixada para o agente (a menos que esteja usando a política de organização Desativar Atualização Automática do Conector).

  2. Verifique os logs de operação para qualquer informação registrada durante a execução da operação.

  3. Ative o registro de depuração da operação (para agentes em nuvem ou para agentes privados) para gerar arquivos de log e dados adicionais.

  4. Se estiver usando agentes privados, você pode ativar o registro detalhado do conector para este conector adicionando esta entrada de configuração de logger ao arquivo logback.xml do seu agente privado:

    <logger name="org.jitterbit.connector.apache.kafka" level="DEBUG"/>

    Para mais informações sobre o registro detalhado do conector, consulte Registro detalhado para conectores usando agentes privados Jitterbit.

  5. Se estiver usando agentes privados, você pode verificar os logs do agente para mais informações.

  6. Para considerações adicionais de solução de problemas, veja Solução de problemas de operação.