Ir para o conteúdo

Conector Apache Kafka no Jitterbit Studio

Resumo

O conector Apache Kafka estabelece acesso ao Apache Kafka.

O conector Apache Kafka fornece uma interface para criar uma conexão Apache Kafka, a base usada para gerar instâncias de atividades Apache Kafka. Essas atividades, uma vez configuradas, interagem com o Apache Kafka através da conexão.

O conector Apache Kafka é acessado pela aba Endpoints e conectores do projeto da paleta de componentes de design (consulte Paleta de componentes de design).

Visão geral do conector

Este conector é usado para configurar primeiro uma conexão Apache Kafka. Os tipos de atividade associados a essa conexão são então usados para criar instâncias de atividades destinadas a serem usadas como fontes (para fornecer dados em uma operação) ou destinos (para consumir dados em uma operação).

Juntos, uma conexão Apache Kafka específica e suas atividades são chamados de endpoint Apache Kafka:

Tipos de atividade Apache Kafka

Os endpoints criados com este conector são incluídos no relatório de uso de endpoints e contam para sua licença.

Pré-requisitos e versões de API suportadas

Este conector pode ser usado com agentes na nuvem e agentes privados.

Os agentes baixam automaticamente a versão mais recente deste conector quando necessário. Em agentes privados, você pode suspender essas atualizações com a política de organização Desabilitar Atualização Automática de Conector.

O conector Apache Kafka usa a API Core do Apache Kafka. Consulte a documentação da API para obter informações sobre os nós de esquema e campos.

Solução de problemas

Se você enfrentar problemas com o conector Apache Kafka, recomenda-se seguir estas etapas de solução de problemas:

  1. Clique no botão Testar na configuração de conexão para garantir que a conexão seja bem-sucedida e para garantir que a versão mais recente do conector seja baixada para o agente (a menos que esteja usando a política de organização Desabilitar Atualização Automática de Conector).

  2. Verifique os logs de operação para qualquer informação escrita durante a execução da operação.

  3. Ative o log de debug de operação (para agentes na nuvem ou para agentes privados) para gerar arquivos de log e dados adicionais.

  4. Se estiver usando agentes privados, você pode ativar o log detalhado do conector para este conector adicionando esta entrada de configuração de logger ao arquivo logback.xml do seu agente privado:

    <logger name="org.jitterbit.connector.apache.kafka" level="DEBUG"/>

    Para obter mais informações sobre log detalhado do conector, consulte Log detalhado para conectores usando agentes privados Jitterbit.

  5. Se estiver usando agentes privados, você pode verificar os logs do agente para obter mais informações.

  6. Para considerações adicionais de solução de problemas, consulte Solução de problemas de operação.