Conector Apache Kafka¶

Resumo¶

O Harmony Apache Kafka Connector estabelece acesso ao Apache Kafka.

O conector Apache Kafka fornece uma interface para criar uma conexão Apache Kafka, a base usada para gerar instâncias de atividades do Apache Kafka. Essas atividades, uma vez configuradas, interagem com o Apache Kafka por meio da conexão.

O conector Apache Kafka é acessado na aba Conexões da paleta de componentes de design (consulte Paleta de Componentes de Design).

Visão Geral do Conector¶

Este conector é usado para configurar primeiro uma conexão Apache Kafka. Os tipos de atividades associados a essa conexão são então usados para criar instâncias de atividades que devem ser usadas como fontes (para fornecer dados em uma operação) ou destinos (para consumir dados em uma operação).

Juntos, uma conexão específica do Apache Kafka e suas atividades são chamadas de endpoint do Apache Kafka:

• Enviar mensagem: Envia fluxos de dados para um tópico em um cluster Apache Kafka e se destina a ser usado como alvo em uma operação.

• Receber mensagens: Recupera fluxos de dados de um tópico em um cluster Apache Kafka e se destina a ser usado como fonte em uma operação.

Pré-requisitos e Versões de API Suportadas¶

O conector Apache Kafka requer o uso de uma versão do agente 10.1 ou mais tarde. Essas versões do agente baixam automaticamente a versão mais recente do conector quando necessário.

O conector Apache Kafka usa a API Apache Kafka Core. Consulte a documentação da API para obter informações sobre os nós e campos do esquema.

Solução de Problemas¶

Se você tiver problemas com o conector Apache Kafka, estas etapas de solução de problemas são recomendadas:

1. Clique no botão Testar na configuração da conexão para garantir que a conexão seja bem-sucedida e garantir que a versão mais recente do conector seja baixada para o agente (a menos que você use a Desativar atualização automática do conector política da organização).

2. Verifique os logs de operação para qualquer informação escrita durante a execução da operação.

3. Habilite o registro de depurar de operação (para Agentes em Nuvem ou para Agentes Privados) para gerar arquivos de log e dados adicionais.

4. Se estiver usando Agentes Privados, você pode ativar registro detalhado do conector para este conector usando esta entrada de configuração específica de nome e nível do criador de logs:

   <logger name="org.jitterbit.connector.apache.kafka" level="DEBUG"/>
   

5. Se estiver usando Agentes Privados, você pode verificar os logs do agente Para maiores informações.