Ir para o conteúdo

Atividade de Envio de Mensagem do Apache Kafka

Introdução

Uma atividade Apache Kafka Send Message, usando sua conexão Apache Kafka, envia fluxos de dados para um tópico em um cluster Apache Kafka e destina-se a ser usado como um destino para consumir dados em uma operação.

Crie uma Atividade de Envio de Mensagem do Apache Kafka

Uma instância de uma atividade Apache Kafka Send Message é criada a partir de uma conexão Apache Kafka usando seu tipo de atividade Send Message.

Para criar uma instância de uma atividade, arraste o tipo de atividade para a quadro de design ou copie o tipo de atividade e cole-o na quadro de design. Para obter detalhes, consulte Criando uma instância de atividade em Reutilização de componentes.

Uma atividade Send Message existente do Apache Kafka pode ser editada nestes locais:

Configurar uma Atividade de Envio de Mensagem do Apache Kafka

Siga estas etapas para configurar uma atividade Send Message do Apache Kafka:

Etapa 1: Insira um Nome

Nesta etapa, insira um nome para a atividade. Cada elemento da interface do usuário desta etapa é descrito abaixo.

Etapa 1 da configuração da atividade de envio de mensagem do Apache Kafka

  • Nome: Insira um nome para identificar a atividade. O nome deve ser exclusivo para cada atividade Send Message do Apache Kafka e não deve conter barras / ou dois pontos :.

  • Salvar e Sair: Se ativado, clique para salvar a configuração desta etapa e feche a configuração da atividade.

  • Próximo: Clique para armazenar temporariamente a configuração desta etapa e continuar para a próxima etapa. A configuração não será salva até que você clique no botão Concluído na última etapa.

  • Descartar alterações: Após fazer as alterações, clique para fechar a configuração sem salvar as alterações feitas em nenhuma etapa. Uma mensagem solicita que você confirme que deseja descartar as alterações.

Etapa 2: Revise os Esquemas de Dados

Quaisquer esquemas de solicitação ou resposta gerados a partir do endpoint serão exibidos. Cada elemento da interface do usuário desta etapa é descrito abaixo.

Etapa 2 da configuração da atividade de envio de mensagem do Apache Kafka

  • Esquemas de dados: Esses esquemas de dados são herdados por transformações adjacentes e são exibidos novamente durante o mapeamento de transformação.

O conector Apache Kafka usa a API Apache Kafka Core. Consulte a documentação da API para obter informações sobre os nós e campos do esquema.

Os esquemas de dados de solicitação e resposta consistem nestes nós e campos:

Nó/campo do esquema de solicitação Descrição
sendMessagesRequest Nó que representa a solicitação de atividade
messages Nó que representa a mensagem que está sendo enviada
item Nó que representa os itens da mensagem que está sendo enviada
topic String com o nome do tópico para onde a mensagem está sendo enviada
message String contendo a mensagem
Nó/campo do esquema de resposta Descrição
sendMessagesResponse Nó que representa a resposta da atividade
response Nó representando a resposta
item Nó que representa os itens da resposta
success Booleano contendo o sucesso (true) ou falha (false) da recuperação de mensagens
message String contendo a mensagem
topic String com o nome do tópico para onde a mensagem foi enviada
error Nó contendo erros
errorMessage String contendo mensagens de erro, se aplicável
  • Atualizar: Clique no ícone de atualização Ícone de atualização ou a palavra Refresh para regenerar esquemas do endpoint Apache Kafka. Esta ação também regenera um esquema em outros locais do projeto onde o mesmo esquema é referenciado, como em uma transformação adjacente.

  • Voltar: Clique para armazenar temporariamente a configuração desta etapa e retornar à etapa anterior.

  • Concluído: Clique para salvar a configuração de todas as etapas e fechar a configuração da atividade.

  • Descartar alterações: Após fazer as alterações, clique para fechar a configuração sem salvar as alterações feitas em nenhuma etapa. Uma mensagem solicita que você confirme que deseja descartar as alterações.

Próximos Passos

Depois de configurar uma atividade Send Message do Apache Kafka, conclua a configuração da operação adicionando e configurando outras atividades, transformações ou scripts como etapas de operação. Você também pode definir as configurações de operação, que incluem a capacidade de encadear operações que estejam no mesmo fluxo de trabalho ou em workflows diferentes.

As ações de menu de uma atividade podem ser acessadas no painel do projeto e na quadro de design. Para obter detalhes, consulte Menu Ações da atividade em Noções básicas do conector.

As atividades Send Message do Apache Kafka podem ser usadas como alvo com estes padrões de operação:

Para usar a atividade com funções de script, grave os dados em um local temporário e use esse local temporário na função de script.

Quando estiver pronto, implantar e execute a operação e validar o comportamento verificando os logs de operação.