为什么有时Kafka消息队列在编写集成测试时不返回消息？

问题描述

我正在尝试在我的应用程序中为 Kafka 消息传递编写集成测试。当我运行我的测试时，它们有时会通过，有时会失败。当它们失败时，测试类中的以下行无法返回任何消息。我不确定为什么它有时会返回消息，有时则不会。非常感谢任何帮助解决。所有的配置都在 yml 文件中。

Map<String,MessageResponse> message = messageResponseTestListener.getMessages(); 

制作人

@KafkaClient
public interface MessageRequestTestProducer {

     @Topic("${kafka.messageRequestTopic}")
     Single<RecordMetadata> sendMessageRequest(@KafkaKey String id,MessageRequest messageRequest);
} 

消费者

@Singleton
@KafkaListener(groupId = "test",offsetReset = OffsetReset.EARLIEST)
public class MessageResponseTestListener {

    public CountDownLatch getLatch() {
        return latch;
    }

    private CountDownLatch latch = new CountDownLatch(1);

    private Map<String,MessageResponse> messages = new HashMap<>();

    @Topic("${kafka.messageResponsetopic}")
    public Single<MessageResponse> eventOccurred(@KafkaKey String key,Single<MessageResponse> recordSingle) {
        return recordSingle.doOnSuccess(record -> {
                    messages.put(key,record);
                    latch.countDown();
                }
        );

    }

    public Map<String,MessageResponse> getMessages() {
        return messages;
    }
}

KafkaBaseTest

public class KafkaTestBase implements TestPropertyProvider{

protected static KafkaContainer kafka = new KafkaContainer(DockerImageName.parse("confluentinc/cp-kafka:5.4.3"));

@Override
public Map<String,String> get()
{
    return null;
}

@NonNull
@Override
public Map<String,String> getProperties()
{
    Map<String,String> propertyOverrideMap = new HashMap();
    propertyOverrideMap.put("kafka.bootstrap.servers",kafka.getBootstrapServers());

    return propertyOverrideMap;
}

static {
    kafka.start();
}
}

测试类

@Inject
MessageRequestTestProducer messageRequestTestProducer;

@Inject
MessageResponseTestListener messageResponseTestListener;

@Test
void test() throws InterruptedException {

    TEST("Message Testing Kafka version");

    String id = "123";
    MessageRequest messageRequest = buildCorrectRequest();
    messageRequestTestProducer.sendMessageRequest(id,messageRequest).blockingGet();

    messageResponseTestListener.getLatch().await(2,TimeUnit.SECONDS);
    WHEN("Message event received");

    Map<String,MessageResponse> message = messageResponseTestListener.getMessages();

    THEN("Message is produced");

    assertTrue(message.containsKey(id));
    assertEquals(buildExpectedMessageResponse(),message.get(cdrId));

}

解决方法

暂无找到可以解决该程序问题的有效方法，小编努力寻找整理中！

如果你已经找到好的解决方法，欢迎将解决方案带上本链接一起发送给小编。

小编邮箱:dio#foxmail.com (将#修改为@）