kafka salesforce-bulk-source-connector 是否与 Amazon MSK 一起使用?

问题描述

happy new 我第一次尝试使用 Kafka,我成功设置了一个 AWS MSK Kafka 集群,我实验的下一步是使用 kafka-connect,特别是我想使用 salesforce-bulk-source 连接器,根据文档,它说这个连接器是一个专有连接器,它需要一个融合许可证作为配置的一部分,以及一个主题在哪里存储here融合平台配置,我的问题,这个连接器是否与MSK 集群还是需要我的集群在融合平台上?

解决方法

无论您的 Kafka 集群如何,您都可以使用连接器。您需要运行自己的 Kafka Connect 工作线程,配置为使用您的 Kafka 集群。

正如您所指出的,它是一个专有连接器,因此:

  • 您可以免费试用 30 天
  • 如果您只有一个 Kafka 代理,则可以无限期地使用开发人员许可证

这是一个 Docker Compose to run Kafka Connect docker image 示例。


编辑:您不能使用需要 MSK 商业许可的 Confluent 连接器。您需要有效的 Confluent 订阅。