将外部 kafka 集群连接到 Apache Atlas？

编程问答 2022-05-10

问题描述

我们如何将外部 kafka 集群连接到 Apache Atlas 以进行元数据发现？ 我有一个运行 Apache Atlas docker 映像的 Ubuntu 服务器和另一个带有单个 kafka 集群的 Ubuntu 服务器（单个主题） 我想在Apache Atlas中查看这个topic的元数据

示例：当您按 kafka_topic 类型进行搜索时 - 这个外部主题应该会出现。做到这一点的最佳方法是什么？ 我编辑了 atlas-application.properties 文件，但无法让它们显示

编辑：删除的泊坞窗图像 当前配置：

Kafka 服务器 - Azure 上的 Ubuntu VM，创建了一个测试主题 Atlas Server - Azure 上的另一个 Ubuntu VM

步骤如下：

  1. 对 atlas-application.properties 进行更改

    vim atlas-application.properties #########通知配置######### atlas.notification.embedded=false atlas.kafka.zookeeper.connect=KafkaVM:2181 atlas.kafka.bootstrap.servers=KafkaVM:9092 atlas.kafka.zookeeper.session.timeout.ms=4000 atlas.kafka.zookeeper.connection.timeout.ms=2000 atlas.kafka.enable.auto.commit=true

然后我跟着https://atlas.apache.org/2.0.0/Bridge-Kafka.html运行/hook-bin/import-kafka.sh

但得到以下响应 - 找不到有效的 KAFKA 配置

有人遇到过类似的问题吗？

解决方法

暂无找到可以解决该程序问题的有效方法，小编努力寻找整理中！

如果你已经找到好的解决方法，欢迎将解决方案带上本链接一起发送给小编。

小编邮箱:dio#foxmail.com (将#修改为@）

apache-atlasapache-kafka