删除后 Kafka KeyValue 存储的磁盘空间未更新

问题描述

我的服务正在使用 Kafka 键值存储。我已经在两个处理器中安排了两个任务，它们从存储中删除格式错误和过时的记录。但是，我只有在停止本地实例后才能看到更新的磁盘空间。我查了一下，从我的 java 进程到 RocksDB 有很多句柄，不管任务是否正在运行。

这是我的代码：

public void init(ProcessorContext processorContext) {
store = (keyvalueStore<String,AssistantMessage>) processorContext.getStateStore(storeName);
processorContext.schedule(Duration.ofHours(6),PunctuationType.WALL_CLOCK_TIME,timestamp -> {
  LOGGER.info("Starting execution of task for deletion of assistant group messages.");
  try( keyvalueIterator<String,AssistantMessage> iterator = store.all()) {
    while (iterator.hasNext()) {
      keyvalue<String,AssistantMessage> keyvalue = iterator.next();
      if (CommonUtil.isRecordExpired(new EffectiveDatedAssistantMessage(keyvalue.value))) {
        store.delete(keyvalue.key);
      }
    }
  }
  LOGGER.info("Finished execution of task for deletion of assistant group messages.");
});

}

其他处理器的init方法中的代码几乎一样。 我正在使用默认的 RocksDB 配置。任何帮助将不胜感激。

解决方法

暂无找到可以解决该程序问题的有效方法，小编努力寻找整理中！

如果你已经找到好的解决方法，欢迎将解决方案带上本链接一起发送给小编。

小编邮箱:dio#foxmail.com (将#修改为@）