如何配置Kudu测试工具，以避免“块高速缓存容量超出内存压力阈值”

问题描述

我正在尝试遵循Getting Started guide中使用KuduTestHarness的指南。我创建了以下简单的测试用例。

import org.apache.kudu.test.KuduTestHarness;

import static org.junit.Assert.assertTrue;
import org.junit.Rule;
import org.junit.Test;

public class DemoTest{
    @Rule
    public KuduTestHarness harness=new KuduTestHarness();

    @Test
    public void testDemo(){
    assertTrue(true);
    }
}

但是在控制台日志中出现以下错误。

2020-10-07 11:50:01,060 [cluster stderr printer] INFO  org.apache.kudu.test.cluster.MiniKuduCluster - E1007 11:50:01.059237 17257 block_cache.cc:99] Block cache capacity exceeds the memory pressure threshold (536870912 bytes vs. 498776800 bytes). This will cause instability and harmful flushing behavior. Lower --block_cache_capacity_mb or raise --memory_limit_hard_bytes.

2020-10-07 11:50:01,060 [cluster stderr printer] INFO  org.apache.kudu.test.cluster.MiniKuduCluster - E1007 11:50:01.059262 17257 flags.cc:441] Detected inconsistency in command-line flags; exiting

2020-10-07 11:50:01,100 [main] DEBUG org.apache.kudu.test.cluster.MiniKuduCluster - Response: error {
  code: RUNTIME_ERROR
  message: "Failed to start masters: Unable to start Master at index 0: /tmp/kudu-binary-jar1893943400146501302/kudu-binary-1.13.0-linux-x86_64/bin/kudu-master: process exited with non-zero status 1"
}

我尝试将标志添加到基本构建器，但没有任何影响。新标志不会显示在日志的标志列表中。

import org.apache.kudu.test.cluster.MiniKuduCluster.MiniKuduClusterBuilder;
...
    static{
    MiniKuduClusterBuilder builder=KuduTestHarness.getBaseClusterBuilder();
    builder.addMasterServerFlag("--block_cache_capacity_mb=498776800");
    }
...

有人可以为我指出正确的方向，以正确配置测试工具。

解决方法

好的，我设法通过阅读源代码解决了这个问题。我为为什么MiniKuduCluster的相关javdocs不在线而感到困惑。

答案是getBaseClusterBuilder（）是工厂方法，而不是我假设的访问器方法。每次您都会得到一个新的，并且创建新的规则实例时，测试工具类将使用一个新的生成器，因此您需要在此时注入自定义生成器。有一个构造器使用该构造器对象。

此代码显示了如何完成。

    public static MiniKuduClusterBuilder builder;

    @BeforeClass
    public static void classInit(){
    builder=KuduTestHarness.getBaseClusterBuilder()
        .addMasterServerFlag("--block_cache_capacity_mb=475")
        .addTabletServerFlag("--block_cache_capacity_mb=475");
    }

    @Rule
    public KuduTestHarness harness=new KuduTestHarness(builder);

根本问题是由于在笔记本电脑上使用了内存有限的VM。我没有太多要做的事情，因此此时自定义构建器的功能非常有用。