java - 从 Java 应用程序连接到 Kerberos 安全的 HBase 集群

Question

我尝试使用以下代码连接到 hbase:

@测试 public void onTrigger() 抛出异常 {

    TestRunner runner = getTestRunner();
      runner.run();

}

私有(private) TestRunner getTestRunner() 抛出 FileNotFoundException、InitializationException {

    final TestRunner runner = TestRunners.newTestRunner(PutAllHBaseAVRO.class);
    runner.setProperty(PutAllHBaseAVRO.TABLE_NAME, "myTable");
    runner.setProperty(PutAllHBaseAVRO.COLUMN_FAMILY, "cf");
    runner.setProperty(PutAllHBaseAVRO.BATCH_SIZE, "10000");

    getHBaseClientService(runner);

    runner.setProperty(PutAllHBaseAVRO.ROW_ID,"Row1");

    // runner.setProperty(PutAllHBaseAVRO.HBASE_CLIENT_SERVICE, hBaseClient);
    runner.setProperty(PutAllHBaseAVRO.ROW_FIELD_REVERSE_STATEGY, "Reverse");
    runner.setProperty(PutAllHBaseAVRO.TS_FIELD_NAME, "dateTimeValue");
    runner.setProperty(PutAllHBaseAVRO.TS_FIELD_FORMAT, "yyyy-MM-dd'T'HH:mm:ssZ");
    return runner;
}

私有(private) HBaseMyClientService getHBaseClientService(最终 TestRunner 运行程序)抛出 InitializationException {

    final HBaseMyClientService hBaseClient = new HBase_1_1_2_MyClientService();


    runner.setProperty(HBaseMyClientService.HADOOP_CONF_FILES, "../hbase-site.xml, ../core-site.xml");

    runner.addControllerService("HBaseMyClientService", hBaseClient);

    //runner.setProperty("Kerberos Principal", "myKerberosPrincipal");

    //runner.setProperty("Kerberos Keytab", "/mypath.keytab");

   // runner.setProperty(HBaseMyClientService.ZOOKEEPER_QUORUM, "hbaseClient");

   // runner.enableControllerService(hBaseClient);

    return hBaseClient;

}

并得到一个错误。不明白为什么我会犯这样的错误:

“HBase 客户端服务”无效，因为需要 HBase 客户端服务 针对“../hbase-site.xml、../core-site.xml”验证的“Hadoop 配置文件”无效，因为“Hadoop 配置文件”不是受支持的属性

Answer 1

TestRunner 是为处理器创建的，您可以在创建它时看到它并说“newTestRunner(PutAllHbaseAvro.class)”。当您调用 runner.setProperty(name, value) 时，它会尝试在处理器上设置该属性，但您的处理器没有 hadoop conf 文件属性，而服务有它。要在服务上设置它，您必须进行不同的调用runner.setProperty(service, name, value)。