java.lang.NoSuchFieldError: IBM_JAVA для простого Java-клиента hbase в Eclipse

Как заголовок идет. Мой исходный код:

package hbase;

import java.io.IOException;

import org.apache.hadoop.conf.Configuration;
import org.apache.hadoop.hbase.HBaseConfiguration;
import org.apache.hadoop.hbase.HColumnDescriptor;
import org.apache.hadoop.hbase.HTableDescriptor;
import org.apache.hadoop.hbase.client.HBaseAdmin;
import org.apache.hadoop.hbase.util.Bytes;

public class HbaseExampleClient {
public static void main(String[] args) throws IOException {
    Configuration config = HBaseConfiguration.create();
    config.set("hbase.zookeeper.quorum", "192.168.10.17");
    config.set("hbase.zookeeper.property.clientPort", "2222");
    HBaseAdmin admin = new HBaseAdmin(config);//reports an IBM_JAVA NoSuchFieldError
    HTableDescriptor htd = new HTableDescriptor("test1111");
    HColumnDescriptor hcd = new HColumnDescriptor("data");
    htd.addFamily(hcd);
    admin.createTable(htd);
    byte[] tablename = htd.getName();
    HTableDescriptor[] tables = admin.listTables();
    if(tables.length!= 1 && Bytes.equals(tablename, tables[0].getName()))
    {
        throw new IOException("Failed create of table!");
    }
    admin.close();
}
}

Exception in thread "main" java.lang.NoSuchFieldError: IBM_JAVA
    at org.apache.hadoop.security.UserGroupInformation.getOSLoginModuleName(UserGroupInformation.java:337)
    at org.apache.hadoop.security.UserGroupInformation.<clinit>(UserGroupInformation.java:382)
    at sun.reflect.NativeMethodAccessorImpl.invoke0(Native Method)
    at sun.reflect.NativeMethodAccessorImpl.invoke(Unknown Source)
    at sun.reflect.DelegatingMethodAccessorImpl.invoke(Unknown Source)
    at java.lang.reflect.Method.invoke(Unknown Source)
    at org.apache.hadoop.hbase.util.Methods.call(Methods.java:37)
    at org.apache.hadoop.hbase.security.User.call(User.java:624)
    at org.apache.hadoop.hbase.security.User.callStatic(User.java:614)
    at org.apache.hadoop.hbase.security.User.access$300(User.java:52)
    at org.apache.hadoop.hbase.security.User$SecureHadoopUser.<init>(User.java:431)
    at org.apache.hadoop.hbase.security.User$SecureHadoopUser.<init>(User.java:426)
    at org.apache.hadoop.hbase.security.User.getCurrent(User.java:177)
    at org.apache.hadoop.hbase.client.UserProvider.getCurrent(UserProvider.java:78)
    at org.apache.hadoop.hbase.client.UserProvider.getCurrentUserName(UserProvider.java:62)
    at org.apache.hadoop.hbase.client.HConnectionManager$HConnectionKey.<init>(HConnectionManager.java:473)
    at org.apache.hadoop.hbase.client.HConnectionManager.getConnection(HConnectionManager.java:198)
    at org.apache.hadoop.hbase.client.HBaseAdmin.<init>(HBaseAdmin.java:116)
    at hbase.HbaseExampleClient.main(HbaseExampleClient.java:19)

Кажется, что эта ошибка не имеет ничего общего с сервером hbase, потому что я могу использовать оболочку hbase правильно. Но я действительно не знаю, как решить эту проблему. Обе из моего ноутбука (windows) Eclipse и linux Eclipse удаленного рабочего стола (Ubuntu) сообщают об одной и той же ошибке.

Кто-нибудь может мне помочь?

Источник

3 ответа

Я также столкнулся с той же проблемой, но нашел решение, эта проблема возникает из-за проблемы с jar, поскольку IBM_JAVA является постоянной

 public static final boolean IBM_JAVA = JAVA_VENDOR_NAME.contains("IBM");

и эта константа определена в классе org.apache.hadoop.util.PlatformName, но структура и класс пакета определены в двух банках:

  1. Hadoop-жильный
  2. Hadoop-авт

но класс, присутствующий в ядре hadoop, не имеет этой константы.

IBM_JAVA

И ваше приложение пытается выполнить поиск в банке hadoop-core. Так что добавьте jar hadoop-auth в ваше приложение.

Источник

Я столкнулся с той же проблемой при использовании более ранних версий jar-файлов для hadoop-core и hadoop-auth. Использование jar версии ниже решает мою проблему.

Hadoop-ядро-1.2.1.jar

Hadoop-Auth-2.2.0.jar

Источник

У меня была такая проблема, и удалил fs (файловая система) и security от hadoop-common-X.X.X.jar, Затем я добавил его совместимый исходный код в исходные коды Java. Кроме того, я удалил hadoop-auth, потому что это был мой первый тест, я удалил их, чтобы запустить мой код.

Источник
Другие вопросы по тегам