检查HBASE本地扩展已警告[MAIN] LZ4.LZ4COMPRESSOR：JAVA.LANG.UNSATISTISTIEFIELLINKERROR

Question

我正在运行HBase和Hadoop HDFS群集（3个节点，同时运行Hadoop和HBase）。他们是Hadoop-3.2.2和HBase-2.3.6和JDK 11.0.14，它们不稳定。在升级到Hadoop-3.3.3和Hbase-2.4.9，JDK 11.0.15之后，我想用命令检查HBase Native Extension：

su - hbase -c 'hbase org.apache.hadoop.util.NativeLibraryChecker'

我得到了警告：

[root@node101:~]#su - hbase -c 'hbase org.apache.hadoop.util.NativeLibraryChecker'

2022-06-06 17:47:32,221 INFO  [main] bzip2.Bzip2Factory: Successfully loaded & initialized native-bzip2 library system-native
2022-06-06 17:47:32,224 INFO  [main] zlib.ZlibFactory: Successfully loaded & initialized native-zlib library
2022-06-06 17:47:32,231 WARN  [main] lz4.Lz4Compressor: java.lang.UnsatisfiedLinkError: 'void org.apache.hadoop.io.compress.lz4.Lz4Compressor.initIDs()'
Exception in thread "main" java.lang.UnsatisfiedLinkError: 'java.lang.String org.apache.hadoop.io.compress.lz4.Lz4Compressor.getLibraryName()'
    at org.apache.hadoop.io.compress.lz4.Lz4Compressor.getLibraryName(Native Method)
    at org.apache.hadoop.io.compress.Lz4Codec.getLibraryName(Lz4Codec.java:73)
    at org.apache.hadoop.util.NativeLibraryChecker.main(NativeLibraryChecker.java:109)

Java-version

openjdk 11.0.15 2022-04-19 LTS
OpenJDK Runtime Environment 18.9 (build 11.0.15+10-LTS)
OpenJDK 64-Bit Server VM 18.9 (build 11.0.15+10-LTS, mixed mode, sharing)

hadoop-env.sh on 3个节点：

grep "^[^#;]" /opt/hadoop/etc/hadoop/hadoop-env.sh

export HADOOP_OS_TYPE=${HADOOP_OS_TYPE:-$(uname -s)}
export JAVA_HOME=$(dirname $(dirname $(readlink -f $(which java))))
export HADOOP_CONF_DIR="/opt/hadoop/etc/hadoop/"
export HADOOP_PID_DIR="/var/run/hadoop"
export HADOOP_LOG_DIR="/var/log/hadoop"

hbase- Env.SH：

grep "^[^#;]" /opt/hbase/conf/hbase-env.sh
export JAVA_HOME=$(dirname $(dirname $(readlink -f $(which java))))
export HBASE_OPTS="$HBASE_OPTS -Djava.library.path=/opt/hadoop/lib/native"
export HBASE_REGIONSERVER_OPTS="$HBASE_REGIONSERVER_OPTS -Xms1G -Xmx3G -XX:MaxDirectMemorySize=4G"
export HBASE_JMX_BASE="-Dcom.sun.management.jmxremote.ssl=false -Dcom.sun.management.jmxremote.authenticate=false -Dcom.sun.management.jmxremote=true -Dcom.sun.management.jmxremote.host=127.0.0.1 -Dcom.sun.management.jmxremote.local.only=false -Djava.rmi.server.hostname=127.0.0.1"
export HBASE_MASTER_OPTS="$HBASE_MASTER_OPTS $HBASE_JMX_BASE -Dcom.sun.management.jmxremote.port=10101"
export HBASE_REGIONSERVER_OPTS="$HBASE_REGIONSERVER_OPTS $HBASE_JMX_BASE -Dcom.sun.management.jmxremote.port=10102"
export HBASE_PID_DIR=/opt/hbase
export HBASE_MANAGES_ZK=false
export HBASE_LOG_DIR=/var/log/hbase

您能帮我知道导致问题的原因吗？ 我是Sysadmin，在编码方面没有很多经验。

谢谢，祝你有美好的一天 男人辛格·勒

Answer 1

您使用的HBASE版本与Hadoop-3.X不兼容，请使用Hadoop 3.X兼容版本。它们在HBASE下载页面上的-Hadoop -3后缀以：

Hadoop用户ML上的类似情况
https：> https：//