ITPub博客

首页 > 大数据 > Hadoop > Unable to load native-hadoop library for your platform...

Unable to load native-hadoop library for your platform...

原创 Hadoop 作者:熊深圳 时间:2016-04-26 16:59:37 0 删除 编辑

一.问题描述。

在安装好Hadoop后,在启动Hadoop或进行一些需求和操作时会产生本地库无法使用的警告。如下

WARN util.NativeCodeLoader: Unable to load native-hadoop library for your platform... using builtin-java classes where applicable

二.问题分析。

Hadoop是使用Java语言开发完成的,再加上Hadoop的原生版本都是32位的,

为了能够更好的操作Hadoop,所以就引入了Hadoop的本地库,通过本地库可以更加高效地执行某一些操作。这就极有可能造成一些Hadoop本地库的需求和操作并不完全适合使用java,因此便造成了Hadoop本地库与系统的冲突。

三.为题解决。

为了解决本地库的冲突,可以通过配置文件,定向的去使用Hadoop的本地库。

修改hadoop-env.sh和yarn-env.sh添加如下配置:

export HADOOP_COMMON_LIB_NATIVE_DIR=${HADOOP_HOME}/lib/native

       export HADOOP_OPTS="-Djava.library.path=$HADOOP_HOME/lib"

来自 “ ITPUB博客 ” ,链接:https://blog.itpub.net/30172158/viewspace-2088718/ ,如需转载,请注明出处,否则将追究法律责任。

下一篇: hive权限控制
请登录后发表评论 登录
全部评论

注册时间:2015-03-21

  • 博文量
    26
  • 访问量
    496632