当前位置: 首页 >> 游戏 >
Hadoop在程序中的含义是什么?spark-shell编程中找不到hadoop so该怎么处理?
来源:亚洲网     时间:2022-12-16 08:52:27

Hadoop是什么?

Hadoop是一个由Apache基金会所开发的分布式系统基础架构。用户可以在不了解分布式底层细节的情况下,开发分布式程序。充分利用集群的威力进行高速运算和存储。

spark-shell 找不到hadoop so问题解决

[main] WARN org.apache.hadoop.util.NativeCodeLoader - Unable to load native-hadoop library for your platform... using builtin-java classes where applicable

在Spark的conf目录下,修改spark-env.sh文件,加入LD_LIBRARY_PATH环境变量,值为HADOOP的native库路径即可.

推荐新闻 +
猜您喜欢 +