当前位置:首页 > 服务器技术 > apache

spark启动后出现“JAVA_HOME not set” 异常和"org.apache.hadoop.security.AccessControlException"异常

jps命令,主节点上有Master进程,其他子节点上有Work进行,登录Spark管理界面查看集群状态(主节点):http://master01:8080/

 

到此为止,Spark集群安装完毕.

1.注意如果遇到 “JAVA_HOME not set” 异常可以在sbin目录下的spark-config.sh 文件中加入如下配置:

export JAVA_HOME=XXXX

 

2.如果遇到Hadoop HDFS的写入权限问题:

org.apache.hadoop.security.AccessControlException

解决方案: hdfs-site.xml中添加如下配置,关权限验证

  <property>
        <name>dfs.permissions</name>
        <value>false</value>
  </property>  

spark启动后出现“JAVA_HOME not set” 异常和"org.apache.hadoop.security.AccessControlException"异常

标签:cep   org   bin   work   文件中   sbin   方案   data   配置   

本文系统来源:https://www.cnblogs.com/alexzhang92/p/10799478.html


【说明】本文章由站长整理发布,文章内容不代表本站观点,如文中有侵权行为,请与本站客服联系(QQ:254677821)!