hdfs错误AccessControlException: Permission denied

hadoop | 2019-09-13 10:02:39

出现异常：

spark on yarn时出现下面的错误

19/09/06 15:47:45 ERROR SparkContext: Error initializing SparkContext.
org.apache.hadoop.security.AccessControlException: Permission denied: user=root, access=WRITE, inode="/user/root/.sparkStaging/application_1567749013546_0003":hdfs:hdfs:drwxr-xr-x
	at org.apache.hadoop.hdfs.server.namenode.FSPermissionChecker.check(FSPermissionChecker.java:353)
	at org.apache.hadoop.hdfs.server.namenode.FSPermissionChecker.check(FSPermissionChecker.java:325)
	at org.apache.hadoop.hdfs.server.namenode.FSPermissionChecker.checkPermission(FSPermissionChecker.java:246)
	at org.apache.hadoop.hdfs.server.namenode.FSPermissionChecker.checkPermission(FSPermissionChecker.java:190)
	at org.apache.hadoop.hdfs.server.namenode.FSDirectory.checkPermission(FSDirectory.java:1950)
	at org.apache.hadoop.hdfs.server.namenode.FSDirectory.checkPermission(FSDirectory.java:1934)
	at org.apache.hadoop.hdfs.server.namenode.FSDirectory.checkAncestorAccess(FSDirectory.java:1917)
	at org.apache.hadoop.hdfs.server.namenode.FSDirMkdirOp.mkdirs(FSDirMkdirOp.java:71)
	at org.apache.hadoop.hdfs.server.namenode.FSNamesystem.mkdirs(FSNamesystem.java:4185)
	at org.apache.hadoop.hdfs.server.namenode.NameNodeRpcServer.mkdirs(NameNodeRpcServer.java:1109)
	at org.apache.hadoop.hdfs.protocolPB.ClientNamenodeProtocolServerSideTranslatorPB.mkdirs(ClientNamenodeProtocolServerSideTranslatorPB.java:645)
	at org.apache.hadoop.hdfs.protocol.proto.ClientNamenodeProtocolProtos$ClientNamenodeProtocol$2.callBlockingMethod(ClientNamenodeProtocolProtos.java)
	at org.apache.hadoop.ipc.ProtobufRpcEngine$Server$ProtoBufRpcInvoker.call(ProtobufRpcEngine.java:640)
	at org.apache.hadoop.ipc.RPC$Server.call(RPC.java:982)
	at org.apache.hadoop.ipc.Server$Handler$1.run(Server.java:2351)
	at org.apache.hadoop.ipc.Server$Handler$1.run(Server.java:2347)
	at java.security.AccessController.doPrivileged(Native Method)
	at javax.security.auth.Subject.doAs(Subject.java:422)
	at org.apache.hadoop.security.UserGroupInformation.doAs(UserGroupInformation.java:1869)
	at org.apache.hadoop.ipc.Server$Handler.run(Server.java:2347)

异常原因：

这是由于hdfs权限导致的

解决方法：

使用参数禁用权限验证

<property>
        <name>dfs.permissions.enabled</name>
        <value>false</value>
    </property>

登录后即可回复登录 | 注册

psutil/ psutil linux.c 12 20 错误：python.h：没有那个文件或目录 hdfs错误accesscontrolexception permission denied hadoop hdfs 分布式文件系统 hdfs namenode和datanode hdfs federation联合 namenodes/namespaces 配置 mysql 拒绝访问错误的原因 mysql 使用bdb表时可能出现的错误 php 影响 php 行为的扩展错误处理和日志记录 php datetime 获取警告和错误信息 php 错误处理预定义常量 php 错误处理函数清除最近一次错误 php 错误处理函数获取最后发生的错误 php 错误处理函数发送错误信息到某个地方 php openssl 函数返回 openssl 错误消息 php postgresql 函数得到某连接的最后一条错误信息 php 运算符错误控制运算符 php 从 php 4 移植到 php 5 错误报告 php yaf application 获取最近产生的错误的错误信息 php yaf application 获取最后产生的错误的错误代码 docker容器挂载目录 Permission denied