hadoops3a中的错误请求和位置约束

jobtbby3  于 2021-05-29  发布在  Hadoop
关注(0)|答案(1)|浏览(385)

位置约束是否需要hadoop s3a的额外权限策略?
我看到了

Exception in thread "main" com.qubole.com.amazonaws.services.s3.model.AmazonS3Exception: Bad Request (Service: Amazon S3; Status Code: 400; Error Code: 400 Bad Request;

对于所有有

{
    "LocationConstraint": "us-west-1"
}

在qubole hadoop中
但不适用于无位置约束的铲斗

{
    "LocationConstraint": null
}
jtjikinw

jtjikinw1#

从没见过,但我从没玩过这个限制。可能的原因是,客户机默认通过默认的中心端点(而不是美国西部端点)与s3通信。
参见s3a故障排除
fs.s3a.endpoint 到这里列出的相关的
如果这是有效的-更新这个问题…这将是一些更新的s3文档,然后

相关问题