apache-spark - spark-submit:403错误,客户端系统:匿名错误

标签 apache-spark kubernetes google-kubernetes-engine spark-submit

有时,当我向Google Kubernetes集群提交Spark作业时,我遭到401的未授权,因此我执行了gcloud container clusters get-credential my-cluster,但是它几乎总是跟随403错误,并说客户端系统:匿名等,但是奇怪的是,我只需要做一个简单的kubectl get namespace,然后它又可以工作了,为什么呢?

最佳答案

From time to time, when I submit spark job to Google Kubernetes cluster, I got 401 unauthorized



您的凭据已过期。

I do this gcloud container clusters get-credential my-cluster, but it almost always followed by 403 error, saying client system:anonymous etc.



听起来像是时间问题,您的新凭据在群集中传播。

关于apache-spark - spark-submit:403错误,客户端系统:匿名错误,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/53375690/

相关文章:

apache-spark - spark-submit与我位于hdfs中的jar不兼容

json - 使用 jq 从复杂的 json 对象中过滤数据

相当于 'kubectl apply' 的 Kubernetes API 调用

java - kubernetes 状态集连接

docker - GCloud:无法提取镜像(400)-权限 "artifactregistry.repositories.downloadArtifacts"被拒绝

kubernetes - 在 GKE 中应用导出网络策略后无法从 Pod 连接互联网

xml - 如何在使用 spark 解析 xml 时将标题信息添加到行信息

html - 如何解析pyspark中的html文件并使用Beautifulsoup?

nginx - 在 kubernetes nginx 入口 Controller 中传递请求 header 和请求正文

apache-spark - 了解Spark Shuffle溢出