• spark on yarn idea远程提交报错,查看8088日志发现

  • 设置sparkconf的"spark.yarn.jars"属性后解决第一个为你的jar包名称,第二个为spark依赖的jar包目录

.set("spark.yarn.jars", "C:\\Users\\han\\Desktop\\test\\dns_project\\target\\dns_project.jar,hdfs://dsy:9000/spark-yarn/jars/*.jar")

重新运行后成功解决,虽然报了其他错... 但总算找到了类

Logo

一站式 AI 云服务平台

更多推荐