环境细节
在询问 Apache Spark 相关问题时,请提供以下信息
- 客户端使用的 Apache Spark 版本和 Spark 部署(如果适用)。对于 API 相关问题,主要(1.6,2.0,2.1 等)通常就足够了,因为有关可能的错误的问题总是使用完整版本信息。
- Scala 版本用于构建 Spark 二进制文件。
- JDK 版本(
java -version
)。 - 如果你使用客户语言(Python, R),请提供有关语言版本的信息。在 Python 中使用标签: python-2.x , python-3.x 或更具体的标签来区分语言变体。
- 如果适用,构建定义(
build.sbt
,pom.xml
)或适用时的外部依赖性版本(Python, R)。 - 集群管理器(
local[n]
,Spark standalone,Yarn,Mesos),模式(client
,cluster
)和其他提交选项(如果适用)。