環境細節
在詢問 Apache Spark 相關問題時,請提供以下資訊
- 客戶端使用的 Apache Spark 版本和 Spark 部署(如果適用)。對於 API 相關問題,主要(1.6,2.0,2.1 等)通常就足夠了,因為有關可能的錯誤的問題總是使用完整版本資訊。
- Scala 版本用於構建 Spark 二進位制檔案。
- JDK 版本(
java -version
)。 - 如果你使用客戶語言(Python, R),請提供有關語言版本的資訊。在 Python 中使用標籤: python-2.x , python-3.x 或更具體的標籤來區分語言變體。
- 如果適用,構建定義(
build.sbt
,pom.xml
)或適用時的外部依賴性版本(Python, R)。 - 叢集管理器(
local[n]
,Spark standalone,Yarn,Mesos),模式(client
,cluster
)和其他提交選項(如果適用)。