EMR 各版本 Spark 相关依赖说明
依赖关系
Spark | scala | Python | R | Java |
2.4.3 | 2.12.x | 2.7+/3.4+ | 3.1+ | 8+ |
3.0.0 | 2.12.x | 2.7+/3.4+ | 3.1+ | 8/11 |
3.0.2 | 2.12.x | 2.7+/3.4+ | 3.5+ | 8/11 |
3.2.1 | 2.12.x/2.13.x | 3.6+ | 3.5+ | 8/11 |
3.2.2 | 2.12.x/2.13.x | 3.6+ | 3.5+ | 8/11 |
查找方法
1. 访问官网链接，输入版本号链接模板：
https://spark.apache.org/docs/{spark.version}/index.html
将
{spark.version} 替换为对应的 spark 版本，例如查看3.2.2版本的依赖关系，访问链接如下：https://spark.apache.org/docs/3.2.2/index.html
2. 查看依赖
文档反馈