大数据软件版本参考
版本明细
因为google dataproc版本在不断更新，这里保存一份，选择最低版本。
| 组件 | 2.27-debian12-ubuntu22-rocky9 (2025/12/05) | 2.27-debian12-ubuntu22-rocky9 (2025/11/22) | 2.27-debian12-ubuntu22-rocky9 (2025/10/28) | 2.27-debian12-ubuntu22-rocky9 (2025/10/20) | 2.26-debian12-ubuntu22-rocky9 (2025/10/14) |
|---|---|---|---|---|---|
| Apache Atlas | 2.2.0 | 2.2.0 | 2.2.0 | 2.2.0 | 2.2.0 |
| Apache Flink | 1.17.0 | 1.17.0 | 1.17.0 | 1.17.0 | 1.17.0 |
| Apache Hadoop | 3.3.6 | 3.3.6 | 3.3.6 | 3.3.6 | 3.3.6 |
| Apache Hive | 3.1.3 | 3.1.3 | 3.1.3 | 3.1.3 | 3.1.3 |
| Apache Hive WebHCat | 3.1.3 | 3.1.3 | 3.1.3 | 3.1.3 | 3.1.3 |
| Apache Hudi | 0.15.0 | 0.15.0 | 0.15.0 | 0.15.0 | 0.15.0 |
| Apache Iceberg | 1.6.1 | 1.6.1 | 1.6.1 | 1.6.1 | 1.6.1 |
| Apache Kafka | 3.1.0 | 3.1.0 | 3.1.0 | 3.1.0 | 3.1.0 |
| Apache Pig | 0.18.0-SNAPSHOT | 0.18.0-SNAPSHOT | 0.18.0-SNAPSHOT | 0.18.0-SNAPSHOT | 0.18.0-SNAPSHOT |
| Apache Spark | 3.5.3 | 3.5.3 | 3.5.3 | 3.5.3 | 3.5.3 |
| Apache Sqoop | 1.5.0-SNAPSHOT | 1.5.0-SNAPSHOT | 1.5.0-SNAPSHOT | 1.5.0-SNAPSHOT | 1.5.0-SNAPSHOT |
| Apache Tez | 0.10.2 | 0.10.2 | 0.10.2 | 0.10.2 | 0.10.2 |
| BigQuery 连接器 | 0.34.1 | 0.34.1 | 0.34.1 | 0.34.1 | 0.34.1 |
| Cloud Storage 连接器 | 3.0.15 | 3.0.15 | 3.0.13 | 3.0.13 | 3.0.10 |
| Conscrypt | 2.5.2 | 2.5.2 | 2.5.2 | 2.5.2 | 2.5.2 |
| Delta Lake | 3.2.0 | 3.2.0 | 3.2.0 | 3.2.0 | 3.2.0 |
| Docker | 24.0 | 24.0 | 24.0 | 24.0 | 24.0 |
| Hue | 4.11.0 | 4.11.0 | 4.11.0 | 4.11.0 | 4.11.0 |
| Java | 11 | 11 | 11 | 11 | 11 |
| JupyterLab | 3.6 | 3.6 | 3.6 | 3.6 | 3.6 |
| Oozie | 5.2.1 | 5.2.1 | 5.2.1 | 5.2.1 | 5.2.1 |
| Python | Python 3.11 (conda 23.11.0) | Python 3.11 (conda 23.11.0) | Python 3.11 (conda 23.11.0) | Python 3.11 (conda 23.11.0) | Python 3.11 (conda 23.11.0) |
| R | 4.3 | 4.3 | 4.3 | 4.3 | 4.3 |
| Ranger | 2.4.0 | 2.4.0 | 2.4.0 | 2.4.0 | 2.4.0 |
| Scala | 2.12.18 | 2.12.18 | 2.12.18 | 2.12.18 | 2.12.18 |
| Solr | 9.2.1 | 9.2.1 | 9.2.1 | 9.2.1 | 9.2.1 |
| Trino | 432 | 432 | 432 | 432 | 432 |
| Zeppelin | 0.10.1 | 0.10.1 | 0.10.1 | 0.10.1 | 0.10.1 |
| Zookeeper | 3.8.3 | 3.8.3 | 3.8.3 | 3.8.3 | 3.8.3 |