Mit Sammlungen den Überblick behalten
Sie können Inhalte basierend auf Ihren Einstellungen speichern und kategorisieren.
Spark Engine 3.5
Komponente
3.5-dataproc-22
3.5-dataproc-17
Apache Spark
3.5.0
3.5.0
Hadoop-Bibliotheken
3.3.6
3.3.6
Cloud Storage-Connector
3.0.0
3.0.0
Java
11
11
Python
3.8.5
3.8.5
Conda
4.9.2
4.9.2
R
4.3.0
4.3.0
Spark Engine 3.1(eingestellt)
Komponente
3.1-dataproc-17
3.1-dataproc-16
3.1-dataproc-15
3.1-dataproc-14
Apache Spark
3.1.3
3.1.3
3.1.3
3.1.3
Hadoop-Bibliotheken
3.2.3
3.2.3
3.2.3
3.2.3
Cloud Storage-Connector
hadoop3-2.2.13
hadoop3-2.2.13
hadoop3-2.2.11
hadoop3-2.2.11
Java
8
8
8
8
Python
3.8.5
3.8.5
3.8.5
3.8.5
Conda
4.9.2
23.5.0
4.9.2
4.9.2
R
4.3.0
4.3.0
4.2.3
4.2.3
Spark Engine 2.4(eingestellt)
Spark 2.4 wird in DPGKE nicht mehr unterstützt. Das öffentliche Image ist weiterhin ohne weitere Unterstützung verfügbar.
Komponente
2.4-dataproc-17
2.4-dataproc-16
2.4-dataproc-15
2.4-dataproc-14
Apache Spark
2.4.8
2.4.8
2.4.8
2.4.8
Hadoop-Bibliotheken
2.10.2
2.10.2
2.10.2
2.10.2
Cloud Storage-Connector
hadoop2-2.1.9
hadoop2-2.1.9
hadoop2-2.1.9
hadoop2-2.1.9
Java
8
8
8
8
Python
3.7.4
3.7.4
3.7.4
3.7.4
Conda
4.7.12
22.11.1
22.11.1
22.1.0
R
3.6.3
3.6.3
3.6.3
3.6.3
Spark-Versionen in Dataproc auf GKE
Eine vollqualifizierte Spark-Engine-Release-Version wird als 3.1-dataproc-[NUMBER] oder 3.5-dataproc-[NUMBER] angegeben, z. B. 3.1-dataproc-17 oder 3.5-dataproc-17.
Spark-Versionen können auch in Aliasform angegeben werden, wie in den folgenden Beispielen gezeigt:
3: Neueste Version der Spark-Engine mit der Hauptversion 3 von Spark.
3.5: Neueste Version der Spark-Engine mit der Spark-Version 3.5.
dataproc-2.2 – Neueste Version der Spark-Engine, die mit Dataproc on Compute Engine-Images der Version 2.2 kompatibel ist.
[[["Leicht verständlich","easyToUnderstand","thumb-up"],["Mein Problem wurde gelöst","solvedMyProblem","thumb-up"],["Sonstiges","otherUp","thumb-up"]],[["Schwer verständlich","hardToUnderstand","thumb-down"],["Informationen oder Beispielcode falsch","incorrectInformationOrSampleCode","thumb-down"],["Benötigte Informationen/Beispiele nicht gefunden","missingTheInformationSamplesINeed","thumb-down"],["Problem mit der Übersetzung","translationIssue","thumb-down"],["Sonstiges","otherDown","thumb-down"]],["Zuletzt aktualisiert: 2025-04-03 (UTC)."],[[["Spark Engine 3.5 is the latest version, featuring Apache Spark 3.5.0, Hadoop Libraries 3.3.6, and Java 11, among other components."],["Spark Engine 3.1 is deprecated but includes Apache Spark 3.1.3, Hadoop Libraries 3.2.3, and Java 8 across all subversions."],["Spark Engine 2.4 is deprecated and has reached the End-of-Life (EOL) for support in DPGKE, although the public image remains available without further support."],["Spark engine release versions are expressed as `3.1-dataproc-[NUMBER]` or `3.5-dataproc-[NUMBER]`, while aliases like `3`, `3.5`, `dataproc-2.2`, and `latest` can be used for convenience."],["Version aliases are resolved during cluster creation, so using them does not guarantee the same concrete Spark version across multiple clusters."]]],[]]
