Restez organisé à l'aide des collections
Enregistrez et classez les contenus selon vos préférences.
Moteur Spark 3.5
Composant
3.5-dataproc-22
3.5-dataproc-17
Apache Spark
3.5.0
3.5.0
Bibliothèques Hadoop
3.3.6
3.3.6
Connecteur Cloud Storage
3.0.0
3.0.0
Java
11
11
Python
3.8.5
3.8.5
Conda
4.9.2
4.9.2
R
4.3.0
4.3.0
Moteur Spark 3.1(obsolète)
Composant
3.1-dataproc-17
3.1-dataproc-16
3.1-dataproc-15
3.1-dataproc-14
Apache Spark
3.1.3
3.1.3
3.1.3
3.1.3
Bibliothèques Hadoop
3.2.3
3.2.3
3.2.3
3.2.3
Connecteur Cloud Storage
hadoop3-2.2.13
hadoop3-2.2.13
hadoop3-2.2.11
hadoop3-2.2.11
Java
8
8
8
8
Python
3.8.5
3.8.5
3.8.5
3.8.5
Conda
4.9.2
23.5.0
4.9.2
4.9.2
R
4.3.0
4.3.0
4.2.3
4.2.3
Moteur Spark 2.4(obsolète)
Spark 2.4 est arrivé en fin de vie pour la prise en charge dans DPGKE. L'image publique reste disponible sans autre assistance.
Composant
2.4-dataproc-17
2.4-dataproc-16
2.4-dataproc-15
2.4-dataproc-14
Apache Spark
2.4.8
2.4.8
2.4.8
2.4.8
Bibliothèques Hadoop
2.10.2
2.10.2
2.10.2
2.10.2
Connecteur Cloud Storage
hadoop2-2.1.9
hadoop2-2.1.9
hadoop2-2.1.9
hadoop2-2.1.9
Java
8
8
8
8
Python
3.7.4
3.7.4
3.7.4
3.7.4
Conda
4.7.12
22.11.1
22.11.1
22.1.0
R
3.6.3
3.6.3
3.6.3
3.6.3
Format de version Spark sur Dataproc sur GKE
Une version de moteur Spark complète est exprimée sous la forme 3.1-dataproc-[NUMBER] ou 3.5-dataproc-[NUMBER], par exemple 3.1-dataproc-17 ou 3.5-dataproc-17.
Les formats de version Spark peuvent également être exprimés sous forme d'alias, comme illustré dans les exemples suivants:
3 : version la plus récente du moteur Spark avec une version majeure de Spark 3.
3.5 : version la plus récente du moteur Spark avec une version majeure.mineure de Spark 3.5.
dataproc-2.2 : version la plus récente du moteur Spark compatible avec les images 2.2 de Dataproc sur Compute Engine.
latest : version la plus récente du moteur Spark.
Sauf indication contraire, le contenu de cette page est régi par une licence Creative Commons Attribution 4.0, et les échantillons de code sont régis par une licence Apache 2.0. Pour en savoir plus, consultez les Règles du site Google Developers. Java est une marque déposée d'Oracle et/ou de ses sociétés affiliées.
Dernière mise à jour le 2025/04/03 (UTC).
[[["Facile à comprendre","easyToUnderstand","thumb-up"],["J'ai pu résoudre mon problème","solvedMyProblem","thumb-up"],["Autre","otherUp","thumb-up"]],[["Difficile à comprendre","hardToUnderstand","thumb-down"],["Informations ou exemple de code incorrects","incorrectInformationOrSampleCode","thumb-down"],["Il n'y a pas l'information/les exemples dont j'ai besoin","missingTheInformationSamplesINeed","thumb-down"],["Problème de traduction","translationIssue","thumb-down"],["Autre","otherDown","thumb-down"]],["Dernière mise à jour le 2025/04/03 (UTC)."],[[["Spark Engine 3.5 is the latest version, featuring Apache Spark 3.5.0, Hadoop Libraries 3.3.6, and Java 11, among other components."],["Spark Engine 3.1 is deprecated but includes Apache Spark 3.1.3, Hadoop Libraries 3.2.3, and Java 8 across all subversions."],["Spark Engine 2.4 is deprecated and has reached the End-of-Life (EOL) for support in DPGKE, although the public image remains available without further support."],["Spark engine release versions are expressed as `3.1-dataproc-[NUMBER]` or `3.5-dataproc-[NUMBER]`, while aliases like `3`, `3.5`, `dataproc-2.2`, and `latest` can be used for convenience."],["Version aliases are resolved during cluster creation, so using them does not guarantee the same concrete Spark version across multiple clusters."]]],[]]
