Versioni release 2.3.x

Componente 2.3.5-debian12/-ubuntu22/-rocky9
2025/07/04		 2.3.4-debian12/-ubuntu22/-rocky9
2025/06/20		 2.3.3-debian12/-ubuntu22/-rocky9
2025/06/09		 2.3.2-debian12/-ubuntu22/-rocky9
2025/06/09
Azione di inizializzazione
Apache Atlas		 2.2.0 2.2.0 2.2.0 2.2.0
Apache Flink
componente facoltativo		 1.17.0 1.17.0 1.17.0 1.17.0
Apache Hadoop
installato		 3.3.6 3.3.6 3.3.6 3.3.6
Apache Hive
installato		 3.1.3 3.1.3 3.1.3 3.1.3
Apache Hive WebHCat
componente facoltativo		 3.1.3 3.1.3 3.1.3 3.1.3
Apache Hudi
componente facoltativo		 0.15.0 0.15.0 0.15.0 0.15.0
Apache Iceberg
componente facoltativo		 1.6.1 1.6.1 1.6.1 1.6.1
Azione di inizializzazione
Apache Kafka		 3.1.0 3.1.0 3.1.0 3.1.0
Apache Pig
componente facoltativo		 0.18.0-SNAPSHOT 0.18.0-SNAPSHOT 0.18.0-SNAPSHOT 0.18.0-SNAPSHOT
Apache Spark
installato		 3.5.3 3.5.3 3.5.3 3.5.3
Azione di inizializzazione
Apache Sqoop 		1.5.0-SNAPSHOT 1.5.0-SNAPSHOT 1.5.0-SNAPSHOT 1.5.0-SNAPSHOT
Apache Tez
installato		 0.10.2 0.10.2 0.10.2 0.10.2
Connettore BigQuery
installato		 0.42.3 0.42.3 0.42.3 0.42.0
Cloud Storage Connector
installato		 3.1.0 3.1.0 3.1.0 3.1.0
Conscrypt
installato		 2.5.2 2.5.2 2.5.2 2.5.2
Delta Lake
componente facoltativo		 3.2.0 3.2.0 3.2.0 3.2.0
Docker
componente facoltativo		 28,1 28,1 28,1 28,1
Azione di inizializzazione
 4.11.0 4.11.0 4.11.0 4.11.0
Java
installato		 11 11 11 11
Blocco note JupyterLab
componente facoltativo		 3.6 3.6 3.6 3.6
Oozie
Oozie		 5.2.1 5.2.1 5.2.1 5.2.1
Python
installato		 micromamba 2.0.5 con Python 3.11 micromamba 2.0.5 con Python 3.11 micromamba 2.0.5 con Python 3.11 micromamba 2.0.5 con Python 3.11
R
installato		 R 4.3 R 4.3 R 4.3 R 4.3
Ranger
componente facoltativo		 2.4.0 2.4.0 2.4.0 2.4.0
Scala
installata		 2.12.18 2.12.18 2.12.18 2.12.18
Solr
componente facoltativo		 9.4.1 9.4.1 9.4.1 9.4.1
Trino
componente facoltativo		 432 432 432 432
Zeppelin Notebook
componente facoltativo		 0.10.1 0.10.1 0.10.1 0.10.1
Zookeeper
componente facoltativo		 3.9.3 3.9.3 3.9.3 3.9.3

Modifiche importanti nella versione 2.3:

  • La versione 2.3 è un'immagine leggera che contiene solo i componenti principali, riducendo l'esposizione alle vulnerabilità ed esposizioni comuni (CVE). Per requisiti di conformità alla sicurezza più elevati, utilizza la versione dell'immagine 2.3 o successive quando crei un cluster Dataproc.

  • Se scegli di installare componenti facoltativi quando crei un cluster Dataproc con l'immagine 2.3, questi verranno scaricati e installati durante la creazione del cluster. Ciò potrebbe aumentare il tempo di avvio del cluster. Per evitare questo ritardo, puoi creare un'immagine personalizzata con i componenti facoltativi preinstallati. A questo scopo, esegui generate_custom_image.py con il flag --optional-components.

Note:

  • Di seguito sono riportati i componenti facoltativi nelle immagini 2.3:

    • Apache Flink
    • Apache Hive WebHCat
    • Apache Hudi
    • Apache Iceberg
    • Apache Pig
    • Delta Lake
    • Docker
    • Blocco note JupyterLab
    • Ranger
    • Solr
    • Zeppelin Notebook
    • Zookeeper

  • yarn.nodemanager.recovery.enabled e l'audit logging HDFS sono abilitati per impostazione predefinita nelle immagini 2.3.

  • micromamba, anziché conda nelle versioni precedenti dell'immagine, viene installato come parte dell'installazione di Python.

  • Problemi di installazione di Docker e Zeppelin:

    • L'installazione non va a buon fine se il cluster non ha accesso a internet pubblico. Come soluzione alternativa, crea un cluster che utilizzi un'immagine personalizzata con i componenti opzionali preinstallati. Per farlo, esegui generate_custom_image.py con il flag --optional-components.
    • L'installazione può non riuscire se il cluster è bloccato su una versione secondaria precedente dell'immagine: i pacchetti vengono installati su richiesta dai repository OSS pubblici e un pacchetto potrebbe non essere disponibile upstream per supportare l'installazione. Come soluzione alternativa, crea un cluster che utilizzi un'immagine personalizzata con componenti facoltativi preinstallati nell'immagine personalizzata. Per farlo, esegui generate_custom_image.py con il flag --optional-components.