Google Dataproc utilizza le versioni delle immagini Ubuntu, Debian e Rocky Linux per raggruppare il sistema operativo, i componenti big data e i connettori Google Cloud in un unico pacchetto di cui viene eseguito il deployment su un cluster. Per saperne di più, consulta Controllo delle versioni di Dataproc.
Note:
- Le versioni immagine di Dataproc sono supportate per 24 mesi dopo il rilascio iniziale.
- In genere, le versioni delle immagini Dataproc sono disponibili per 24 mesi dopo la data di fine del supporto, ma un periodo di disponibilità può ridursi se una data di supporto dell'immagine viene estesa.
Versione immagine Dataproc predefinita
Dataproc aggiorna la versione dell'immagine predefinita all'ultima versione di Dataproc basata su Debian disponibile a livello generale dopo la data di rilascio della disponibilità generale (GA).
Versioni immagine di Dataproc supportate
Immagini Debian
Le seguenti versioni immagine basate su Debian sono supportate nei cluster Dataproc. Tieni presente che verranno creati nuovi cluster per includere eventuali patch secondarie apportate a una versione dal momento del rilascio.
| Versione | Ultimo aggiornamento | Data di rilascio | Supportato fino al giorno | Disponibile fino al giorno | Note |
|---|---|---|---|---|---|
| 2.3-debian12 | 20/06/2025 | 09/06/2025 | 09/06/2027 | 09/06/2029 | Release di disponibilità generale. |
| 2.2-debian12 | 20/06/2025 | 2023/12/08 | 31/03/2027 | 31/12/2027 | Release di disponibilità generale. La versione dell'immagine 2.2 diventerà la versione dell'immagine predefinita il 13 settembre 2024. |
| 2.1-debian11 | 20/06/2025 | 12/12/2022 | 2026/03/31 | 2026/12/31 | Release di disponibilità generale. |
| 2.0-debian10 | 20/06/2025 | 22/01/2021 | 30/09/2025 | 31/07/2026 | Release di disponibilità generale. |
Immagini Ubuntu
Le seguenti versioni immagine basate su Ubuntu LTS sono supportate nei cluster Dataproc. Tieni presente che i nuovi cluster verranno creati per includere eventuali patch secondarie apportate a una versione dopo il suo rilascio.
| Versione | Ultimo aggiornamento | Data di rilascio | Supportato fino al giorno | Disponibile fino al giorno | Note |
|---|---|---|---|---|---|
| 2.3-ubuntu22 | 20/06/2025 | 09/06/2025 | 09/06/2027 | 09/06/2029 | Release di disponibilità generale. |
| 2.2-ubuntu22 | 20/06/2025 | 2023/12/08 | 31/03/2027 | 31/12/2027 | Release di disponibilità generale. |
| 2.1-ubuntu20 | 20/06/2025 | 12/12/2022 | 2026/03/31 | 2026/12/31 | Release di disponibilità generale. |
| 2.0-ubuntu18 | 20/06/2025 | 22/01/2021 | 30/09/2025 | 31/07/2026 | Release di disponibilità generale. |
Immagini Rocky Linux
Le seguenti versioni di immagini basate su Rocky Linux sono supportate nei cluster Dataproc. Tieni presente che i nuovi cluster verranno creati per includere eventuali patch secondarie apportate a una versione dopo il suo rilascio.
| Versione | Ultimo aggiornamento | Data di rilascio | Supportato fino al giorno | Disponibile fino al giorno | Note |
|---|---|---|---|---|---|
| 2.3-rocky9 | 20/06/2025 | 09/06/2025 | 09/06/2027 | 09/06/2029 | Release di disponibilità generale. |
| 2.2-rocky9 | 20/06/2025 | 2023/12/08 | 31/03/2027 | 31/12/2027 | Release di disponibilità generale. |
| 2.1-rocky8 | 20/06/2025 | 12/12/2022 | 2026/03/31 | 2026/12/31 | Release di disponibilità generale. |
| 2.0-rocky8 | 20/06/2025 | 18/02/2022 | 30/09/2025 | 31/07/2026 | Release di disponibilità generale. |
Versioni immagine di Dataproc non supportate
Le seguenti versioni di Dataproc non sono supportate. Dataproc non fornisce aggiornamenti e assistenza per i cluster creati con queste versioni. Anche se puoi continuare a eseguire un cluster creato con una versione non supportata, ti consigliamo di sostituirlo con un nuovo cluster creato con una versione supportata.
| Versione | Include | Data di uscita | Ultimo aggiornamento | Note |
|---|---|---|---|---|
1.5-debian10/-ubuntu18/-rocky8 |
Apache Spark 2.4.8 Apache Hadoop 2.10.2 Apache Pig 0.17.0 Apache Hive 2.3.7 Cloud Storage connector 2.1.9-hadoop2 Python 3.7 Scala 2.12.10 Zookeeper 3.4.14 |
2020/03/25:debian10/ubuntu18 2022/02/18:rocky8 |
2023/04/28 | Non supportato a partire dal 28/04/2023. 1.5.89-debian10/-ubuntu18/-rocky8 è stata l'ultima versione rilasciata. |
2.0-centos8 |
Apache Spark 3.1.2 Apache Hadoop 3.2.2 Apache Pig 0.18.0-SNAPSHOT Apache Hive 3.1.2 Cloud Storage connector 2.2.4-hadoop3 Python 3.8 Scala 2.12.14 Zookeeper 3.4.14 |
16/03/2021 | 01/02/2022 | Non supportato a partire dal 01/02/2022. 2.0.30-centos8 è stata l'ultima versione rilasciata. |
1.5-centos8 |
Apache Spark 2.4.8 Apache Hadoop 2.10.1 Apache Pig 0.17.0 Apache Hive 2.3.7 Cloud Storage connector 2.1.5-hadoop2 Python 3.7 Scala 2.12.10 Zookeeper 3.4.14 |
14/12/2020 | 01/02/2022 | Non supportato a partire dal 01/02/2022. 1.5.56-centos8 è stata l'ultima versione rilasciata. |
1.4-debian10/-ubuntu18 |
Apache Spark 2.4.8 Apache Hadoop 2.9.2 Apache Pig 0.17.0 Apache Hive 2.3.7 Cloud Storage connector 1.9.18-hadoop2 Python 3.6 Scala 2.11.12 Zookeeper 3.4.14 |
22/03/2019 | 01/02/2022 | Non supportato a partire dal 01/02/2022. 1.4.80-debian10/-ubuntu18 è stata l'ultima versione rilasciata. |
1.3-debian10/-ubuntu18 |
Apache Spark 2.3.4 Apache Hadoop 2.9.2 Apache Pig 0.17.0 Apache Hive 2.3.7 Cloud Storage connector 1.9.18-hadoop2 Python 2.7 Scala 2.11.8 Zookeeper 3.4.13 |
29/06/2018 | 22/12/2021 | Non supportato a partire dal 01/08/2021. 1.3.95-debian10/-ubuntu18 è stata l'ultima versione rilasciata, in cui sono state risolte le vulnerabilità di log4j2. Nota: le versioni rilasciate in precedenza sono vulnerabili e devono essere aggiornate. |
1.4-debian9 |
Apache Spark 2.4.5 Apache Hadoop 2.9.2 Apache Pig 0.17.0 Apache Hive 2.3.7 Cloud Storage connector 1.9.17-hadoop2 Python 3.6 Scala 2.11.12 Zookeeper 3.4.13 |
22/03/2019 | 10/07/2020 | Non supportato a partire dal 10/07/2020. 1.4.33-debian9 è stata l'ultima versione rilasciata. |
1.3-debian9 |
Apache Spark 2.3.4 Apache Hadoop 2.9.2 Apache Pig 0.17.0 Apache Hive 2.3.7 Cloud Storage connector 1.9.17-hadoop2 Python 2.7 Scala 2.11.8 Zookeeper 3.4.13 |
29/06/2018 | 10/07/2020 | Non supportato a partire dal 10/07/2020. 1.3.62-debian9 è stata l'ultima versione rilasciata. |
1.2-debian9 |
Apache Spark 2.2.3 Apache Hadoop 2.8.5 Apache Pig 0.16.0 Apache Hive 2.1.1 Cloud Storage connector 1.6.10-hadoop2 BigQuery connector 0.10.11-hadoop2 Python 2.7 Scala 2.11.8 Zookeeper 3.4.13 |
21/07/2017 | 10/07/2020 | Non supportato a partire dal 10/07/2020. 1.2.102-debian9 è stata l'ultima versione rilasciata. |
1.1-debian9 |
Apache Spark 2.0.2 Apache Hadoop 2.7.7 Apache Pig 0.16.0 Apache Hive 2.1.1 Cloud Storage connector 1.6.10-hadoop2 BigQuery connector 0.10.11-hadoop2 |
2016/08/08 | 26/09/2019 | Non supportato dal 01/10/2019. 1.1.121-debian9 è l'ultima versione rilasciata. |
1.0-debian9 |
Apache Spark 1.6.2 Apache Hadoop 2.7.4 Apache Pig 0.15.0 Apache Hive 1.2.1 Connettore Cloud Storage 1.6.10-hadoop2 Connettore BigQuery 0.10.11-hadoop2 |
22/02/2016 | 09/05/2019 | Prima release dell'immagine GA. Non supportata a partire dal 01/04/2019. 1.0.119-debian9 è stata l'ultima versione rilasciata. |
0.2 |
Apache Spark 1.5.2 Apache Hadoop 2.7.1 Apache Pig 0.15.0 Apache Hive 1.2.1 Connettore Cloud Storage 1.5.1-hadoop2 Connettore BigQuery 0.7.7-hadoop2 |
18/11/2015 | 2016/08/02 | Seconda release dell'immagine beta. |
0.1 |
Apache Spark 1.5.0 Apache Hadoop 2.7.1 Apache Pig 0.14.10 Apache Hive 1.0 Connettore Cloud Storage 1.5.1-hadoop2 Connettore BigQuery 0.7.7-hadoop2 |
2015/09/23 | 2016/08/02 | Versione beta di Dataproc. Spark 1.5 è stato compilato in base a Hive 1.2. |