Mettre à jour un cluster Dataproc à l'aide d'un modèle

Cette page vous explique comment utiliser un modèle Google APIs Explorer pour mettre à jour un cluster Dataproc afin d'en modifier le nombre de nœuds de calcul. Le scaling d'un cluster en vue d'y inclure plus de nœuds de calcul est une tâche courante lorsqu'un nœud de calcul supplémentaire est nécessaire pour traiter des tâches plus volumineuses.

Pour découvrir d'autres méthodes permettant de mettre à jour un cluster Dataproc, consultez les pages suivantes:

Avant de commencer

Ce guide de démarrage rapide suppose que vous avez déjà créé un cluster Dataproc. Vous pouvez utiliser APIs Explorer, Google Cloud Console, l'outil de ligne de commande gcloud de gcloud CLI ou les guides de démarrage rapide avec les bibliothèques clientes Cloud pour créer un cluster.

Mettre à jour un cluster

Pour mettre à jour le nombre de nœuds de calcul dans votre cluster, complétez et exécutez le modèle Essayer cette API de Google APIs Explorer.

  1. Paramètres de requête :

    1. Insérez votre projectId.
    2. Spécifiez la région où se trouve votre cluster (confirmez ou remplacez "us-central1"). La région de votre cluster est répertoriée sur la page Clusters de Dataproc dans la console Google Cloud.
    3. Spécifiez le clusterName du cluster existant que vous mettez à jour (confirmez ou remplacez "example-cluster").
    4. updateMask : "config.worker_config.num_instances". Il s'agit du chemin JSON spécifique à la ressource Cluster vers le paramètre numInstances à mettre à jour (consultez les instructions du corps de la requête).
  2. Corps de la requête :

    1. config.workerConfig.numInstances : ("3" : le nouveau nombre de nœuds de calcul). Vous pouvez modifier cette valeur pour ajouter plus ou moins de nœuds de calcul. Par exemple, si votre cluster standard comporte le nombre de nœuds de calcul par défaut, spécifiez "3" pour ajouter un nœud de calcul. Spécifiez "4" pour en ajouter deux. Un cluster Dataproc standard doit comporter au moins deux nœuds de calcul.
  3. Cliquez sur EXÉCUTER. La première fois que vous exécutez le modèle d'API, vous pouvez être invité à choisir votre compte Google et à vous y connecter, puis à autoriser Google APIs Explorer à accéder à votre compte. Si la requête aboutit, la réponse JSON indique que la mise à jour du cluster est en attente.

  4. Pour vérifier que le nombre de nœuds de calcul du cluster a été mis à jour, ouvrez la page Clusters Dataproc dans la console Google Cloud et consultez la colonne Nombre total de nœuds de calcul du cluster. Vous devrez peut-être cliquer sur ACTUALISER en haut de la page pour afficher la valeur mise à jour une fois la mise à jour du cluster terminée.

Effectuer un nettoyage

Pour éviter que les ressources utilisées sur cette page soient facturées sur votre compte Google Cloud, procédez comme suit :

  1. Si vous n'avez pas besoin du cluster pour explorer les autres guides de démarrage rapide ou pour exécuter d'autres jobs, utilisez APIs Explorer, Google Cloud Console, l'outil de ligne de commande gcloud de la gcloud CLI ou les guides de démarrage rapide avec les bibliothèques clientes Cloud pour supprimer le cluster.

Étape suivante