Enregistrer et charger des définitions de jobs YAML avec le générateur de jobs

Vous pouvez enregistrer les tâches du générateur de tâches sous forme de fichiers YAML Apache Beam qui encapsulent la configuration de la tâche. Vous pouvez les recharger dans le générateur de jobs pour les réutiliser et les modifier.

Enregistrer un pipeline

Pour enregistrer un pipeline dans le fichier YAML de Beam, procédez comme suit :

  1. Utilisez le générateur de tâches pour créer un pipeline.

  2. Cliquez sur Enregistrer le fichier YAML pour ouvrir la fenêtre Enregistrer le fichier YAML.

  3. Effectuez l'une des actions suivantes :

    • Pour copier le fichier YAML dans le presse-papiers, cliquez sur Copier.
    • Pour enregistrer dans Cloud Storage, saisissez un chemin d'accès Cloud Storage, puis cliquez sur Enregistrer.
    • Pour télécharger un fichier local, cliquez sur Télécharger.

Charger un pipeline

Une fois que vous avez enregistré un pipeline dans le fichier YAML de Beam, vous pouvez le recharger dans le générateur de jobs. Vous pouvez ensuite utiliser le générateur de tâches pour modifier ou exécuter le pipeline.

Vous pouvez charger un fichier YAML Beam à partir de Cloud Storage ou de texte.

Charger un pipeline à partir de Cloud Storage

Pour charger un pipeline à partir de Cloud Storage, procédez comme suit :

  1. Accédez à la page Jobs dans la console Google Cloud.

    Accéder aux tâches

  2. Cliquez sur Créer une tâche à partir du générateur.

  3. Cliquez sur Charger YAML.

  4. Cliquez sur Charger à partir de Cloud Storage.

  5. Dans le champ Emplacement du fichier YAML, saisissez l'emplacement Cloud Storage du fichier YAML ou cliquez sur Parcourir pour sélectionner le fichier.

  6. Cliquez sur Charger.

Charger un pipeline à partir d'un texte

Pour charger un pipeline à partir d'un texte, procédez comme suit :

  1. Accédez à la page Jobs dans la console Google Cloud.

    Accéder aux tâches

  2. Cliquez sur Créer une tâche à partir du générateur.

  3. Cliquez sur Charger YAML.

  4. Cliquez sur Charger à partir du texte.

  5. Collez le code YAML dans la fenêtre.

  6. Cliquez sur Charger.