Créer des dépôts virtuels

Cette page explique comment créer des dépôts virtuels Artifact Registry.

Les dépôts virtuels servent de point d'accès unique pour télécharger, installer ou déployer des artefacts au même format à partir d'un ou de plusieurs dépôts en amont. Un dépôt en amont peut être un dépôt standard ou distant Artifact Registry.

Les autres modes de dépôt sont les suivants :

• Standard : mode de dépôt par défaut. Vous importez ou publiez des artefacts tels que des packages privés directement dans des dépôts standards. Bien que vous puissiez télécharger directement à partir de dépôts standards individuels, l'accès à des groupes de dépôts avec un dépôt virtuel simplifie la configuration des outils.
• Distant (dépôts de packages linguistiques uniquement) : cache pull-through pour les artefacts dans les dépôts publics tels que Maven Central ou PyPI. Il sert de proxy pour les dépôts publics afin que vous ayez plus de contrôle sur vos dépendances externes.

Pour en savoir plus sur le fonctionnement des dépôts virtuels, consultez la présentation des dépôts virtuels.

Avant de commencer

Activez Artifact Registry, ce qui inclut l'activation de l'API Artifact Registry et l'installation de la dernière version de Google Cloud CLI.

Rôles requis

Pour obtenir les autorisations nécessaires pour gérer les dépôts, demandez à votre administrateur de vous accorder les rôles IAM suivants :

• Créez des dépôts virtuels et accordez l'accès à des dépôts individuels : Administrateur Artifact Registry (roles/artifactregistry.admin) sur le projet Google Cloud
• Accorder l'accès aux dépôts au niveau du projet : Administrateur IAM du projet (roles/resourcemanager.projectIamAdmin) sur le projet Google Cloud
• Accorder l'accès aux dépôts au niveau du dossier : Administrateur de dossier (roles/resourcemanager.folderAdmin) sur le dossier
• Accorder l'accès aux dépôts au niveau de l'organisation : Administrateur de l'organisation (roles/resourcemanager.organizationAdmin) sur l'organisation Google Cloud

Pour en savoir plus sur l'attribution de rôles, consultez Gérer l'accès aux projets, aux dossiers et aux organisations.

Vous pouvez également obtenir les autorisations requises avec des rôles personnalisés ou d'autres rôles prédéfinis.

Si les dépôts en amont se trouvent dans d'autres projets, un administrateur des projets contenant les dépôts en amont doit disposer des autorisations nécessaires pour gérer l'accès à ces dépôts.

Créer des dépôts en amont

Avant de configurer un dépôt virtuel, créez les dépôts en amont que vous souhaitez rendre disponibles avec le dépôt virtuel.

1. Créez les dépôts en amont dans la même région Google Cloud que celle où vous prévoyez de créer le dépôt virtuel.

   • Créer un dépôt standard
   • Créer un dépôt distant

2. Les dépôts virtuels utilisent l'agent de service Artifact Registry pour s'authentifier auprès des dépôts en amont. Vous devez accorder à l'agent de service un accès en lecture aux dépôts en amont.

   Vous pouvez attribuer le rôle Lecteur Artifact Registry à l'agent de service Artifact Registry au niveau du projet. Vous n'aurez ainsi pas besoin d'accorder l'accès à des dépôts en amont individuels.

   Dans chaque projet comportant des dépôts en amont, exécutez la commande suivante :

   gcloud projects add-iam-policy-binding UPSTREAM_PROJECT_ID \
       --member serviceAccount:service-VIRTUAL-REPO-PROJECT_NUMBER@gcp-sa-artifactregistry.iam.gserviceaccount.com \
       --role roles/artifactregistry.reader
   

   Où

   • UPSTREAM_PROJECT_ID correspond à l'ID du Google Cloud projet avec le dépôt en amont.
   • VIRTUAL_REPO_PROJECT_NUMBER est le numéro de projet du projet Google Cloud pour votre dépôt virtuel.

   Si vous souhaitez accorder un rôle plus limité à l'agent de service, ajoutez l'autorisation artifactregistry.repositories.readViaVirtualRepository à un rôle personnalisé, puis attribuez ce rôle à l'agent de service.

   Pour en savoir plus sur l'attribution d'autorisations, consultez la documentation sur le contrôle des accès.

Créer un dépôt virtuel

Lorsque vous créez un dépôt, vous devez configurer les paramètres suivants, qui ne peuvent pas être modifiés une fois le dépôt créé :

• Format de l'artefact.
• Mode du dépôt, si plusieurs modes sont disponibles pour le format sélectionné.
• Emplacement du dépôt.
• Chiffrement avec des appartenant à Google et gérées par Google fournies par Google Cloud ou des clés de chiffrement gérées par le client. Par défaut, Artifact Registry utilise des clés de chiffrementappartenant à Google et gérées par Google .

Artifact Registry applique des contraintes liées aux règles d'administration qui exigent l'utilisation de CMEK pour chiffrer les ressources ou qui limitent les clés Cloud KMS pouvant être utilisées pour la protection CMEK.

Créer un dépôt virtuel à l'aide de la console Google Cloud

1. Ouvrez la page Dépôts dans la console Google Cloud .

   Ouvrir la page "Dépôts"

2. Cliquez sur Créer un dépôt.

3. Spécifiez le nom du dépôt. Pour chaque emplacement de dépôt d'un projet, les noms de dépôt doivent être uniques.

4. Sélectionnez le format du dépôt.

5. Sous Mode du dépôt, sélectionnez Virtuel.

6. Sous Éléments en amont du dépôt virtuel, cliquez sur Ajouter un élément en amont pour ajouter un dépôt en amont.

   • Un dépôt en amont peut être un dépôt standard, distant ou virtuel.
   • Un dépôt en amont doit se trouver au même emplacement que le dépôt virtuel, mais il peut se trouver dans un autre projet Google Cloud .
   • Un dépôt en amont doit avoir le même format d'artefact que le dépôt virtuel.

   Spécifiez une priorité et un nom de règle pour chaque dépôt en amont. Les valeurs de priorité plus élevées prévalent sur les valeurs inférieures. Laissez de l'espace entre les valeurs de priorité pour pouvoir ajouter des dépôts en amont avec des priorités intermédiaires.

7. Sous Type d'emplacement, sélectionnez l'emplacement du dépôt :

   1. Choisissez le type d'emplacement : régional ou multirégional. La liste des emplacements change pour refléter votre sélection.

   2. Dans la liste Région ou Multirégional, sélectionnez un emplacement.

   Pour en savoir plus sur les types d'emplacement et les emplacements compatibles, consultez la section Emplacements des dépôts.

8. Ajoutez une description pour le dépôt. Les descriptions aident à identifier l'objectif du dépôt et le type d'artefacts qu'il contient.

   N'incluez pas de données sensibles, car les descriptions des dépôts ne sont pas chiffrées.

9. Si vous souhaitez utiliser des libellés pour organiser vos dépôts, cliquez sur Ajouter un libellé et saisissez la paire clé-valeur du libellé. Vous pouvez ajouter, modifier ou supprimer des libellés après avoir créé le dépôt.

10. Dans la section Chiffrement, choisissez le mécanisme de chiffrement du dépôt.

    • Google-managed encryption key : chiffre le contenu du dépôt avec un Google-owned and Google-managed encryption key.
    • Clé gérée par le client : chiffre le contenu du dépôt à l'aide d'une clé que vous contrôlez via Cloud Key Management Service. Pour obtenir des instructions sur la configuration de la clé, consultez la page Configurer des CMEK pour les dépôts.

11. Cliquez sur Créer.

Artifact Registry crée le dépôt et l'ajoute à la liste des dépôts.

Une fois le dépôt créé :

• Accorder l'accès au dépôt.

• Configurez Docker, les gestionnaires de packages et d'autres clients tiers pour qu'ils s'authentifient auprès des dépôts.

  • Images de conteneur : Docker, Helm
  • Packages de langage : Java, Node.js, Python, Go
  • Autre : Modèles de pipeline Kubeflow

Créer un dépôt virtuel à l'aide de la gcloud CLI

Pour créer un dépôt virtuel, vous devez définir vos dépôts en amont dans un fichier de règles, puis créer le dépôt à l'aide de ce fichier.

1. Créez un fichier de stratégie en amont au format JSON avec les paramètres suivants :

   [{
   "id" : "POLICY_ID",
   "repository" : "UPSTREAM_REPOSITORY_RESOURCE_NAME",
   "priority" : PRIORITY
   }, {...}]
   

   • POLICY_ID est le nom de la règle. Chaque dépôt en amont de la règle doit avoir un ID de règle unique.

   • UPSTREAM_REPO_RESOURCE_NAME est le nom du dépôt en amont au format suivant :

     projects/PROJECT_ID/locations/LOCATION/repositories/REPOSITORY
     

     • Un dépôt en amont peut être un dépôt standard, distant ou virtuel.
     • Un dépôt en amont doit se trouver au même emplacement que le dépôt virtuel, mais il peut se trouver dans un autre projet Google Cloud .
     • Un dépôt en amont doit avoir le même format d'artefact que le dépôt virtuel.

   • PRIORITY est un entier indiquant la priorité du dépôt en amont. Les valeurs de priorité plus élevées prévalent sur les valeurs inférieures.

   L'exemple suivant présente un fichier de règles nommé policies.json avec quatre dépôts en amont. upstream1 a la valeur la plus élevée pour priority. Artifact Registry le recherchera donc en premier. upstream-test a la valeur priority la plus faible. Artifact Registry le recherchera donc en dernier. upstream2 et upstream3 ont la même priorité. Si Artifact Registry trouve un package demandé dans des dépôts ayant la même priorité, il peut le fournir à partir de l'un ou l'autre des dépôts.

   [{
   "id" : "upstream1",
   "repository" : "projects/myproject/locations/us-west1/repositories/python-repo1",
   "priority" : 100
   }, {
   "id" : "upstream2",
   "repository" : "projects/myproject/locations/us-west1/repositories/python-repo2",
   "priority" : 80
   }, {
   "id" : "upstream3",
   "repository" : "projects/myproject/locations/us-west1/repositories/python-repo2",
   "priority" : 80
   }, {
   "id" : "upstream-test",
   "repository" : "projects/myproject/locations/us-west1/repositories/python-test-repo",
   "priority" : 20
   }]
   

   Cet exemple laisse également un espace entre les valeurs de priorité. Ces écarts permettent d'ajouter des dépôts en amont avec des priorités comprises entre les valeurs existantes. Par exemple, vous pouvez ajouter un dépôt upstream-3 avec une priorité de 70 afin qu'Artifact Registry le recherche avant upstream-test.

   Envisagez de stocker votre fichier de règles en amont dans votre système de contrôle des sources afin de pouvoir le réutiliser ultérieurement pour modifier les paramètres du dépôt en amont et suivre l'historique des modifications.

2. Dans le répertoire contenant votre fichier de règles en amont, exécutez la commande suivante pour créer le dépôt virtuel :

   gcloud artifacts repositories create VIRTUAL-REPOSITORY-NAME \
       --project=PROJECT_ID \
       --repository-format=FORMAT \
       --mode=virtual-repository \
       --location=LOCATION \
       --description="DESCRIPTION" \
       --upstream-policy-file=UPSTREAM_POLICY_FILE
   

   Remplacez les éléments suivants :

   • VIRTUAL-REPOSITORY-NAME est le nom du dépôt virtuel.
   • PROJECT_ID est l'ID du projet dans lequel vous créez le dépôt virtuel. Si cette option est ignorée, le projet en cours ou par défaut est utilisé.
   • FORMAT est le format du dépôt. Les valeurs suivantes sont disponibles :
     • apt (aperçu privé)
     • docker
     • go
     • maven
     • npm
     • python
     • yum (aperçu privé)

   • LOCATION est l'emplacement régional ou multirégional du dépôt. Vous pouvez ignorer cette option si vous définissez une valeur par défaut. Pour afficher la liste des emplacements acceptés, exécutez la commande suivante :

     gcloud artifacts locations list
     

   • DESCRIPTION est une description facultative du dépôt. N'incluez pas de données sensibles, car les descriptions de dépôt ne sont pas chiffrées.

   • UPSTREAM_POLICY_FILE est un chemin d'accès au fichier de stratégie en amont.

   Par exemple, la commande suivante crée un dépôt virtuel nommé virtual-repo pour les packages Python dans la région us-west1 avec les paramètres de policies.json.

   gcloud artifacts repositories create virtual-repo \
   --repository-format=python \
   --mode=virtual-repository \
   --location=us-west1 \
   --description="Python virtual repository" \
   --upstream-policy-file=policies.json
   

Artifact Registry crée le dépôt virtuel.

Créer un dépôt virtuel à l'aide de Terraform

Utilisez la ressource google_artifact_registry_repository pour créer des dépôts. La version 5.0.0 ou ultérieure de terraform-provider-google est requise.

Si vous débutez avec Terraform pour Google Cloud, consultez la page Premiers pas avec Google Cloud sur le site Web de HashiCorp.

L'exemple suivant définit le fournisseur, un dépôt virtuel avec le nom de ressource Terraform my-repo et un dépôt en amont avec le nom de ressource Terraform my-repo-upstream.

provider "google" {
    project = "PROJECT-ID"
}
resource "google_artifact_registry_repository" "my-repo-upstream" {
  location      = "UPSTREAM_LOCATION"
  repository_id = "UPSTREAM_REPOSITORY_ID"
  description   = "UPSTREAM_REPOSITORY_DESCRIPTION"
  format        = "docker"
}

resource "google_artifact_registry_repository" "my-repo" {
  depends_on    = []
  location      = "LOCATION"
  repository_id = "REPOSITORY_ID"
  description   = "VIRTUAL_REPOSITORY_DESCRIPTION"
  format        = "docker"
  kms_key_name = "KEY"
  mode          = "VIRTUAL_REPOSITORY"
  virtual_repository_config {
    upstream_policies {
      id          = "UPSTREAM_REPOSITORY_ID"
      repository  = google_artifact_registry_repository.my-repo-upstream.id
      priority    = PRIORITY
    }
  }
}

provider "google" {
    project = "PROJECT-ID"
}
resource "google_artifact_registry_repository" "my-repo-upstream" {
  location      = "UPSTREAM_LOCATION"
  repository_id = "UPSTREAM_REPOSITORY_ID"
  description   = "UPSTREAM_REPOSITORY_DESCRIPTION"
  format        = "maven"
}

resource "google_artifact_registry_repository" "my-repo" {
  depends_on    = []
  location      = "LOCATION"
  repository_id = "REPOSITORY_ID"
  description   = "VIRTUAL_REPOSITORY_DESCRIPTION"
  format        = "maven"
  kms_key_name = "KEY"
  mode          = "VIRTUAL_REPOSITORY"
  virtual_repository_config {
    upstream_policies {
      id          = "UPSTREAM_REPOSITORY_ID"
      repository  = google_artifact_registry_repository.my-repo-upstream.id
      priority    = PRIORITY
    }
  }
}

provider "google" {
project = "my-project"
}

resource "google_artifact_registry_repository" "my-repo" {
provider = google-beta

location = "us-central1"
repository_id = "my-repo"
description = "Maven repository"
format = "MAVEN"
maven_config {
  version_policy = "RELEASE"
}
}

provider "google" {
    project = "PROJECT-ID"
}
resource "google_artifact_registry_repository" "my-repo-upstream" {
  location      = "UPSTREAM_LOCATION"
  repository_id = "UPSTREAM_REPOSITORY_ID"
  description   = "UPSTREAM_REPOSITORY_DESCRIPTION"
  format        = "npm"
}

resource "google_artifact_registry_repository" "my-repo" {
  depends_on    = []
  location      = "LOCATION"
  repository_id = "REPOSITORY_ID"
  description   = "VIRTUAL_REPOSITORY_DESCRIPTION"
  format        = "npm"
  kms_key_name = "KEY"
  mode          = "VIRTUAL_REPOSITORY"
  virtual_repository_config {
    upstream_policies {
      id          = "UPSTREAM_REPOSITORY_ID"
      repository  = google_artifact_registry_repository.my-repo-upstream.id
      priority    = PRIORITY
    }
  }
}

provider "google" {
    project = "PROJECT-ID"
}
resource "google_artifact_registry_repository" "my-repo-upstream" {
  location      = "UPSTREAM_LOCATION"
  repository_id = "UPSTREAM_REPOSITORY_ID"
  description   = "UPSTREAM_REPOSITORY_DESCRIPTION"
  format        = "python"
}

resource "google_artifact_registry_repository" "my-repo" {
  depends_on    = []
  location      = "LOCATION"
  repository_id = "REPOSITORY_ID"
  description   = "VIRTUAL_REPOSITORY_DESCRIPTION"
  format        = "python"
  kms_key_name = "KEY"
  mode          = "VIRTUAL_REPOSITORY"
  virtual_repository_config {
    upstream_policies {
      id          = "UPSTREAM_REPOSITORY_ID"
      repository  = google_artifact_registry_repository.my-repo-upstream.id
      priority    = PRIORITY
    }
  }
}

Artifact Registry crée votre dépôt. Exécutez la commande suivante pour afficher une description du dépôt :

gcloud artifacts repositories describe REPOSITORY \
    --location=LOCATION

Une fois le dépôt créé :

• Accorder l'accès au dépôt.

• Configurez Docker, les gestionnaires de packages et d'autres clients tiers pour qu'ils s'authentifient auprès des dépôts.

  • Images de conteneur: Docker, Helm
  • Packages de langage : Java, Node.js, Python, Go
  • Packages de l'OS: Debian, RPM
  • Autre: Modèles de pipeline Kubeflow

Mettre à jour les dépôts en amont

Vous pouvez modifier la liste des dépôts en amont ou ajuster leur priorité.

Modifier les descriptions des dépôts

Vous pouvez modifier la description du dépôt depuis la console Google Cloud ou la gcloud CLI.

gcloud artifacts repositories update REPOSITORY \
    --project=PROJECT \
    --location=LOCATION \
    --description="DESCRIPTION"