更新叢集

bmctl

1. 變更叢集設定檔中適用欄位的值，預設位置如下：
   bmctl-workspace/CLUSTER-NAME/CLUSTER-NAME.yaml

2. 執行 bmctl update 指令來更新叢集：

   bmctl update cluster -c CLUSTER_NAME --kubeconfig=KUBECONFIG
   

   更改下列內容：

   • CLUSTER_NAME：要更新的叢集名稱。
   • KUBECONFIG：如果是管理員、混合式或獨立叢集，請輸入叢集的 kubeconfig 檔案路徑。如果是使用者叢集，請輸入管理員叢集的 kubeconfig 檔案路徑。

gcloud CLI

1. 請僅指定要修改的設定標記。

2. 執行適用的更新指令：

   • 管理員叢集： gcloud container bare-metal admin-clusters update

   • 使用者群組： gcloud container bare-metal clusters update。

   • 使用者叢集中的節點集區： gcloud container bare-metal node-pools update

Terraform

1. 在用於建立叢集或節點集區的 Terraform 設定檔中，變更適用欄位的值。如需詳細欄位說明，請參閱 Terraform 參考說明文件：

   • google_gkeonprem_bare_metal_admin_cluster

   • google_gkeonprem_bare_metal_cluster

   • google_gkeonprem_bare_metal_node_pool

2. 執行 terraform apply 指令來更新設定。

bmctl

如要新增或移除節點集區中的節點，請在叢集設定檔的特定部分新增或移除節點的 IP 位址。下列清單顯示要編輯特定節點集區的哪個部分：

• 工作站節點集區：在 NodePool 規格的 spec.nodes 區段中，新增或移除節點的 IP 位址。
• 控制層節點集區：在 Cluster 規格的 spec.controlPlane.nodePoolSpec.nodes 區段中，新增或移除節點的 IP 位址。
• 負載平衡器節點集區：在 Cluster 規格的 spec.loadBalancer.nodePoolSpec.nodes 區段中，新增或移除節點的 IP 位址。

範例：移除工作節點

以下是叢集設定檔範例，顯示兩個工作站節點的規格：

---
apiVersion: baremetal.cluster.gke.io/v1
kind: NodePool
metadata:
  name: nodepool1
  namespace: cluster-cluster1
spec:
  clusterName: cluster1
  nodes:
  - address: 192.0.2.1
  - address: 192.0.2.2

如要移除節點，請按照下列步驟操作：

1. (選用) 如果要移除的節點正在執行重要 Pod，請先將節點設為維護模式。

   如要監控工作站節點的節點排空程序，請查看 NodePool 資源的 status.nodesDrained 和 status.nodesDraining 欄位。

2. 編輯叢集設定檔，刪除節點的 IP 位址項目。

3. 更新叢集：

   bmctl update cluster1 \
       --kubeconfig=ADMIN_KUBECONFIG
   

gcloud CLI

您可以使用 update 指令新增或移除節點。您使用的 update 指令和指定 IP 位址的旗標，取決於要更新的節點集區類型：

• 工作站節點集區：執行 gcloud container bare-metal node-pools update 並在 --node-configs 'node-ip=IP_ADDRESS' 旗標中指定 IP 位址。gcloud container bare-metal node-pools update

• 管理員叢集上的控制層節點集區：執行 gcloud container bare-metal admin-clusters update，並在 --control-plane-node-configs 'node-ip=IP_ADDRESS' 旗標中指定 IP 位址。

• 使用者叢集上的控制層節點集區：執行 gcloud container bare-metal clusters update，並在 --control-plane-node-configs 'node-ip=IP_ADDRESS' 旗標中指定 IP 位址。

• 負載平衡器節點集區：執行 gcloud container bare-metal clusters update，並在 --metal-lb-load-balancer-node-configs 'node-ip=IP_ADDRESS' 或
  --bgp-load-balancer-node-configs 'node-ip=IP_ADDRESS' 旗標中指定 IP 位址。

指定 IP 位址的旗標只能接受一個 node-ip。您可以為節點集區中的每個 IP 位址加入這個標記。

update 指令會將所有 IP 位址替換為您指定的 IP 位址。如要新增節點，請在 update 指令中加入現有節點的 IP 位址和新節點的 IP 位址。同樣地，如要移除節點，請只納入要保留的節點 IP 位址。

範例：移除工作節點

本節將使用範例資料，說明如何從節點集區移除工作站節點。下列步驟也包含其他實用的 gcloud CLI 指令。

1. (選用) 如果要移除的節點正在執行重要 Pod，請先將節點設為維護模式。

   如要監控工作站節點的節點排空程序，請查看 NodePool 資源的 status.nodesDrained 和 status.nodesDraining 欄位。

2. 執行 list 指令，列出叢集中的所有節點集區：

   gcloud container bare-metal node-pools list \
       --cluster=abm-user-cluster1 \
       --project=example-project-12345 \
       --location=us-central1
   

   輸出結果會與下列內容相似：

   NAME         LOCATION     STATE
   node-pool-1  us-central1  RUNNING
   node-pool-2  asia-east1   RUNNING
   

3. 執行 describe 指令，列出節點集區中的所有 IP 位址：

   gcloud container bare-metal node-pools describe node-pool-1 \
       --cluster=abm-user-cluster1 \
       --project=example-project-12345 \
       --location=us-central1
   

   為了方便閱讀，以下範例輸出內容會經過截斷：

   annotations:
     ...
     baremetal.cluster.gke.io/version: 1.32
   ...
   name: projects/example-project-12345/locations/us-central1/bareMetalClusters/abm-user-cluster1/bareMetalNodePools/node-pool-1
   nodePoolConfig:
     nodeConfigs:
     - nodeIp: 192.0.2.1
     - nodeIp: 192.0.2.2
     operatingSystem: LINUX
   state: RUNNING
   ...
   

   請注意範例輸出內容中的下列事項：

   • name 欄位包含節點集區的完整名稱。 在指令中指定節點集區名稱時，您可以指定完整名稱或節點集區名稱 (例如 node-pool-1)，以及 --cluster、--project 和 --location 標記。

   • nodeConfigs 區段包含兩個 nodeIp 欄位，內含節點的 IP 位址。

4. 執行下列指令，移除 IP 位址為 192.0.2.1 的節點：

   gcloud container bare-metal node-pools update node-pool-1 \
       --cluster=abm-user-cluster1 \
       --project=example-project-12345 \
       --location=us-central1 \
       --node-configs='node-ip=192.0.2.2'
   

   update 指令會將所有 IP 位址替換為您指定的 IP 位址。由於 192.0.2.1 不在其中，因此節點會遭到移除。

   指令會輸出類似以下的結果：

   Waiting for operation [projects/example-project-12345/locations/us-central1/operations/operation-1697154681749-6078d9def4030-76686d6e-9fcb1de9] to complete
   

   在範例輸出內容中，字串 operation-1697154681749-6078d9def4030-76686d6e-9fcb1de9 是長時間執行的作業的 OPERATION_ID。您可以在另一個終端機視窗中執行下列指令，瞭解作業狀態：

   gcloud container bare-metal operations describe operation-1697154681749-6078d9def4030-76686d6e-9fcb1de9 \
       --project= example-project-12345 \
       --location=us-central1
   

   您可以不時重新執行指令，檢查狀態。

bmctl

您可以使用 bmctl，在所有叢集類型中替換高可用性 (HA) 控制層節點。

如要更換叢集中的節點，請執行下列步驟：

1. 從叢集設定檔中移除節點的 IP 位址。
2. 更新叢集。
3. 檢查叢集中的節點狀態。
4. 將新節點的 IP 位址新增至同一個叢集設定檔。
5. 更新叢集。

例如：更換高可用性控制層節點

以下是叢集設定檔範例，顯示使用者叢集中的三個控制平面節點：

---
apiVersion: baremetal.cluster.gke.io/v1
kind: Cluster
metadata:
name: user-cluster
namespace: cluster-user-cluster
spec:
  controlPlane:
  nodePoolSpec:
    nodes:
    - address: 192.0.2.11
    - address: 192.0.2.12
    - address: 192.0.2.13

如要取代「spec.controlPlane.nodePoolSpec.nodes」部分列出的最後一個節點，請按照下列步驟操作：

1. 如要移除節點，請刪除叢集設定檔中的節點 IP 位址項目。完成這項變更後，叢集設定檔應如下所示：

   ---
   apiVersion: baremetal.cluster.gke.io/v1
   kind: Cluster
   metadata:
   name: user-cluster
   namespace: cluster-user-cluster
   spec:
     controlPlane:
     nodePoolSpec:
       nodes:
       - address: 192.0.2.11
       - address: 192.0.2.12
   

2. 執行下列指令來更新叢集：

   bmctl update cluster -c CLUSTER_NAME \
     --kubeconfig=KUBECONFIG
   

   進行下列變更：

   • 將 CLUSTER_NAME 替換為要更新的叢集名稱。
   • 如果叢集是自我管理叢集 (例如管理員或獨立叢集)，請將 KUBECONFIG 替換為叢集 kubeconfig 檔案的路徑。如果叢集是使用者叢集 (如本例所示)，請將 KUBECONFIG 替換為管理員叢集的 kubeconfig 檔案路徑。

3. bmctl update 指令成功執行後，系統需要一段時間才能完成 machine-preflight 和 machine-init 工作。您可以執行本文「驗證更新」一節所述的指令，查看節點和各自節點集區的狀態。節點集區和節點處於就緒狀態後，即可繼續下一個步驟。

4. 將新控制層節點的 IP 位址新增至叢集設定檔的 spec.controlPlane.nodePoolSpec.nodes 區段，即可在節點集區中新增控制層節點。完成這項變更後，叢集設定檔應如下所示：

   ---
   apiVersion: baremetal.cluster.gke.io/v1
   kind: Cluster
   metadata:
   name: user-cluster
   namespace: cluster-user-cluster
   spec:
     controlPlane:
     nodePoolSpec:
       nodes:
       - address: 192.0.2.11
       - address: 192.0.2.12
       - address: 192.0.2.14
   

5. 執行下列指令來更新叢集：

   bmctl update cluster -c CLUSTER_NAME \
     --kubeconfig=KUBECONFIG
   

gcloud CLI

您可以使用 gcloud CLI，替換管理員和使用者叢集中的高可用性 (HA) 控制層節點。

如要更換叢集中的節點，請執行下列步驟：

1. 執行適用的 update 指令，移除節點的 IP 位址：

   • 使用者叢集：gcloud container bare-metal clusters update
   • 管理員叢集：gcloud container bare-metal admin-clusters update

2. 執行 gcloud container bare-metal operations describe OPERATION_ID，檢查叢集中節點移除作業的狀態。

3. 執行適用的 update 指令，新增節點的 IP 位址。

例如：更換高可用性控制層節點

本節說明如何使用範例資料，從叢集取代控制平面。下列步驟也包含其他實用的 gcloud CLI 指令。

1. 執行 list 指令，列出Google Cloud 專案中的所有使用者叢集：

   gcloud container bare-metal clusters list \
       --project=example-project-12345 \
       --location=-
   

   設定 --location=- 時，表示要列出所有區域的所有叢集。如要縮小清單範圍，請將 --location 設為特定區域。

   輸出結果會與下列內容相似：

   NAME                 LOCATION      VERSION   ADMIN_CLUSTER        STATE
   abm-user-cluster1a   us-central1   1.32      abm-admin-cluster1   RUNNING
   abm-user-cluster1b   europe-west1  1.32      abm-admin-cluster1   RUNNING
   

2. 在叢集上執行 describe 指令：

   gcloud container bare-metal clusters describe abm-user-cluster1  \
       --project=example-project-12345 \
       --location=us-central1
   

   為了方便閱讀，範例輸出內容會被截斷：

   ...
   controlPlane:
     controlPlaneNodePoolConfig:
       nodePoolConfig:
         nodeConfigs:
         - nodeIp: 192.0.2.11
         - nodeIp: 192.0.2.12
         - nodeIp: 192.0.2.13
         operatingSystem: LINUX
   ...
   name: projects/example-project-1234567/locations/us-central1/bareMetalClusters/abm-user-cluster1a
   ...
   

   請注意範例輸出內容中的下列事項：

   • 「name」欄位包含叢集的完整名稱。在指令中指定叢集名稱時，您可以指定完整名稱或叢集名稱，例如 abm-user-cluster1a，以及 --project 和 --location flags。

   • nodeConfigs 區段包含三個 nodeIp 欄位，內含控制層節點的 IP 位址。

3. 移除 IP 位址為 192.0.2.13 的節點：

   gcloud container bare-metal cluster update abm-user-cluster1a \
       --project=example-project-12345 \
       --location=us-central1 \
       --control-plane-node-configs 'node-ip=192.0.2.11'
       --control-plane-node-configs 'node-ip=192.0.2.12'
   

   指令會輸出類似以下的結果：

   Waiting for operation [projects/example-project-12345/locations/us-central1/operations/operation-1956154681749-6078d9def4030-76686d6e-9fcb1d7] to complete
   

   在範例輸出內容中，字串 operation-1956154681749-6078d9def4030-76686d6e-9fcb1de7 是長時間執行的作業的 OPERATION_ID。您可以在另一個終端機視窗中執行下列指令，瞭解作業狀態：

   gcloud container bare-metal operations describe operation-1956154681749-6078d9def4030-76686d6e-9fcb1de7 \
       --project= example-project-12345 \
       --location=us-central1
   

   您可以不時重新執行指令，檢查狀態。

4. 新增 IP 位址為 192.0.2.14 的節點：

   gcloud container bare-metal cluster update abm-user-cluster1a \
       --project=example-project-12345 \
       --location=us-central1 \
       --control-plane-node-configs 'node-ip=192.0.2.11'
       --control-plane-node-configs 'node-ip=192.0.2.12'
       --control-plane-node-configs 'node-ip=192.0.2.14'
   

kubectl

您可以使用 kubectl get 指令，查看節點和各自節點集區的狀態。

舉例來說，下列指令會顯示叢集命名空間 cluster-my-cluster 中的節點集區狀態：

kubectl -n cluster-my-cluster get nodepools.baremetal.cluster.gke.io

系統會傳回類似下列內容的結果：

NAME                    READY   RECONCILING   STALLED   UNDERMAINTENANCE   UNKNOWN
cluster-my-cluster      3       0             0         0                  0
cluster-my-cluster-lb   2       0             0         0                  0
np1                     3       0             0         0                  0

Reconciling=1 表示對帳步驟仍在進行中。請等待狀態變更為 Reconciling=0。

您也可以執行下列指令，檢查叢集中的節點狀態：

kubectl get nodes --kubeconfig=KUBECONFIG

gcloud CLI

如先前所述，執行 update 指令後，您可以使用 gcloud container bare-metal operations describe OPERATIONS_ID 檢查作業狀態。指令輸出內容會顯示節點狀態，例如：

  ...
  metrics:
  - intValue: '1'
    metric: NODES_RECONCILING
  - intValue: '2'
    metric: NODES_HEALTHY
  - intValue: '0'
    metric: NODES_FAILED
  - intValue: '0'
    metric: NODES_IN_MAINTENANCE
  - intValue: '3'
    metric: NODES_TOTAL
  stage: HEALTH_CHECK
...

無論使用哪種工具更新節點集區，您都可以執行適用的 describe 指令 (如先前所示)，取得節點集區的目前狀態。

bmctl

「addressPools」部分包含欄位，可指定 MetalLB 和邊界閘道通訊協定 (BGP) 套裝組合負載平衡器的負載平衡集區。您隨時可以新增更多負載平衡位址集區，但無法移除現有的位址集區。從 Google Distributed Cloud 1.16.0 版開始，您可以隨時修改 addressPools.avoidBuggyIPs 和 addressPools.manualAssign 的值。

addressPools:
- name: pool1
  addresses:
  - 198.51.100.0-198.51.100.4
  - 198.51.100.240/28
- name: pool2
  addresses:
  - 198.51.100.224/28

gcloud CLI

您可以隨時為隨附的負載平衡器新增更多負載平衡位址集區，但無法移除任何現有的位址集區。在 gcloud container bare-metal clusters update 中指定要新增位址集區的旗標，取決於隨附的負載平衡器類型：

• MetalLB (第 2 層)：使用 --metal-lb-address-pools 標記。
• 邊界閘道通訊協定 (BGP)：使用 --bgp-address-pools 旗標。

旗標的值格式如下：

'pool=NAME,avoid-buggy-ips=True|False,manual-assign=True|False,addresses=IP_ADDRESS_RANGE_1;IP_ADDRESS_RANGE_2;...' \

值包含以關鍵字 pool、avoid-buggy-ip、manual-assign 和 addresses 開頭的區隔。請以半形逗號分隔每個區隔。

• pool：您為集區選用的名稱。

• avoid-buggy-ips：如果將此值設為 True，IP 位址管理 (IPAM) 控制器就不會將結尾為 .0 或 .255 的 IP 位址指派給服務。這樣可避免發生錯誤的消費裝置誤將傳送至這些特殊 IP 位址的流量捨棄。如未指定，則預設為 False。從 Google Distributed Cloud 1.16.0 版開始，您可以在現有位址集區中修改這個值。

• manual-assign：如不希望 IPAM 控制器自動將這個集區的 IP 位址指派給服務，請將這個值設為 True。接著，開發人員可以建立 LoadBalancer 類型的 Service，然後手動指定集區中的其中一個位址。如未指定，manual-assign 會設為 False。 從 Google Distributed Cloud 1.16.0 版開始，您可以在現有位址集區中修改這個值。

• 在 addresses 清單中，每個位址都必須是 CIDR 或連字號範圍格式的範圍。如要在集區中指定單一 IP 位址 (例如輸入 VIP)，請使用 CIDR 標記法中的 /32 (例如 192.0.2.1/32)。

請注意下列語法規則：

• 以單引號括住整個值。
• 不得包含空白字元。
• 請以半形分號分隔各 IP 位址範圍。

您可以指定多個標記例項，如下例所示：

--metal-lb-address-pools='pool=pool2,avoid-buggy-ips=False,manual-assign=True,addresses=198.51.100.0/30;198.51.100.64-198.51.100.72'
--metal-lb-address-pools='pool=pool3,avoid-buggy-ips=True,manual-assign=True,addresses=203.0.113.0/28'

bmctl

如果您在叢集設定檔中新增 baremetal.cluster.gke.io/prevent-deletion: "true" 註解，系統會禁止您刪除叢集。舉例來說，執行 kubectl delete cluster 或 bmctl reset cluster 會產生錯誤。

apiVersion: baremetal.cluster.gke.io/v1
kind: Cluster
metadata:
  name: ci-10c3c6f4d9c698e
  namespace: cluster-ci-10c3c6f4d9c698e
  annotations:
    baremetal.cluster.gke.io/prevent-deletion: "true"
spec:
  clusterNetwork:

gcloud CLI

如果您使用值 baremetal.cluster.gke.io/prevent-deletion="true" 指定 --add-annotations 旗標，系統會禁止您刪除叢集。例如：

1. 新增註解，防止叢集遭到意外刪除：

   gcloud container bare-metal clusters update abm-user-cluster1a \
       --project=example-project-12345 \
       --location=us-central1 \
       --add-annotations=baremetal.cluster.gke.io/prevent-deletion="true"
   

2. 嘗試刪除使用者叢集：

   gcloud container bare-metal clusters delete abm-user-cluster1a \
       --project=example-project-12345 \
       --location=us-central1 \
       --force \
       --allow-missing
   

   指令的回應如下所示：

   ERROR: (gcloud.container.bare-metal.clusters.delete) INVALID_ARGUMENT:
   invalid request: admission webhook "vcluster.kb.io" denied the request:
   annotations[baremetal.cluster.gke.io/prevent-deletion]: Invalid value:
   "true": Annotation "baremetal.cluster.gke.io/prevent-deletion" should be
   removed in order to delete this cluster
   

   如要移除註解，請在 update 指令中指定 --remove-annotations=baremetal.cluster.gke.io/prevent-deletion="true"。

bmctl

如要新增或移除使用者或服務帳戶做為使用者叢集的叢集管理員，請在叢集設定檔的 clusterSecurity.authorization.clusterAdmin.gcpAccounts 區段中指定電子郵件地址。這些帳戶在叢集中獲得叢集管理員角色，具備叢集的完整存取權。

apiVersion: baremetal.cluster.gke.io/v1
kind: Cluster
metadata:
  name: cluster1
  namespace: cluster-cluster1
spec:
  clusterSecurity:
    authorization:
      clusterAdmin:
        gcpAccounts:
        - alex@example.com
        - hao@example.com
        - my-sa@example-project-12345.iam.gserviceaccount.com

更新使用者叢集以新增帳戶時，請務必在清單中加入所有帳戶 (包括現有和新帳戶)，因為 bmctl update 會以您在設定檔中指定的內容覆寫清單。如要移除帳戶，請從叢集設定檔中移除該帳戶，然後執行 bmctl update。

gcloud CLI

您可以在 --admin-users 標記中指定電子郵件地址，新增或移除叢集管理員。這個標記只接受一個電子郵件地址。如要新增多位使用者，請在每個旗標中指定一個帳戶，例如：

gcloud container bare-metal clusters update abm-user-cluster1a \
    --project=example-project-12345 \
    --location=us-central1 \
    --admin-users=alex@example.com \
    --admin-users=hao@example.com
    --admin-users=my-sa@example-project-12345.iam.gserviceaccount.com

update 指令會覆寫整個授權清單。指定所有現有和新使用者，讓他們成為叢集管理員。

bmctl

apiVersion: baremetal.cluster.gke.io/v1
kind: Cluster
metadata:
  name: cluster1
  namespace: cluster-cluster1
  annotations:
    baremetal.cluster.gke.io/private-mode: "true"
spec:
  nodeAccess:
    loginUser: abm

gcloud CLI

您可以在 --login-user 標記中指定要用來存取節點機器的使用者，例如：

gcloud container bare-metal clusters update abm-user-cluster1a \
    --project=example-project-12345 \
    --location=us-central1 \
    --login-user=abm

bmctl

建立叢集時，請將叢集設定中的 clusterNetwork.advancedNetworking 設為 true：

apiVersion: baremetal.cluster.gke.io/v1
kind: Cluster
metadata:
  name: cluster1
  namespace: cluster-cluster1
spec:
  clusterNetwork:
    ...
    advancedNetworking: true
    ...

gcloud CLI

建立叢集時，請在 gcloud container bare-metal clusters create 指令中加入 --enable-advanced-networking 旗標。

bmctl

apiVersion: baremetal.cluster.gke.io/v1
kind: Cluster
metadata:
  name: cluster1
  namespace: cluster-cluster1
spec:
  ...
  clusterNetwork:
    services:
      cidrBlocks:
        - 192.0.2.0/14
  ...

gcloud CLI

如要擴大使用者叢集上的 IPv4 服務 CIDR 範圍，請在 --island-mode-service-address-cidr-blocks 旗標中指定新範圍。

gcloud container bare-metal clusters update cluster1 \
    --project=example-project-12345 \
    --location=us-central1 \
    --island-mode-service-address-cidr-blocks=192.0.2.0/14

bmctl

下列支援的欄位可控管 kubelet 的 Artifact Registry 提取作業：

• registryBurst (預設值：10)
• registryPullQPS (預設值：5)
• serializeImagePulls (預設值：true)

如要進一步瞭解每個 kubelet 設定欄位，請參閱「叢集設定欄位參考資料」。

您可以在叢集規格的 kubeletConfig 區段中，以及下列節點集區的 NodePool 規格中指定這些欄位：

• 叢集規格：
• 控制層節點 spec.controlPlane.nodePoolSpec.kubeletConfig
• 負載平衡器節點 spec.loadBalancer.nodePoolSpec.kubeletConfig
• NodePool 規格：
• 工作站節點 spec.kubeletConfig

以下範例顯示叢集設定檔中新增的欄位及其預設值。請注意，註解 preview.baremetal.cluster.gke.io/custom-kubelet: "enable" 為必要項目。

apiVersion: baremetal.cluster.gke.io/v1
kind: Cluster
metadata:
  name: cluster1
  namespace: cluster-cluster1
  annotations:
    preview.baremetal.cluster.gke.io/custom-kubelet: "enable"
spec:
  ...
  controlPlane:
    nodePoolSpec:
      kubeletConfig:
        registryBurst: 10
        registryPullQPS: 5
        serializeImagePulls: true
  ...
  loadBalancer:
    nodePoolSpec:
      kubeletConfig:
        registryBurst: 10
        registryPullQPS: 5
        serializeImagePulls: true
  ...
apiVersion: baremetal.cluster.gke.io/v1
kind: NodePool
metadata:
  name: node-pool-new
  namespace: cluster-cluster1
spec:
  clusterName: cluster1
  ...
  kubeletConfig:
    registryBurst: 10
    registryPullQPS: 5
    serializeImagePulls: true

無論是哪種情況，設定都會套用至集區中的所有節點。

gcloud CLI

下列旗標可控管 kubelet 的 Artifact Registry 提取作業：

• 控制層節點

  • --control-plane-registry-burst
  • --control-plane-registry-pull-qps
  • --disable-control-plane-serialize-image-pulls
  • --enable-control-plane-serialize-image-pulls

• 負載平衡器節點

  • --bgp-load-balancer-registry-burst
  • --bgp-load-balancer-registry-pull-qps
  • --disable-bgp-load-balancer-serialize-image-pulls
  • --enable-bgp-load-balancer-serialize-image-pulls
  • --metal-lb-load-balancer-registry-burst
  • --metal-lb-load-balancer-registry-pull-qps
  • --disable-metal-lb-load-balancer-serialize-image-pull
  • --enable-metal-lb-load-balancer-serialize-image-pulls

• 工作站節點

  • --registry-burst
  • --registry-pull-qps
  • --disable-serialize-image-pulls
  • --enable-serialize-image-pulls

bmctl

• bmctl 指令參考資料

• 叢集設定欄位參考資料

gcloud CLI

• gcloud container bare-metal clusters

• gcloud container bare-metal node-pools

• gcloud container bare-metal admin-clusters

Terraform

• google_gkeonprem_bare_metal_cluster

• google_gkeonprem_bare_metal_node_pool

• google_gkeonprem_bare_metal_admin_cluster