En esta página, se describen los valores predeterminados de Cloud Storage FUSE que se configuran automáticamente para los tipos de máquinas Google Cloud de alto rendimiento, que están diseñados para optimizar el rendimiento de las cargas de trabajo exigentes y de alto procesamiento. Los valores que se configuran manualmente en el momento del montaje anularán estos valores predeterminados.
Tipos de máquina
Las configuraciones se automatizan para los siguientes tipos de máquinas de alto rendimiento:
| Tipo de serie | Tipo de máquina |
|---|---|
| Serie de máquinas A2 | |
a2-megagpu-16g |
|
a2-ultragpu-8g |
|
| Serie de máquinas A3 | |
a3-edgegpu-8g |
|
a3-highgpu-8g |
|
a3-megagpu-8g |
|
a3-ultragpu-8g |
|
| Serie de máquinas A4 | |
4-highgpu-8g-lowmem |
|
| TPU v5e | |
ct5l-hightpu-8t |
|
ct5lp-hightpu-8t |
|
| TPU v5p | |
ct5p-hightpu-4t |
|
ct5p-hightpu-4t-tpu |
|
| TPU v6e (Trillium) | |
ct6e-standard-4t |
|
ct6e-standard-4t-tpu |
|
ct6e-standard-8t |
|
ct6e-standard-8t-tpu |
Configuraciones automáticas
Cuando se detecta un tipo de máquina compatible, Cloud Storage FUSE aplica automáticamente los siguientes valores de configuración:
| Campo del archivo de configuración | Opción de CLI | Valor de configuración automatizado |
|---|---|---|
metadata-cache.negative-ttl-secs |
--metadata-cache-negative-ttl-secs |
0 |
metadata-cache.ttl-secs1 |
--metadata-cache-ttl-secs1 |
|
metadata-cache.stat-cache-max-size-mb |
--stat-cache-max-size-mb |
1024 |
metadata-cache.type-cache-max-size-mb |
--type-cache-max-size-mb |
128 |
implicit-dirs |
--implicit-dirs |
true |
file-system.rename-dir-limit |
--rename-dir-limit |
200000 |
1Establecer este parámetro de configuración en -1 aumenta significativamente el rendimiento, ya que siempre se entregan los archivos desde la caché. Ten en cuenta que esta configuración omite las verificaciones de coherencia, lo que puede generar la publicación de datos desactualizados. Para obtener detalles sobre la administración de la coherencia de los datos, consulta Invalidación de caché de archivos, estadísticas y tipos.
Ajustes de rendimiento adicionales
Cuando usas un tipo de máquina Google Cloud de alto rendimiento, se aplican automáticamente las configuraciones que se detallan en esta página. Sin embargo, puedes ajustar aún más tu máquina para obtener un rendimiento óptimo con la guía de prácticas recomendadas para el ajuste del rendimiento.
Si ejecutas cargas de trabajo de entrenamiento, servicio o punto de control y caché de JIT en clústeres de Google Kubernetes Engine que usan GPUs de Cloud o Cloud TPU para acceder a grandes conjuntos de datos en Cloud Storage, puedes optimizar tu configuración utilizando archivos YAML preconfigurados para activar tus buckets de Cloud Storage directamente en tus pods de manera más eficiente. Para obtener más información y consultar las instrucciones sobre cómo usar los archivos YAML preconfigurados de Google Kubernetes Engine, consulta Usa archivos YAML preconfigurados de Google Kubernetes Engine para optimizar el rendimiento de Cloud Storage FUSE.
¿Qué sigue?
Obtén información para ajustar Cloud Storage FUSE y obtener un rendimiento óptimo.
Usa un archivo YAML de Google Kubernetes Engine preconfigurado para establecer las prácticas recomendadas de ajuste.