Google Cloud Lista de componentes do pipeline

Mantenha tudo organizado com as coleções Salve e categorize o conteúdo com base nas suas preferências.

Google Cloud Os componentes do pipeline são lançados em duas fases:

• Disponibilidade geral (v1.0 e superior)

• Pré-lançamento

Para mais informações, consulte as descrições da fase de lançamento.

Componentes com disponibilidade geral (1.0 e posterior)

Os componentes de pipeline Google Cloud estão disponíveis no namespace v1 do SDK Google Cloud . Esses componentes têm uma interface estável e estão prontos para serem usados em um ambiente de produção.

Componentes do AutoML

Componentes de previsão do AutoML

O SDK Google Cloud inclui os seguintes operadores relacionados à previsão do AutoML:

• ProphetTrainerOp

Componentes tabulares do AutoML

O SDK Google Cloud inclui os seguintes operadores relacionados ao tabular do AutoML:

• CvTrainerOp
• EnsembleOp
• FinalizerOp
• InfraValidatorOp
• SplitMaterializedDataOp
• Stage1TunerOp
• StatsAndExampleGenOp
• TrainingConfiguratorAndValidatorOp
• TransformOp

Componentes do job de treinamento do AutoML

O SDK Google Cloud inclui os seguintes operadores relacionados a jobs de treinamento do AutoML:

• AutoMLForecastingTrainingJobRunOp
• AutoMLImageTrainingJobRunOp
• AutoMLTabularTrainingJobRunOp
• AutoMLTextTrainingJobRunOp
• AutoMLVideoTrainingJobRunOp

Componentes da previsão em lote

O SDK Google Cloud inclui os seguintes operadores relacionados à previsão em lote:

• ModelBatchPredictOp

Componentes do BigQuery ML

O SDK Google Cloud inclui os seguintes operadores para criar e executar modelos de machine learning usando o BigQuery:

• BigqueryCreateModelJobOp
• BigqueryDetectAnomaliesModelJobOp
• BigqueryDropModelJobOp
• BigqueryEvaluateModelJobOp
• BigqueryExplainForecastModelJobOp
• BigqueryExplainPredictModelJobOp
• BigqueryExportModelJobOp
• BigqueryForecastModelJobOp
• BigqueryMLAdvancedWeightsJobOp
• BigqueryMLArimaCoefficientsJobOp
• BigqueryMLArimaEvaluateJobOp
• BigqueryMLCentroidsJobOp
• BigqueryMLConfusionMatrixJobOp
• BigqueryMLFeatureImportanceJobOp
• BigqueryMLFeatureInfoJobOp
• BigqueryMLGlobalExplainJobOp
• BigqueryMLPrincipalComponentInfoJobOp
• BigqueryMLPrincipalComponentsJobOp
• BigqueryMLRecommendJobOp
• BigqueryMLReconstructionLossJobOp
• BigqueryMLRocCurveJobOp
• BigqueryMLTrainingInfoJobOp
• BigqueryMLTrialInfoJobOp
• BigqueryMLWeightsJobOp
• BigqueryPredictModelJobOp
• BigqueryQueryJobOp

Componentes Custom Job

O SDK Google Cloud inclui os seguintes operadores para executar componentes do KFP como jobs de treinamento personalizado da Vertex AI:

• CustomTrainingJobOp

Componentes do Dataflow

O SDK Google Cloud inclui os seguintes operadores relacionados ao Dataflow:

• DataflowFlexTemplateJobOp
• DataflowPythonJobOp

Componentes sem servidor do Dataproc

O SDK Google Cloud inclui os seguintes operadores relacionados ao Dataproc Serverless:

• DataprocPySparkBatchOp
• DataprocSparkBatchOp
• DataprocSparkRBatchOp
• DataprocSparkSqlBatchOp

Componentes do conjunto de dados

O SDK Google Cloud inclui os seguintes operadores para o gerenciamento de recursos do AutoML dataset:

• GetVertexDatasetOp
• ImageDatasetCreateOp
• ImageDatasetExportDataOp
• ImageDatasetImportDataOp
• TabularDatasetCreateOp
• TabularDatasetExportDataOp
• TextDatasetCreateOp
• TextDatasetExportDataOp
• TextDatasetImportDataOp
• TimeSeriesDatasetCreateOp
• TimeSeriesDatasetExportDataOp
• VideoDatasetCreateOp
• VideoDatasetExportDataOp
• VideoDatasetImportDataOp

Componentes do endpoint

O SDK Google Cloud inclui os seguintes operadores relacionados a endpoints de disponibilização de modelos:

• EndpointCreateOp
• EndpointDeleteOp
• ModelDeployOp
• ModelUndeployOp

Componentes da previsão

O SDK Google Cloud inclui os seguintes operadores relacionados à previsão:

• ForecastingPrepareDataForTrainOp
• ForecastingPreprocessingOp
• ForecastingValidationOp

Componentes de ajuste de hiperparâmetros

O SDK Google Cloud inclui os seguintes operadores relacionados a jobs de ajuste de hiperparâmetros:

• HyperparameterTuningJobRunOp

Componentes do modelo

O SDK Google Cloud inclui os seguintes operadores para gerenciar modelos pelo Registro de modelos da Vertex AI:

• ModelDeleteOp
• ModelExportOp
• ModelUploadOp

Componentes de avaliação do modelo

O SDK Google Cloud inclui os seguintes operadores relacionados à avaliação do modelo:

• ModelEvaluationClassificationOp
• ModelEvaluationForecastingOp
• ModelEvaluationRegressionOp

Componentes da notificação por e-mail

O SDK Google Cloud inclui os seguintes operadores para gerenciar notificações por e-mail:

• VertexNotificationEmailOp

Componentes relacionados à espera dos recursos

O SDK Google Cloud inclui o seguinte operador relacionado à espera pela criação de recursos:

• WaitGcpResourcesOp

Visualizar componentes

Os componentes de pipelineGoogle Cloud no estágio de visualização estão disponíveis no namespace preview do SDK Google Cloud Pipeline Components.

Componentes do AutoML

Componentes de previsão do AutoML

O SDK Google Cloud inclui os seguintes operadores de visualização relacionados à previsão do AutoML:

• ForecastingEnsembleOp
• ForecastingStage1TunerOp
• ForecastingStage2TunerOp

Componentes tabulares do AutoML

O SDK Google Cloud inclui os seguintes operadores de visualização relacionados ao tabular do AutoML:

• AutoFeatureEngineeringOp
• DistillationStageFeatureTransformEngineOp
• FeatureSelectionOp
• FeatureTransformEngineOp
• TabNetHyperparameterTuningJobOp
• TabNetTrainerOp
• WideAndDeepHyperparameterTuningJobOp
• WideAndDeepTrainerOp
• XGBoostHyperparameterTuningJobOp
• XGBoostTrainerOp

Componentes Custom Job

O SDK Google Cloud inclui os seguintes operadores de visualização para executar componentes do KFP como jobs de treinamento personalizado da Vertex AI:

• CustomTrainingJobOp

Componentes do Dataflow

O SDK Google Cloud inclui os seguintes operadores de visualização relacionados ao Dataflow:

• DataflowFlexTemplateJobOp

Componentes de modelo de linguagem grande (LLM)

O SDK Google Cloud inclui os seguintes operadores de visualização relacionados a LLMs:

• infer_pipeline
• rlhf_pipeline

Componentes de avaliação do modelo

O SDK Google Cloud inclui os seguintes operadores de visualização relacionados à avaliação de modelos:

• DetectDataBiasOp
• DetectModelBiasOp
• ModelEvaluationFeatureAttributionOp

A seguir

• Consulte as páginas de referência a seguir para informações específicas sobre os Google Cloud componentes do pipeline:

  • Componentes do Dataflow

  • Componentes sem servidor do Dataproc

  • Componentes CustomJob

  • Componente de previsão em lote

  • Componentes de modelo e endpoint

  • Componente de avaliação do modelo

  • Componentes do AutoML da Vertex AI (aiplatform)