Componenti di Google Cloud Serverless per Apache Spark

I componenti Serverless for Apache Spark ti consentono di eseguire batch Apache Spark workload da una pipeline all'interno di Vertex AI Pipelines. Serverless for Apache Spark esegue i workload batch su un'infrastruttura di calcolo gestita, scalando automaticamente le risorse in base alle esigenze.

Scopri di più su Google Cloud Serverless per Apache Spark e sui carichi di lavoro Spark supportati.

In Serverless per Apache Spark, una risorsa Batch rappresenta un carico di lavoro batch. L'SDK Google Cloud include i seguenti operatori per creare risorse Batch e monitorarne l'esecuzione:

• DataprocPySparkBatchOp
• DataprocSparkBatchOp
• DataprocSparkRBatchOp
• DataprocSparkSqlBatchOp

Riferimento API

• Per il riferimento ai componenti, consulta il riferimento SDK per i Google Cloud componenti di Serverless per Apache Spark.Google Cloud

• Per il riferimento alle risorse di Serverless per Apache Spark, consulta la seguente pagina di riferimento dell'API:

  • Batch risorsa

Tutorial

• Inizia a utilizzare i Google Cloud componenti della pipeline Serverless per Apache Spark

Cronologia delle versioni e note di rilascio

Per scoprire di più sulla cronologia delle versioni e sulle modifiche all'SDK Google Cloud Pipeline Components, consulta le Google Cloud note di rilascio dell'SDK Pipeline Components.

Contatti dell'assistenza tecnica

In caso di domande, scrivi all'indirizzo kfp-dataproc-components@google.com.