I componenti Dataproc Serverless consentono di eseguire carichi di lavoro batch di Apache Spark da una pipeline all'interno di Vertex AI Pipelines. Dataproc Serverless esegue i carichi di lavoro batch su un'infrastruttura di calcolo gestita, scalando automaticamente le risorse in base alle esigenze.
Scopri di più su Dataproc Serverless e sui carichi di lavoro Spark supportati.
In Dataproc Serverless, una risorsa Batch rappresenta un carico di lavoro batch.
L'SDK Google Cloud include i seguenti operatori per
creare risorse Batch e monitorarne l'esecuzione:
Riferimento API
Per il riferimento ai componenti, consulta il Google Cloud riferimento all'SDK per i componenti di Dataproc Serverless .
Per il riferimento alle risorse Dataproc Serverless, consulta la seguente pagina di riferimento dell'API:
Batchrisorsa
Tutorial
Cronologia delle versioni e note di rilascio
Per scoprire di più sulla cronologia delle versioni e sulle modifiche all'SDK Google Cloud Pipeline Components, consulta le Google Cloud note di rilascio dell'SDK Pipeline Components.
Contatti dell'assistenza tecnica
In caso di domande, scrivi all'indirizzo kfp-dataproc-components@google.com.