Dataproc Serverless 배치는 다른 Google Cloud 제품을 활용합니다. 이러한 제품에는 서버리스 Dataproc 사용에 적용되는 프로젝트 수준 할당량이 있습니다. Compute Engine, Cloud Storage와 같은 일부 서비스는 서버리스 Dataproc 사용이 필수입니다. 원하는 경우BigQuery 및 Bigtable과 같은 다른 서비스를 Dataproc Serverless와 함께 사용할 수 있습니다.
필수 서비스
Dataproc Serverless 배치를 만들려면 할당량 제한을 적용하는 다음 서비스가 필요합니다.
Compute Engine 할당량은 리전 및 전역 한도로 나뉩니다. 이러한 한도는 생성한 배치에 적용됩니다. 예를 들어 4개의 드라이버 코어(spark.driver.cores=4)와 4개의 코어가 있는 실행자 2개(spark.executor.cores=4)가 있는 Spark 배치를 실행하려면 12개의 가상 CPU(4 * 3)를 사용합니다. 이 배치 사용량은 리전 할당량 한도인 24개의 가상 CPU에 반영됩니다.
[[["이해하기 쉬움","easyToUnderstand","thumb-up"],["문제가 해결됨","solvedMyProblem","thumb-up"],["기타","otherUp","thumb-up"]],[["이해하기 어려움","hardToUnderstand","thumb-down"],["잘못된 정보 또는 샘플 코드","incorrectInformationOrSampleCode","thumb-down"],["필요한 정보/샘플이 없음","missingTheInformationSamplesINeed","thumb-down"],["번역 문제","translationIssue","thumb-down"],["기타","otherDown","thumb-down"]],["최종 업데이트: 2025-04-03(UTC)"],[[["Dataproc Serverless API quotas are enforced per project and region, resetting every sixty seconds, with limits on various operations like creating, deleting, and listing batches and sessions."],["Exceeding a Dataproc Serverless quota results in a `RESOURCE_EXHAUSTED` error, but requests can be retried after a one-minute refresh period."],["Dataproc Serverless relies on required Google Cloud services such as Compute Engine and Cloud Storage, which have their own project-level quotas that affect Dataproc Serverless operations."],["Compute Engine quotas, including CPU, disk, and GPU usage, apply to Dataproc Serverless batches, and free trial accounts have an 8-CPU limit."],["Optional services like BigQuery and Bigtable, which may be integrated with Dataproc Serverless, also have separate quota limits that may be relevant."]]],[]]