이 문서에는 Dataplex에 적용되는 할당량이 나열되어 있습니다.
Google Cloud는 공정성을 보장하고 리소스 사용 및 가용성의 급증을 줄이기 위해 할당량을 사용합니다. 할당량은 Google Cloud 프로젝트에서 사용할 수 있는 Google Cloud 리소스의 양을 제한합니다. 할당량은 하드웨어, 소프트웨어, 네트워크 구성요소를 포함하여 다양한 리소스 유형에 적용됩니다. 예를 들어 할당량에 따라 서비스에 대한 API 호출 수, 프로젝트에서 동시에 사용하는 부하 분산기 수, 만들 수 있는 프로젝트 수가 제한될 수 있습니다. 할당량은 서비스 과부하를 방지하여 Google Cloud 사용자 커뮤니티를 보호합니다. 할당량은 자체 Google Cloud 리소스를 관리하는 데도 도움이 됩니다.
Cloud Quotas 시스템은 다음을 수행합니다.
- Google Cloud 제품 및 서비스 소비량 모니터링
- 리소스 소비 제한
- 할당량 값 변경을 요청할 수 있는 수단 제공
대부분의 경우 할당량이 허용하는 것보다 더 많은 리소스를 소비하려고 하면 시스템에서 리소스에 대한 액세스를 차단하고 수행하려는 작업이 실패합니다.
할당량은 일반적으로 Google Cloud 프로젝트 수준에서 적용됩니다. 한 프로젝트의 리소스를 사용해도 다른 프로젝트에서 사용 가능한 할당량에는 영향을 미치지 않습니다. Google Cloud 프로젝트 내에서 할당량은 모든 애플리케이션과 IP 주소에 공유됩니다.
Dataplex 리소스에도 시스템 한도가 있습니다. 한도는 변경할 수 없습니다.
Dataplex는 일정 기간의 API 요청 수와 프로젝트에서 만들 수 있는 리소스 수에 할당량을 적용합니다. 할당량은 예기치 않은 사용량 급증과 서비스 과부하를 방지합니다. 할당량이 적용되는 이유를 자세히 알아보세요.
Dataplex를 많이 사용할수록 할당량을 늘려야 할 수 있습니다. 할당량이 필요한 양보다 적거나 향후 사용량 증가가 예상된다면 미리 할당량 상향을 요청할 수 있습니다.
요청 할당량
Dataplex API는 출처와 관계없이 여러 수준에서 Dataplex 카탈로그 리소스 관리 및 검색 요청에 할당량을 적용합니다. 여기에는 API 호출에서 직접 발생하는 요청, 클라이언트 라이브러리, Google Cloud CLI, Google Cloud 콘솔에서 발생하는 요청이 포함됩니다.
Dataplex 요청에 적용되는 할당량은 다음과 같습니다.
| 할당량 | 기본값 |
|---|---|
| 프로젝트별 리전별 분당 항목 및 관점에 대한 읽기 요청 수 | 6000 |
| 프로젝트별 리전별 분당 항목 및 관점에 대한 쓰기 요청 | 1500 |
| 프로젝트별 사용자별 분당 관점 유형, 항목 유형, 항목 그룹에 대한 읽기 요청 수 | 100 |
| 프로젝트별 분당 관점 유형, 항목 유형, 항목 그룹에 대한 읽기 요청 수 | 200 |
| 프로젝트별 사용자별 분당 관점 유형, 항목 유형, 항목 그룹에 대한 쓰기 요청 수 | 10 |
| 프로젝트별 분당 관점 유형, 항목 유형, 항목 그룹에 대한 쓰기 요청 수 | 20 |
| 프로젝트별 사용자별 분당 검색 요청 수 | 900 |
| 프로젝트별 분당 검색 요청 수 | 1200 |
| 조직별 분당 검색 요청 수 | 2400 |
| 조직별 일일 검색 요청 수 | 345600 |
| 프로젝트별 리전별 분당 메타데이터 작업 읽기 요청 수 | 400 |
| 프로젝트별 사용자별 리전별 분당 메타데이터 작업 읽기 요청 수 | 200 |
| 프로젝트별 리전별 분당 메타데이터 작업 쓰기 요청 수 | 20 |
| 프로젝트별 사용자별 리전별 분당 메타데이터 작업 쓰기 요청 수 | 10 |
다음 표에 나열된 모든 Dataplex 요청의 경우 프로젝트별 수준과 프로젝트별 사용자당 수준에서 모두 할당량이 적용됩니다.
| 할당량 | 예시 |
|---|---|
| 리소스 관리용 읽기 요청 | 레이크 가져오기, 영역 나열 |
| 리소스 관리용 쓰기 요청 | 레이크 만들기, 애셋 삭제 |
| 메타데이터 요청 가져오기 | 항목 가져오기, 파티션 가져오기 |
| 메타데이터 나열 요청 | 항목 나열, 파티션 나열 |
| 메타데이터 쓰기 요청 | 항목 업데이트, 파티션 삭제 |
| 태스크 및 작업 리소스 읽기 요청 | 태스크 가져오기, 작업 나열 |
| 태스크 및 작업 리소스 쓰기 요청 | 태스크 만들기, 작업 취소 |
| IAM 정책 설정 요청 | IAM 정책 설정 |
리소스 할당량
레이크, 영역, 애셋, 주문형 태스크, 반복 태스크 리소스 유형의 경우 리소스 할당량이 프로젝트별 수준으로 적용됩니다. Google Cloud 콘솔의 할당량 페이지에서 Dataplex 할당량의 현재 사용량을 확인할 수 있습니다.
할당량 상향 조정 요청
Google Cloud 콘솔에서 할당량 페이지로 이동합니다.
페이지에 할당량 목록이 표시됩니다.
수정하려는 할당량을 선택하고 할당량 수정을 클릭합니다.
선택한 할당량에 대해 새 할당량을 입력합니다.
요청 제출을 클릭합니다.
대부분의 할당량을 조정하려면 Google Cloud 콘솔을 사용합니다. 자세한 내용은 할당량 조정 요청을 참조하세요.
할당량 종속 항목
Dataplex 사용량에 다른 Google Cloud 제품이 포함될 수 있습니다. 예를 들어 데이터 검색 시 Cloud Storage 또는 BigQuery API를 호출하여 기본 리소스와 상호작용해야 합니다. 이러한 제품에는 Dataplex 사용에 적용되는 프로젝트 수준 할당량이 있습니다.
Dataplex와 함께 사용될 수 있는 다른 제품의 할당량 페이지:
이 목록은 일부일 뿐 모든 내용을 포함하지는 않습니다.
한도
Dataplex 카탈로그 및 검색에는 다음 한도가 적용됩니다.
| 한도 | 값 |
|---|---|
| 항목 및 관점에 대한 요청 크기 | 2MB |
| 항목 ID 길이 | 4,000자(영문 기준) |
| 항목의 정규화된 이름 길이 | 4,000자(영문 기준) |
| 항목의 항목 소스 표시 이름 길이 | 500자(영문 기준) |
| 항목의 항목 소스 설명 길이 | 2,000자(영문 기준) |
| 항목의 항목 소스 리소스 길이 | 4,000자(영문 기준) |
| 항목의 항목 소스 시스템 길이 | 64자(영문 기준) |
| 항목의 항목 소스 플랫폼 길이 | 64자(영문 기준) |
| 항목의 항목 소스 라벨 길이 | 키 및 값당 128자(영문 기준) |
| 관점의 JSON 콘텐츠 크기 | 120KB |
| 항목의 총 크기 | 5MB |
| 항목의 최대 관점 수 | 10,000 |
| 항목 유형, 관점 유형, 항목 그룹의 표시 이름 길이 | 256 |
| 항목 유형, 관점 유형, 항목 그룹의 설명 길이 | 1024 |
| 항목 유형의 최대 필수 관점 유형 수 | 20 |
| 관점 유형 템플릿의 최대 enum 값 수 | 1024 |
| Dataplex 검색 결과의 최대 항목 수 | 500 |