할당량 및 한도

이 문서에서는 Data Catalog의 할당량과 한도에 대해 설명합니다.

할당량은 하드웨어, 소프트웨어, 네트워크 구성요소를 비롯해 Google Cloud 프로젝트가 사용할 수 있는 특정 공유 Google Cloud 리소스의 양을 제한합니다. 할당량은 다음을 수행하는 시스템의 일부입니다.

  • Google Cloud 제품 및 서비스 사용 또는 소비량을 모니터링합니다.
  • 공정성 보장 및 사용량 급증 방지 등 여러 이유로 리소스 소비를 제한합니다.
  • 사전 정의된 제한사항을 자동으로 적용하는 구성을 유지합니다.
  • 할당량을 변경하거나 변경을 요청할 수 있는 수단을 제공합니다.

할당량이 초과되면 대부분의 경우 시스템에서 관련 Google 리소스에 대한 액세스를 즉시 차단하고 수행하려는 작업이 실패합니다. 대부분의 경우 할당량은 각 Google Cloud 프로젝트에 적용되며 해당 Google Cloud 프로젝트를 사용하는 모든 애플리케이션과 IP 주소 전반에 공유됩니다.

선택한 할당량은 Google Cloud 콘솔을 사용해 늘리거나 줄입니다. 자세한 내용은 할당량 상향 요청을 참조하세요.

리소스에도 한도가 있습니다. 이 한도는 할당량 시스템과 관련이 없습니다. 별도로 명시되지 않는 한 한도를 변경할 수 없습니다.

기본적으로 할당량 및 한도는 프로젝트별로 적용됩니다.

할당량

조직의 QPM(분당 쿼리 수)을 계산하기 위해 Data Catalog는 조직에 있는 프로젝트의 QPM을 함께 추가합니다.

Data Catalog는 프로젝트 간 요청 워크로드 분산을 제어하는 대신 QPM 할당량을 사용하여 서비스 과부하를 방지합니다. 따라서 프로젝트와 조직의 기본 QPM 할당량은 동일합니다. 즉, 조직에 프로젝트가 여러 개 있고 그 중 하나의 요청 워크로드가 기본 조직 (및 동일한 프로젝트) 할당량에 근접하면 이 프로젝트는 조직 내 다른 프로젝트의 잠재적 워크로드에 영향을 줄 수 있습니다.

조직 및 프로젝트 할당량을 개별적으로 조정하려면 할당량 상향 요청을 참고하세요.

QPM 할당량 기본값
읽기 6000
쓰기 1500
검색 1200

데이터 계보 할당량

Data Lineage API는 다음에 대해 할당량을 적용합니다.

  • 데이터만 반환하는 읽기 요청
  • 데이터를 만들거나 변경하는 쓰기 요청
  • OpenLineage 만들기

Data Lineage API는 프로젝트, 사용자 및 리전별로 데이터 계보 할당량을 적용합니다. 기본 할당량은 다음과 같습니다.

QPM 할당량 기본값
Read 1000
Write 6000
계보 열기 3000

예를 들어 할당량을 초과하기 전 us 리전의 test-project 프로젝트에서 분당 최대 1,000개의 GetProcess 요청을 제출할 수 있습니다.

기타 할당량

한도

Data Catalog API는 항목, 태그, 비즈니스 메타데이터에 한도를 적용합니다.

항목 한도

한도 가치
모든 위치의 조직당 최대 항목 그룹 수 1만
모든 위치의 조직당 최대 항목 수
(초과 시 검색 결과 지연 시간이 길어질 수 있음)		 1억
항목 그룹당 최대 항목 수 10만
항목당 크기(MB) 10MB
페이지당 최대 검색결과 수 1000

태그 한도

한도 가치
태그 템플릿당 필드 500
태그 템플릿의 필드 이름 길이 512바이트
태그 템플릿의 리소스 이름 길이 512바이트
태그 템플릿의 문자열 필드 길이 10,000바이트
태그 템플릿의 최대 열거형 값 수 100
항목당 최대 태그 수 1000
두 숫자의 최대 합:
  • 항목에 연결된 모든 태그의 필드 수
  • 항목의 선택적 스키마에 있는 열 수
 15,000
분류별 최대 정책 태그 수 100
프로젝트당 최대 분류 수 40
정책 태그 트리의 최대 깊이
(분류당 100개의 정책 태그가 계속 적용됨)		 5
정책 태그 이름의 길이 200바이트
사용자당 별표표시된 항목 수 200

비즈니스 메타데이터 한도

한도 가치
데이터 항목당 최대 데이터 관리자 수 15
개요에서 서식 있는 텍스트의 최대 크기(이미지 크기 제외) 100KB
이미지를 포함한 서식 있는 텍스트의 총 크기 10MB