알려진 2.2 이미지 버전 문제 및 제한사항:
- Spark 3.5에서는 계보 데이터 수집을 지원하지 않으므로 데이터 계보를 사용할 수 없습니다.
- 기존 에이전트는 2.2 이미지 버전 클러스터에 설치되지 않습니다. 운영 에이전트가 설치되어 있지 않으면 monitoring-agent-defaults를 사용할 수 없습니다. 참고: OSS 측정항목 및 로깅은 Dataproc 구성요소에 사용 가능합니다.
- 운영 에이전트가 설치되어 있지 않으면 서드 파티 애플리케이션의 로깅이나 모니터링을 사용할 수 없습니다.
참고:
- 상호 및 제한된 라이선스에 따라 라이선스가 부여된 이미지 2.2 라이브러리의 소스 코드는 Dataproc 클러스터 VM의
/usr/local/share/google/dataproc/third-party-sources
경로에서 제공됩니다. - 다음 Hudi 프로시저는 Cloud Storage 파일 시스템으로 지원되는 Hudi 테이블에서 작동하지 않는 것으로 알려져 있습니다.
run_clustering
run_compaction