Memantau dan memecahkan masalah sesi interaktif Google Cloud Serverless untuk Apache Spark
Tetap teratur dengan koleksi
Simpan dan kategorikan konten berdasarkan preferensi Anda.
Dokumen ini menjelaskan cara memantau dan memecahkan masalah Google Cloud Serverless untuk Apache Spark
sesi interaktif
menggunakan UI Spark.
UI Spark
UI Spark mengumpulkan detail eksekusi Apache Spark dari sesi interaktif Serverless for Apache Spark. Fitur Spark UI tidak dikenai biaya dan diaktifkan secara default. Data yang dikumpulkan oleh fitur UI Spark dipertahankan selama 90 hari.
Izin dan peran Identity and Access Management yang diperlukan
Izin berikut diperlukan untuk menggunakan fitur UI Spark dengan sesi interaktif:
Izin pengumpulan data: dataproc.sessions.sparkApplicationWrite. Izin ini harus diberikan ke akun layanan yang menjalankan sesi interaktif.
Peran ini disertakan dalam peran
Dataproc Worker, yang otomatis diberikan ke akun layanan default Compute Engine
yang digunakan Serverless for Apache Spark secara default. Namun, jika Anda menentukan
akun layanan kustom
untuk sesi
atau template runtime sesi,
Anda harus menambahkan izin dataproc.sessions.sparkApplicationWrite ini ke akun layanan tersebut
(biasanya, dengan memberikan peran Dataproc Worker ke akun layanan).
Izin akses UI Spark: dataproc.sessions.sparkApplicationRead. Izin ini harus diberikan kepada pengguna untuk mengakses UI Spark di konsolGoogle Cloud . Izin ini disertakan dalam peran
Dataproc Viewer, Dataproc Editor, dan Dataproc Administrator. Untuk membuka UI Spark di konsol Google Cloud , Anda harus memiliki salah satu peran ini atau memiliki peran kustom yang mencakup izin ini.
Membuka UI Spark
Halaman Spark UI tersedia di konsol Google Cloud .
Klik ID Sesi Interaktif untuk membuka halaman Detail Sesi Interaktif.
Klik Lihat UI Spark di menu atas.
Apakah link View Spark UI dinonaktifkan? Jika
izin yang diperlukan tidak diberikan,
atau jika Anda menghapus centang kotak Aktifkan UI Spark di halaman detail sesi interaktif atau menetapkan
properti spark.dataproc.appContext.enabled ke false (default: true) saat Anda
membuat sesi atau
membuat template runtime sesi,
tombol Lihat UI Spark akan dinonaktifkan.
[[["Mudah dipahami","easyToUnderstand","thumb-up"],["Memecahkan masalah saya","solvedMyProblem","thumb-up"],["Lainnya","otherUp","thumb-up"]],[["Sulit dipahami","hardToUnderstand","thumb-down"],["Informasi atau kode contoh salah","incorrectInformationOrSampleCode","thumb-down"],["Informasi/contoh yang saya butuhkan tidak ada","missingTheInformationSamplesINeed","thumb-down"],["Masalah terjemahan","translationIssue","thumb-down"],["Lainnya","otherDown","thumb-down"]],["Terakhir diperbarui pada 2025-07-14 UTC."],[[["The Spark UI is a free feature that collects and displays Apache Spark execution details from Dataproc Serverless interactive sessions, retaining data for 90 days, and is enabled by default."],["To use the Spark UI with interactive sessions, the service account running the session needs the `dataproc.sessions.sparkApplicationWrite` permission, and users accessing the UI need the `dataproc.sessions.sparkApplicationRead` permission."],["You can access the Spark UI by navigating to the Dataproc Interactive Sessions in the Google Cloud console, selecting an interactive session, and clicking \"View Spark UI\" in the top menu."],["The \"View Spark UI\" button will be disabled if the necessary permissions are missing or if the Spark UI feature has been disabled during session creation by unchecking the \"Enable Spark UI\" checkbox or setting the `spark.dataproc.appContext.enabled` property to false."]]],[]]
