Melihat log pipeline lanjutan di Cloud Logging

Halaman ini menjelaskan cara mengaktifkan Cloud Logging untuk cluster Dataproc Cloud Data Fusion dan mengakses log pipeline lanjutan.

Mengaktifkan Cloud Logging Dataproc

Untuk melihat masalah pipeline dan cluster di Cloud Logging, aktifkan log lanjutan di instance Cloud Data Fusion baru atau yang sudah ada. Untuk mengaktifkan log lanjutan di instance yang ada, lakukan tindakan berikut:

  1. Di konsol Google Cloud, buka halaman Instance Cloud Data Fusion.

    Buka Instance

  2. Klik nama instance.

  3. Di bagian Pemantauan dan logging lanjutan, untuk Dataproc Cloud Logging, klik Edit.

  4. Di jendela Cloud Logging, centang kotak Enable Cloud Logging.

  5. Klik Simpan.

Melihat log

Setiap operasi pipeline Cloud Data Fusion diberi RunID unik. Setelah men-deploy dan menjalankan pipeline, temukan RunID-nya. Kemudian, di logging, gunakan RunID untuk melihat log pipeline Anda.

Mendapatkan RunID pipeline

  1. Buka instance Anda:

    1. Di konsol Google Cloud, buka halaman Cloud Data Fusion.

    2. Untuk membuka instance di Cloud Data Fusion Studio, klik Instance, lalu klik View instance.

      Buka Instance

  2. Klik Daftar.
  3. Klik pipeline yang ID Run-nya ingin Anda dapatkan.
  4. Klik Ringkasan.
  5. Di bagian Histori dijalankan, klik Tabel.
  6. Untuk menyalin ID Run, klik kanan RunID, lalu klik Salin.

Melihat log di Logs Explorer

  1. Di konsol Google Cloud, buka halaman Cloud Logging > Logs Explorer:

    Buka Logs Explorer

  2. Di menu drop-down All resources, pilih Cloud Dataproc Cluster > cdap-PIPELINE_NAME-YOUR_RUNID.

Opsional: Memfilter log

Gunakan menu filter untuk memfilter log Anda. Anda dapat memfilter menurut berbagai tingkat keparahan log atau menurut komponen seperti datafusion-pipeline-logs.

Opsional: Mendownload log

Klik Download log.

Untuk mengetahui informasi selengkapnya, lihat mendownload entri log.

Langkah berikutnya