Melihat streaming

Di halaman ini, Anda akan mempelajari cara mendapatkan informasi tentang streaming.

Untuk melihat informasi tingkat tinggi dan mendetail tentang aliran data, lakukan hal berikut:

  1. Buka halaman Streams di Konsol Google Cloud .

    Buka halaman Streams

  2. Klik aliran data yang ingin Anda lihat detail informasinya. Informasi ini muncul di halaman Detail aliran data.

Melihat informasi tingkat tinggi

Informasi tingkat tinggi tentang streaming mencakup:

  • Nama dan status streaming.
  • Profil koneksi sumber dan tujuan yang digunakan aliran data untuk mentransfer data dari database sumber ke tujuan.
  • Jenis profil dari profil koneksi.

Melihat informasi mendetail

Selain melihat informasi tingkat tinggi tentang aliran data, Anda dapat mengklik aliran data untuk melihat informasi tambahan, termasuk:

  • Region tempat penyimpanan streaming. Seperti halnya semua resource, aliran data disimpan di region. Aliran data hanya dapat menggunakan profil koneksi dan konfigurasi konektivitas pribadi yang berada di region yang sama.
  • Saat aliran dibuat, terakhir diperbarui, atau dipulihkan.
  • Label apa pun yang ditambahkan ke streaming. Label ini digunakan untuk mengatur streaming.
  • Bergantung pada database sumber, metode CDC yang Anda pilih untuk aliran.
  • Tabel dan skema dalam database sumber yang harus disertakan Datastream saat memproses stream.
  • Tabel dan skema di database sumber yang harus dikecualikan oleh Datastream saat memproses aliran data.
  • Untuk semua sumber selain PostgreSQL, metode CDC ditetapkan untuk aliran.
  • Untuk sumber Oracle: metode akses file log.
  • Apakah pengisian ulang historis diaktifkan atau dinonaktifkan untuk streaming.
    • Jika diaktifkan, jumlah skema dan tabel dalam database sumber yang dikecualikan dari pengisian ulang.
  • Untuk tujuan BigQuery:

    • Apakah set data tujuan merupakan set data dinamis atau default.
    • Apakah mode penulisan untuk streaming ditetapkan ke Gabungkan atau Khusus tambahkan.
    • Jika Anda memilih Merge mode, konfigurasi batas keusangan akan diterapkan ke tabel BigQuery baru yang dibuat oleh Datastream.

    Selain itu, untuk tujuan tabel BigLake Iceberg:

    • ID koneksi BigQuery yang Anda gunakan untuk streaming.
    • Uniform resource identifier (URI) bucket Cloud Storage tempat Anda menyimpan data.
  • Untuk tujuan Cloud Storage:

    • Lokasi tujuan tempat aliran mentransfer skema, tabel, dan data dari database sumber.
    • Format file yang ditulis ke tujuan. Datastream mendukung dua format output: Avro dan JSON.
  • Apakah data Anda dienkripsi dengan kunci yang dikelola oleh Google (dikelola Google) atau oleh Anda (dikelola Pelanggan).

  • Link dan jalur ke kunci enkripsi yang dikelola pelanggan (jika Anda mengelola enkripsi).

  • Link untuk membuat kebijakan pemberitahuan untuk streaming.

  • Status jumlah pengisian ulang yang sedang berlangsung, tertunda, atau gagal.

  • Jumlah peristiwa yang diproses dan dimuat ke tujuan oleh Datastream dalam 7 hari terakhir.

  • Jumlah peristiwa yang tidak dapat diproses Datastream dalam 7 hari terakhir.

    • Grafik Keaktualan data. Grafik ini menampilkan selisih waktu antara data yang berada di sumber dan data yang ditransfer ke tujuan oleh aliran. Nilai ini dihitung sebagai waktu yang berlalu sejak Datastream terakhir kali memeriksa data baru di sumber.

    Untuk mengetahui informasi selengkapnya tentang grafik ini, lihat Memantau stream.

Langkah berikutnya