Lihat konektor yang didukung untuk Application Integration.

Dataflow - Tugas Membuat Tugas

Tugas Dataflow - Create Job memungkinkan Anda membuat tugas di Cloud Dataflow untuk menjalankan pipeline data yang dibangun menggunakan salah satu Apache Beam SDK.

Cloud Dataflow adalah layanan Google Cloud terkelola sepenuhnya untuk menjalankan pipeline pemrosesan data streaming dan Batch.

Sebelum memulai

Pastikan Anda melakukan tugas berikut di project Google Cloud sebelum mengonfigurasi tugas Dataflow - Create Job:

  1. Aktifkan Dataflow API (dataflow.googleapis.com).

    Aktifkan Dataflow API

  2. Buat profil autentikasi. Integrasi Aplikasi menggunakan profil autentikasi untuk terhubung ke endpoint autentikasi untuk tugas Dataflow - Create Job.

    Untuk mengetahui informasi tentang cara memberikan peran atau izin tambahan ke akun layanan, lihat Memberikan, mengubah, dan mencabut akses.

Mengonfigurasi tugas Dataflow - Create Job

  1. Di konsol Google Cloud , buka halaman Application Integration.

    Buka Integrasi Aplikasi

  2. Di menu navigasi, klik Integrations.

    Halaman Integrasi akan muncul dan mencantumkan semua integrasi yang tersedia di project Google Cloud.

  3. Pilih integrasi yang ada atau klik Buat integrasi untuk membuat integrasi baru.

    Jika Anda membuat integrasi baru:

    1. Masukkan nama dan deskripsi di panel Buat Integrasi.
    2. Pilih region untuk integrasi.
    3. Pilih akun layanan untuk integrasi. Anda dapat mengubah atau memperbarui detail akun layanan integrasi kapan saja dari panel Ringkasan integrasi di toolbar integrasi.
    4. Klik Buat. Integrasi yang baru dibuat akan terbuka di editor integrasi.

  4. Di menu navigasi editor integrasi, klik Tugas untuk melihat daftar tugas dan konektor yang tersedia.
  5. Klik dan tempatkan elemen Dataflow - Create Job di editor integrasi.
  6. Klik elemen Dataflow - Create Job di perancang untuk melihat panel konfigurasi tugas Dataflow - Create Job.
  7. Buka Authentication, lalu pilih profil autentikasi yang ada yang ingin Anda gunakan.

    Opsional. Jika Anda belum membuat profil autentikasi sebelum mengonfigurasi tugas, klik + Profil autentikasi baru dan ikuti langkah-langkah seperti yang disebutkan dalam Membuat profil autentikasi baru.

  8. Buka Input Tugas, lalu konfigurasi kolom input yang ditampilkan menggunakan tabel Parameter input tugas berikut.

    Perubahan pada kolom input akan disimpan secara otomatis.

Parameter input tugas

Tabel berikut menjelaskan parameter input tugas Dataflow - Create Job:

Properti Jenis data Deskripsi
Wilayah String Lokasi Cloud Dataflow untuk tugas.
ProjectsId String ID Project Google Cloud Anda.
Lokasi String Endpoint regional yang berisi tugas ini.
Permintaan JSON Lihat struktur JSON permintaan.

Output tugas

Tugas Dataflow - Create Job menampilkan instance Job yang baru dibuat.

Strategi penanganan error

Strategi penanganan error untuk tugas menentukan tindakan yang harus dilakukan jika tugas gagal karena error sementara. Untuk mengetahui informasi tentang cara menggunakan strategi penanganan error, dan untuk mengetahui berbagai jenis strategi penanganan error, lihat Strategi penanganan error.

Kuota dan batas

Untuk mengetahui informasi tentang kuota dan batas, lihat Kuota dan batas.

Langkah berikutnya