Halaman ini menjelaskan cara menggunakan Spanner Data Boost saat menjalankan kueri gabungan dari BigQuery ke Spanner. Dengan Data Boost, kueri gabungan berjalan dengan dampak nyaris nol terhadap workload yang ada di instance Spanner yang disediakan.
Penggabungan Spanner memungkinkan BigQuery membuat kueri data yang ada di Spanner secara real time, tanpa menyalin atau memindahkan data.
Untuk mempelajari kueri gabungan Spanner, lihat Kueri gabungan Spanner.
Untuk mempelajari Data Boost, lihat ringkasan Data Boost.
Sebelum memulai
Selesaikan tugas berikut sebelum mencoba menjalankan kueri gabungan dengan Data Boost.
Mengaktifkan API koneksi BigQuery
API koneksi BigQuery memungkinkan Anda mengelola koneksi BigQuery ke sumber data eksternal.
-
Aktifkan BigQuery connection API.
Untuk mengetahui informasi selengkapnya, lihat API koneksi BigQuery.
Memberikan izin IAM untuk Data Boost ke akun utama
Kepala sekolah memerlukan izin Identity and Access Management (IAM) spanner.instances.get
dan spanner.databases.useDataBoost
untuk menjalankan kueri dan ekspor dengan Data Boost.
Sebaiknya Anda membuat peran IAM kustom berdasarkan Spanner Database Reader
(roles/spanner.databaseReader
) serta menambahkan spanner.instances.get
dan spanner.databases.useDataBoost
ke peran tersebut.
Untuk mengetahui informasi selengkapnya, lihat Peran yang telah ditetapkan.
Membuat koneksi BigQuery untuk Spanner dengan Data Boost
Koneksi BigQuery memungkinkan Anda mengkueri data yang disimpan di luar BigQuery. Untuk membuat koneksi antara BigQuery dan Spanner, Anda harus membuat koneksi data eksternal. Selanjutnya, Anda dapat menjalankan kueri yang menggabungkan data BigQuery dengan data Spanner.
Untuk membuat koneksi data eksternal ke Spanner yang menggunakan Data Boost, pilih salah satu opsi berikut:
Konsol
Buka Membuat koneksi Spanner dalam dokumentasi BigQuery dan ikuti petunjuk Konsol.
Di panel External data source, centang kotak Read data in paralel dan Use Spanner Data Boost.
bq
Buka Membuat koneksi Spanner dalam dokumentasi BigQuery dan ikuti petunjuk bq.
Tetapkan properti koneksi berikut ke
true
:
useParallelism
useDataBoost
Contoh berikut menggunakan perintah bq
mk
untuk membuat koneksi baru bernama my_connection
dengan dua
properti wajib untuk Data Boost:
bq mk --connection --connection_type='CLOUD_SPANNER' --location='us' \
--properties='{"database":"projects/my-project/instances/my-instance/databases/my-database", "useParallelism":true, "useDataBoost": true}' my_connection
Menjalankan kueri gabungan
Untuk menjalankan kueri gabungan dengan Data Boost, gunakan koneksi BigQuery yang menentukan penggunaan Data Boost. Untuk mengetahui informasi selengkapnya, lihat Membuat koneksi BigQuery untuk Spanner dengan Data Boost.
Anda dapat memulai dari halaman Spanner di Google Cloud Console, atau dari BigQuery.
Memulai dari halaman Spanner di konsol
Buka halaman Instance Spanner di Konsol Google Cloud.
Konsol akan menampilkan daftar instance Spanner.
Pilih instance Spanner, lalu pilih database.
Di halaman Database overview, di menu navigasi, klik Spanner Studio.
Klik tab View in BiqQuery.
Pada dialog Lihat di BigQuery, masukkan ID koneksi.
Tindakan ini akan membuat koneksi baru. Error akan terjadi jika ID sudah ada.
Isi sisa dialog, lalu pilih kotak centang Read data in paralel dan Use Spanner Data Boost.
Klik Lihat di BigQuery.
BigQuery Studio akan terbuka. Masukkan dan jalankan kueri gabungan Anda di sana.
Contoh berikut membuat kueri gabungan ke database Spanner bernama
orders
dan menggabungkan hasilnya dengan tabel BigQuery bernamamydataset.customers
.SELECT c.customer_id, c.name, rq.first_order_date FROM mydataset.customers AS c LEFT OUTER JOIN EXTERNAL_QUERY( 'my-project.us.example-db', '''SELECT customer_id, MIN(order_date) AS first_order_date FROM orders GROUP BY customer_id''') AS rq ON rq.customer_id = c.customer_id GROUP BY c.customer_id, c.name, rq.first_order_date;
Mulai dari BigQuery
Masukkan URL berikut di browser Anda:
https://console.cloud.google.com/bigquery
BigQuery akan terbuka di project yang terakhir Anda akses dan menampilkan BigQuery Studio. Jalankan kueri gabungan Anda di sini.
Langkah selanjutnya
- Pelajari Data Boost di ringkasan Data Boost.
- Menggunakan Data Boost di aplikasi Anda
- Memantau penggunaan Data Boost
- Memantau dan mengelola penggunaan kuota Data Boost