Integrasi dengan Bigtable

Halaman ini menjelaskan integrasi antara Bigtable dan produk serta layanan lainnya.

Google Cloud layanan

Bagian ini menjelaskan layanan Google Cloud yang terintegrasi dengan Bigtable.

BigQuery

BigQuery adalah data warehouse analisis berharga terjangkau yang terkelola sepenuhnya dan berskala petabyte dari Google. Anda dapat menggunakan BigQuery dengan Bigtable untuk tujuan berikut:

  • Anda dapat membuat tabel eksternal BigQuery, lalu menggunakannya untuk mengkueri tabel Bigtable dan menggabungkan data ke tabel BigQuery lainnya. Untuk mengetahui informasi selengkapnya, lihat Membuat kueri data Bigtable.

  • Anda dapat mengekspor data BigQuery ke tabel Bigtable menggunakan ETL terbalik (RETL) dari BigQuery ke Bigtable. Untuk mengetahui informasi selengkapnya, lihat Mengekspor data ke Bigtable.

Inventaris Aset Cloud

Inventaris Aset Cloud, yang menyediakan layanan inventaris berdasarkan database deret waktu, mendukung dan menampilkan jenis resource Bigtable. Untuk daftar lengkapnya, lihat Jenis resource yang didukung.

Katalog Universal Dataplex

Dataplex Universal Catalog dan Data Catalog (tidak digunakan lagi) secara otomatis membuat katalog metadata tentang resource Bigtable. Informasi yang dikatalogkan tentang data Anda dapat membantu memfasilitasi analisis, penggunaan ulang data, pengembangan aplikasi, dan pengelolaan data. Untuk mengetahui informasi selengkapnya, lihat Mengelola aset data menggunakan Data Catalog.

Dataflow

Dataflow adalah layanan cloud dan model pemrograman untuk pemrosesan data besar. Dataflow mendukung pemrosesan batch dan streaming. Anda dapat menggunakan Dataflow untuk memproses data yang disimpan di Bigtable atau untuk menyimpan output pipeline Dataflow Anda. Anda juga dapat menggunakan template Dataflow untuk mengekspor dan mengimpor data Anda sebagai Avro, Parquet, atau SequenceFiles.

Untuk memulai, lihat Konektor Beam Bigtable.

Anda juga dapat menggunakan Bigtable sebagai pencarian key-value untuk memperkaya data dalam pipeline. Untuk mengetahui ringkasannya, lihat Memperkaya data streaming. Untuk melihat tutorial, lihat Menggunakan Apache Beam dan Bigtable untuk memperkaya data.

Dataproc

Dataproc menyediakan Apache Hadoop dan produk terkait sebagai layanan terkelola di cloud. Dengan Dataproc, Anda dapat menjalankan tugas Hadoop yang membaca dari dan menulis ke Bigtable.

Untuk contoh tugas Hadoop MapReduce yang menggunakan Bigtable, lihat direktori /java/dataproc-wordcount di repositori GitHub GoogleCloudPlatform/cloud-bigtable-examples.

Vertex AI Vector Search adalah teknologi yang dapat menelusuri miliaran item yang memiliki kemiripan atau keterkaitan semantik. Fitur ini berguna untuk menerapkan mesin pemberi saran, chatbot, dan klasifikasi teks.

Anda dapat menggunakan Bigtable untuk menyimpan embedding vektor, mengekspornya ke dalam indeks Vector Search, lalu membuat kueri indeks untuk mencari item serupa. Untuk tutorial yang mendemonstrasikan alur kerja contoh, lihat Ekspor Bigtable ke Vertex AI Vector Search di repositori GitHub workflows-demos.

Anda juga dapat mengirimkan update streaming agar indeks penelusuran vektor tetap disinkronkan dengan Bigtable secara real time. Untuk mengetahui informasi selengkapnya, lihat template aliran perubahan Bigtable ke Vector Search.

Big Data

Bagian ini menjelaskan produk Big Data yang terintegrasi dengan Bigtable.

Apache Beam

Apache Beam adalah model terpadu untuk menentukan pipeline pemrosesan paralel data batch dan streaming. Konektor Bigtable Beam (BigtableIO) membantu Anda melakukan operasi batch dan streaming pada data Bigtable dalam pipeline.

Untuk melihat tutorial yang menunjukkan cara menggunakan konektor Bigtable Beam untuk men-deploy pipeline data ke Dataflow, lihat Memproses aliran perubahan Bigtable.

Apache Hadoop

Apache Hadoop adalah framework yang memungkinkan pemrosesan terdistribusi set data besar di seluruh cluster komputer. Anda dapat menggunakan Dataproc untuk membuat cluster Hadoop, lalu menjalankan tugas MapReduce yang membaca dari dan menulis ke Bigtable.

Untuk contoh tugas Hadoop MapReduce yang menggunakan Bigtable, lihat direktori /java/dataproc-wordcount di repositori GitHub GoogleCloudPlatform/cloud-bigtable-examples.

StreamSets Data Collector

StreamSets Data Collector adalah aplikasi streaming data yang dapat Anda konfigurasi untuk menulis data ke Bigtable. StreamSets menyediakan library Bigtable di repositori GitHub-nya di streamsets/datacollector.

Database grafik

Bagian ini menjelaskan database grafik yang terintegrasi dengan Bigtable.

HGraphDB

HGraphDB adalah lapisan klien untuk menggunakan Apache HBase atau Bigtable sebagai database grafik. Driver ini mengimplementasikan antarmuka Apache TinkerPop 3.

Untuk mengetahui informasi selengkapnya tentang cara menjalankan HGraphDB dengan dukungan Bigtable, lihat dokumentasi HGraphDB.

JanusGraph

JanusGraph adalah database grafik yang skalabel. GraphDB dioptimalkan untuk menyimpan dan membuat kueri grafik yang berisi ratusan miliar verteks dan tepi.

Untuk mengetahui informasi selengkapnya tentang cara menjalankan JanusGraph dengan dukungan Bigtable, lihat Menjalankan JanusGraph dengan Bigtable atau dokumentasi JanusGraph.

Pengelolaan infrastruktur

Bagian ini menjelaskan alat pengelolaan infrastruktur yang terintegrasi dengan Bigtable.

Pivotal Cloud Foundry

Pivotal Cloud Foundry adalah platform pengembangan dan deployment aplikasi yang menawarkan kemampuan untuk mengikat aplikasi ke Bigtable.

Terraform

Terraform adalah alat open source yang mengodifikasi API menjadi file konfigurasi deklaratif. File ini dapat dibagikan kepada anggota tim, diperlakukan sebagai kode, diedit, ditinjau, dan dibuatkan versi.

Untuk mengetahui informasi selengkapnya tentang cara menggunakan Bigtable dengan Terraform, lihat Instance Bigtable dan Tabel Bigtable dalam dokumentasi Terraform.

Database dan pemantauan deret waktu

Bagian ini menjelaskan database deret waktu dan alat pemantauan yang terintegrasi dengan Bigtable.

OpenTSDB

OpenTSDB adalah database deret waktu yang dapat menggunakan Bigtable untuk penyimpanan. Dokumentasi OpenTSDB memberikan informasi untuk membantu Anda memulai.