Ringkasan columnar engine

Pilih versi dokumentasi:

Halaman ini menjelaskan mesin columnar AlloyDB Omni dan memberikan petunjuk tentang cara menggunakan mesin di penginstalan cluster Kubernetes dan container. Halaman ini mengasumsikan bahwa Anda sudah memahami PostgreSQL.

Mesin berbasis kolom AlloyDB Omni mempercepat pemrosesan kueri SQL untuk pemindaian, gabungan, dan agregasi dengan menyediakan komponen berikut:

  • Penyimpanan kolom yang berisi data tabel dan tampilan material untuk kolom yang dipilih, yang disusun ulang ke dalam format berorientasi kolom.

  • Perencana kueri berbasis kolom dan mesin eksekusi yang mendukung penggunaan penyimpanan kolom dalam kueri.

Anda dapat menggunakan mesin berbasis kolom pada instance utama, instance kumpulan baca, atau keduanya. Anda juga dapat menggunakan kolumnarisasi otomatis untuk menganalisis beban kerja dan mengisi kolom penyimpanan secara otomatis dengan kolom yang memberikan peningkatan performa terbaik.

Untuk menggunakan mesin columnar dengan kueri tertentu, semua kolom yang dirujuk dalam kueri, seperti gabungan, pemindaian, harus ada di penyimpanan kolom.

Secara default, mesin columnar disetel untuk menggunakan memori instance Anda sebesar 1 GB. Bergantung pada beban kerja, penggunaan memori, dan apakah Anda telah mengonfigurasi kumpulan baca, Anda dapat memilih untuk mengurangi alokasi memori mesin columnar pada instance utama dan mengalokasikan lebih banyak memori ke instance kumpulan baca.

Untuk melihat dan memantau penggunaan memori oleh mesin kolom, lihat Melihat penggunaan memori penyimpanan kolom. Untuk mengubah ukuran memori yang digunakan oleh penyimpanan kolom, lihat Mengonfigurasi ukuran penyimpanan kolom. Untuk menemukan ukuran memori mesin columnar yang direkomendasikan untuk instance Anda, lihat Merekomendasikan ukuran memori penyimpanan kolom.

Jenis kueri yang diuntungkan oleh columnar engine

Kueri tertentu dapat memanfaatkan columnar engine. Berikut adalah daftar operasi dan pola kueri yang paling diuntungkan dari mesin berbasis kolom:

Operasi Pola kueri
Pemindaian tabel Filter selektif, seperti klausul WHERE.
Sejumlah kecil kolom dari tabel atau tampilan terwujud yang lebih besar.
Ekspresi seperti LIKE, SUBSTR, atau TRIM.
Fungsi agregasi Hanya ekspresi seperti SUM, MIN, MAX, AVG, dan COUNT.
Di awal kueri pemindaian berkolom.
Tidak dikelompokkan atau dikelompokkan menurut kolom.
ORDER-BY Hanya jika operator berada di awal kueri pemindaian kolom.
SORT Hanya jika operator berada di awal kueri pemindaian kolom dan hanya mengurutkan kolom dasar tabel atau tampilan terwujud.
LIMIT Hanya jika operator berada di awal kueri pemindaian kolom dan berada sebelum operator SORT atau GROUP BY.
INNER HASH JOIN Hanya jika kunci yang digunakan adalah kolom dan tidak ada penentu gabungan yang digunakan.
Gabungan selektif Hanya jika gabungan berada di awal kueri pemindaian kolom.

Untuk mengetahui informasi selengkapnya tentang kueri mana yang paling cocok dengan mesin berbasis kolom, apakah mesin berbasis kolom digunakan oleh kueri, dan bagaimana cara penggunaannya, lihat Memverifikasi penggunaan mesin berbasis kolom menggunakan EXPLAIN.

Cara menggunakan mesin berbasis kolom di instance AlloyDB Omni

Untuk menggunakan mesin berbasis kolom di instance AlloyDB Omni, Anda harus melakukan langkah-langkah tingkat tinggi berikut:

  1. Aktifkan engine di instance.

    Mengaktifkan mesin adalah operasi satu kali dan memerlukan pengaktifan ulang database.

  2. Tambahkan kolom ke penyimpanan kolom.

    Untuk menambahkan kolom ke penyimpanan kolom, gunakan salah satu metode berikut:

  3. Anda dapat melacak apa yang ada di penyimpanan kolom menggunakan tampilan g_columnar_relations, dan setelah kolom ditambahkan, Anda dapat menggunakan pernyataan EXPLAIN untuk memverifikasi penggunaan mesin columnar dalam kueri SQL.

Untuk mengetahui petunjuk mendetail tentang cara menggunakan mesin berbasis kolom, lihat Mengonfigurasi mesin berbasis kolom.

Data yang dapat Anda tambahkan ke penyimpanan kolom

Ada beberapa batasan pada jenis data dan sumber data yang dapat Anda gunakan saat menambahkan kolom ke penyimpanan kolom.

Jenis data yang didukung

Mesin columnar hanya mendukung kolom dengan jenis data bawaan berikut:

  • array
  • bigint
  • boolean
  • bytea
  • char
  • date
  • decimal
  • double precision
  • enum
  • float4
  • float8
  • integer
  • json
  • jsonb
  • numeric
  • real
  • serial
  • short
  • smallint
  • text
  • timestamp
  • uuid
  • varchar

Mesin columnar mengabaikan upaya untuk menambahkan kolom secara manual dengan jenis data yang tidak didukung ke penyimpanan kolom.

Sumber data yang tidak didukung

Mesin columnar tidak mendukung tabel atau tampilan terwujud dengan atribut berikut sebagai sumber data:

  • Tabel berpartisi non-leaf

  • Tabel asing

  • Tabel atau tampilan dengan kurang dari 5.000 baris

Batasan columnar engine

  • Jika Anda menjalankan kueri analisis pada kolom yang memiliki indeks, pengoptimal AlloyDB Omni dapat memilih untuk menggunakan penyimpanan baris.
  • Kolom yang ditambahkan secara manual ke penyimpanan kolom tidak akan dihapus secara otomatis. Untuk menghapus paksa kolom yang ditambahkan secara manual, gunakan google_columnar_engine_drop di instance Anda.
  • Kolumnarisasi otomatis dapat menambahkan dan menghapus kolom secara dinamis berdasarkan penggunaan kueri.
  • Tidak semua jenis data didukung oleh mesin columnar. Untuk melihat jenis data yang didukung, lihat jenis data yang didukung.

  • Pembaruan baris yang sering kali membuat data kolom tidak valid. Untuk memvalidasi tabel atau tampilan terwujud di penyimpanan berkolom, Anda dapat mengurangi frekuensi pembaruan, atau menjadwalkan pembaruan mesin berkolom lebih sering.

    Anda dapat membandingkan kolom invalid_block_count dan total_block_count di g_columnar_relations untuk memeriksa apakah tabel atau tampilan Anda terpengaruh. Jika Anda sering atau memiliki perubahan volume tinggi pada tabel atau tampilan, invalid_block_count akan tinggi.

Langkah berikutnya