Setelah mengoptimalkan skema Spanner dan memigrasikan aplikasi, Anda dapat memindahkan data ke database Spanner kosong berukuran produksi, lalu mengalihkan aplikasi untuk menggunakan database Spanner.
Bergantung pada kasus penggunaan, Anda mungkin dapat melakukan migrasi data langsung dengan periode nonaktif minimal, atau Anda mungkin memerlukan periode nonaktif yang lama untuk melakukan migrasi data.
Jika aplikasi Anda tidak dapat menanggung banyak periode nonaktif, pertimbangkan untuk melakukan migrasi data langsung. Jika aplikasi Anda dapat menangani periode nonaktif, Anda dapat mempertimbangkan untuk bermigrasi dengan periode nonaktif.
Dalam migrasi data langsung, Anda perlu mengonfigurasi infrastruktur jaringan yang diperlukan agar data dapat mengalir di antara database sumber, database Spanner target, dan alat yang Anda gunakan untuk melakukan migrasi data. Anda harus memutuskan konektivitas jaringan pribadi atau publik, bergantung pada persyaratan kepatuhan organisasi Anda. Anda mungkin memerlukan administrator jaringan organisasi untuk menyiapkan infrastruktur.
Migrasi data langsung
Migrasi data live terdiri dari dua komponen:
- Memigrasikan data dalam snapshot database sumber yang konsisten.
- Memigrasikan aliran perubahan (penyisipan, pembaruan, dan penghapusan) sejak snapshot tersebut, yang disebut sebagai pengambilan data perubahan (CDC).
Meskipun migrasi data langsung membantu melindungi data Anda, proses ini melibatkan tantangan, termasuk hal berikut:
- Menyimpan data CDC saat snapshot dimigrasikan.
- Menulis data CDC ke Spanner sambil merekam streaming CDC yang masuk.
- Memastikan bahwa migrasi data CDC ke Spanner lebih cepat daripada aliran CDC yang masuk.
Migrasi dengan periode nonaktif
Jika database sumber Anda dapat diekspor ke CSV atau Avro, Anda dapat bermigrasi ke Spanner dengan periode nonaktif. Untuk mengetahui informasi selengkapnya, lihat Ringkasan impor dan ekspor Spanner.
Migrasi dengan periode nonaktif dapat digunakan untuk lingkungan pengujian atau aplikasi yang dapat menangani periode nonaktif selama beberapa jam. Pada database aktif, migrasi dengan periode nonaktif dapat mengakibatkan hilangnya data.
Untuk melakukan migrasi selama periode nonaktif, pertimbangkan pendekatan tingkat tinggi berikut:
- Hentikan aplikasi Anda dan buat file dump data dari database sumber.
- Upload file dump ke Cloud Storage dalam format dump MySQL, PostgreSQL, Avro, atau CSV.
- Muat file dump ke Spanner menggunakan Dataflow atau alat migrasi Spanner.
Membuat beberapa file dump kecil akan mempercepat penulisan ke Spanner, karena Spanner dapat membaca beberapa file dump secara paralel.
Saat membuat file dump dari database sumber, perhatikan hal-hal berikut untuk membuat snapshot data yang konsisten:
- Sebelum Anda melakukan dump, terapkan kunci baca pada database sumber untuk mencegah data berubah selama pembuatan file dump.
- Atau, buat file dump menggunakan replika baca dari database sumber dengan replikasi dinonaktifkan.
Panduan khusus sumber
- MySQL: Migrasi data langsung MySQL.