Membuat prediksi dengan model TensorFlow yang diimpor
Ringkasan
Halaman ini menunjukkan cara mengimpor model TensorFlow ke set data BigQuery ML dan menggunakannya untuk membuat prediksi dari kueri SQL. Anda dapat mengimpor model TensorFlow menggunakan antarmuka ini:
- Konsol Google Cloud
- Perintah
bq query
di alat command line bq - BigQuery API
Untuk informasi lebih lanjut tentang cara mengimpor model TensorFlow ke BigQuery ML, termasuk persyaratan format dan penyimpanan, lihat Pernyataan CREATE
MODEL
untuk mengimpor model TensorFlow.
Mengimpor model TensorFlow
Untuk mengimpor model TensorFlow ke set data, ikuti langkah-langkah berikut:
Konsol
Di konsol Google Cloud, buka halaman BigQuery.
Di editor kueri, masukkan pernyataan
CREATE MODEL
seperti berikut.CREATE OR REPLACE MODEL `example_dataset.imported_tf_model` OPTIONS (MODEL_TYPE='TENSORFLOW', MODEL_PATH='gs://cloud-training-demos/txtclass/export/exporter/1549825580/*')
Kueri sebelumnya mengimpor model yang terletak di
gs://cloud-training-demos/txtclass/export/exporter/1549825580/*
sebagai model BigQuery ML bernamaimported_tf_model
. URI Cloud Storage diakhiri dengan karakter pengganti (*
) sehingga BigQuery ML juga mengimpor aset apa pun yang terkait dengan model tersebut. Model yang diimpor adalah model pengklasifikasi teks TensorFlow yang memprediksi situs yang memublikasikan judul artikel tertentu.Model baru Anda kini akan muncul di panel Resource. Seiring Anda memperluas setiap set data di sebuah project, model akan dicantumkan bersama dengan resource BigQuery lainnya di set data tersebut. Model ditunjukkan dengan ikon model: .
Jika Anda memilih model baru di panel Resources, informasi tentang model akan muncul di bawah Query editor.
bq
Untuk mengimpor model TensorFlow dari Cloud Storage, jalankan kueri batch dengan memasukkan perintah seperti berikut:
bq query \
--use_legacy_sql=false \
"CREATE MODEL
`mydataset.mymodel`
OPTIONS
(MODEL_TYPE='TENSORFLOW',
MODEL_PATH='gs://bucket/path/to/saved_model/*')"
Contoh:
bq query --use_legacy_sql=false \
"CREATE OR REPLACE MODEL
`example_dataset.imported_tf_model`
OPTIONS
(MODEL_TYPE='TENSORFLOW',
MODEL_PATH='gs://cloud-training-demos/txtclass/export/exporter/1549825580/*')"
Setelah diimpor, model akan muncul dalam output bq ls [dataset_name]
:
$ bq ls example_dataset
tableId Type Labels Time Partitioning
------------------- ------- -------- -------------------
imported_tf_model MODEL
API
Masukkan tugas baru dan isi properti jobs#configuration.query sesuai isi permintaan berikut:
{
"query": "CREATE MODEL `project_id:mydataset.mymodel` OPTIONS(MODEL_TYPE='TENSORFLOW' MODEL_PATH='gs://bucket/path/to/saved_model/*')"
}
Membuat prediksi dengan model TensorFlow yang diimpor
Untuk membuat prediksi dengan model TensorFlow yang diimpor, ikuti langkah-langkah berikut. Contoh berikut mengasumsikan bahwa Anda telah mengimpor model TensorFlow seperti yang Anda lakukan pada contoh sebelumnya.
Konsol
Di konsol Google Cloud, buka halaman BigQuery.
Di editor kueri, masukkan kueri menggunakan
ML.PREDICT
seperti berikut.SELECT * FROM ML.PREDICT(MODEL
example_dataset.imported_tf_model
, ( SELECT title AS input FROMbigquery-public-data.hacker_news.full
) )Kueri sebelumnya menggunakan model bernama
imported_tf_model
dalam set dataexample_dataset
dalam project saat ini untuk membuat prediksi dari data input dalam tabel publikfull
dari set datahacker_news
dalam projectbigquery-public-data
. Dalam hal ini, fungsiserving_input_fn
model TensorFlow menentukan bahwa model mengharapkan string input tunggal bernamainput
, sehingga subkueri menetapkan aliasinput
ke kolom di pernyataanSELECT
sub kueri.Kueri ini memberikan output hasil seperti berikut. Dalam contoh ini, model menghasilkan kolom
dense_1
yang berisi array nilai probabilitas, serta kolominput
yang berisi nilai string yang sesuai dari tabel input. Setiap nilai elemen array mewakili probabilitas bahwa string input yang sesuai adalah judul artikel dari tayangan tertentu.
bq
Untuk membuat prediksi dari data input dalam tabel input_data
, masukkan perintah seperti berikut, menggunakan model TensorFlow yang diimpor my_model
:
bq query \
--use_legacy_sql=false \
'SELECT *
FROM ML.PREDICT(
MODEL `my_project.my_dataset.my_model`,
(SELECT * FROM input_data))'
Contoh:
bq query \
--use_legacy_sql=false \
'SELECT *
FROM ML.PREDICT(
MODEL `tensorflow_sample.imported_tf_model`,
(SELECT title AS input FROM `bigquery-public-data.hacker_news.full`))'
Contoh ini memberikan hasil seperti berikut:
+------------------------------------------------------------------------+----------------------------------------------------------------------------------+ | dense_1 | input | +------------------------------------------------------------------------+----------------------------------------------------------------------------------+ | ["0.6251608729362488","0.2989124357700348","0.07592673599720001"] | How Red Hat Decides Which Open Source Companies t... | | ["0.014276246540248394","0.972910463809967","0.01281337533146143"] | Ask HN: Toronto/GTA mastermind around side income for big corp. dev? | | ["0.9821603298187256","1.8601855117594823E-5","0.01782100833952427"] | Ask HN: What are good resources on strategy and decision making for your career? | | ["0.8611106276512146","0.06648492068052292","0.07240450382232666"] | Forget about promises, use harvests | +------------------------------------------------------------------------+----------------------------------------------------------------------------------+
API
Masukkan tugas baru dan isi properti jobs#configuration.query sesuai isi permintaan berikut:
{
"query": "SELECT * FROM ML.PREDICT(MODEL `my_project.my_dataset.my_model`, (SELECT * FROM input_data))"
}
Langkah selanjutnya
- Untuk informasi selengkapnya tentang cara mengimpor model TensorFlow, lihat Pernyataan
CREATE MODEL
untuk mengimpor model TensorFlow. - Untuk ringkasan BigQuery ML, lihat Pengantar BigQuery ML.
- Untuk mulai menggunakan BigQuery ML, lihat Membuat model machine learning di BigQuery ML.
- Untuk informasi selengkapnya tentang penggunaan model, lihat referensi berikut: