Streaming yang diperluas

Anda dapat menggunakan fitur streaming yang diperluas untuk melakukan streaming konten audio ke Dialogflow dan melakukan streaming saran agen manusia kembali.

Biasanya, Anda menutup setengah atau memberi tahu Dialogflow API kapan harus mengakhiri streaming untuk membuat transkrip akhir dan saran Agent Assist. Hal ini terjadi pada giliran percakapan, saat API menerima parameter is_final=true dari hasil pengenalan, StreamingAnalyzeContentResponse.recognition_result.

Streaming yang diperpanjang mengurangi kebutuhan untuk menutup setengah pada giliran percakapan. Tindakan ini akan memperpanjang waktu tunggu koneksi hingga tiga menit, selama waktu tersebut Anda dapat mengirim streaming audio tanpa menutup setengah. Dialogflow API secara otomatis mengirimkan transkrip akhir dan saran Agent Assist kembali ke streaming. Anda hanya memulai ulang streaming jika waktu tunggunya habis.

Dasar-dasar streaming

Fitur streaming yang diperluas Agent Assist mirip dengan streaming audio untuk Transkripsi CCAI. Sistem Anda mengalirkan data audio ke API, dan Dialogflow akan memutar kembali data StreamingAnalyzeContentResponse. Data yang ditampilkan mencakup saran untuk agen manusia Anda.

Untuk menggunakan Streaming yang Diperluas, panggil metode streamingAnalyzeContent.

Streaming yang Diperluas hanya mendukung tahap Bantuan Agen. Lihat tahap percakapan. Untuk menggunakan fitur ini:

  1. Panggil metode streamingAnalyzeContent dan tetapkan kolom berikut:
    • StreamingAnalyzeContentRequest.audio_config.audio_encoding: AUDIO_ENCODING_LINEAR_16 atau AUDIO_ENCODING_MULAW
    • enable_extended_streaming: true.
  2. Permintaan streamingAnalyzeContent pertama menyiapkan streaming dan menetapkan konfigurasi audio Anda.
  3. Dalam permintaan berikutnya, Anda mengirim byte audio ke streaming.
  4. Selama Anda terus mengirim audio, Anda akan terus menerima saran. Anda tidak perlu menutup streaming secara manual. Dialog akan otomatis ditutup setelah Agent Assist mendeteksi bahwa ucapan telah berhenti.
  5. Mulai ulang streaming (yang mencakup pengiriman ulang konfigurasi audio awal) dalam kasus berikut:
    • Streaming rusak (streaming berhenti saat tidak seharusnya).
    • Data audio Anda mendekati waktu tunggu otomatis 3 menit.
    • Anda menerima error yang dapat dicoba ulang. Anda dapat mencoba kembali hingga tiga kali.