Asisten Suara

Asisten Suara

Apa itu Asisten Suara?

Asisten suara (juga dikenal sebagai AI suara, bot suara, atau IVR percakapan) adalah aplikasi perangkat lunak yang menggunakan kombinasi dari Pengenalan Ucapan Otomatis (ASR), Pemahaman Bahasa Alami (NLU), pengelolaan dialog, dan sintesis Teks-ke-Suara (TTS) untuk mensimulasikan interaksi suara yang mirip manusia.

Asisten suara memproses masukan lisan, menentukan maksud pengguna, mengambil informasi yang relevan, atau memicu tindakan lanjutan (panggilan API, pencarian basis data, perintah sistem), serta merespons dengan suara sintetis yang terdengar alami, semuanya dalam rentang latensi yang menjaga kelancaran percakapan (biasanya kurang dari 1–2 detik dari awal hingga akhir).

Teknologi ini telah berkembang dari sistem IVR yang kaku dan berbasis kata kunci (“Tekan 1 untuk tagihan”) menjadi agen AI percakapan yang canggih, yang mampu menangani percakapan berbalas-balasan, mengklarifikasi pertanyaan yang ambigu, mengelola konteks sepanjang percakapan, serta mengalihkan panggilan ke agen manusia dengan konteks lengkap bila diperlukan.

Cara Kerja Asisten Suara: Tumpukan Teknologi

1. Pengenalan Ucapan Otomatis (ASR)
ASR mengubah audio ucapan menjadi teks. Mesin ASR modern menggunakan jaringan saraf dalam (biasanya model berbasis transformer seperti Wav2Vec 2.0 atau Whisper) yang dilatih menggunakan jutaan jam data ucapan. Metrik kinerja utama meliputi Tingkat Kesalahan Kata (Word Error Rate/WER); sistem ASR perusahaan terbaik mampu mencapai WER di bawah 5% untuk ucapan yang jelas dalam bahasa-bahasa yang didukung.

Beberapa tantangan yang dihadapi antara lain aksen dalam berbicara, kebisingan latar belakang, kosakata khusus bidang tertentu (istilah medis, nama produk, nomor rekening), serta peralihan kode bahasa (pencampuran bahasa di tengah kalimat), yang umum terjadi di pasar multibahasa seperti India.

2. Pemahaman Bahasa Alami (NLU)
NLU memproses transkrip ASR untuk mengekstrak:

  • Tujuan: Apa yang ingin dilakukan pengguna. ‘Saya ingin mengecek saldo saya’ menjadi niat: account_balance_inquiry.
  • Entitas: Informasi tertentu. ‘Nomor rekening saya adalah 1234’ menjadi entitas: account_number = ‘1234’.
  • Sentimen: Nada emosional dari ucapan (positif, netral, frustrasi) yang digunakan untuk memicu respons eskalasi atau empati.
  • Konteks: Dalam percakapan multi-giliran, NLU melacak apa yang telah diucapkan pada giliran-giliran sebelumnya untuk menentukan makna kata ganti dan referensi.

3. Pengelolaan Dialog
Manajer dialog mengatur alur percakapan, menentukan apa yang harus dikatakan atau dilakukan oleh asisten suara selanjutnya, dengan mempertimbangkan niat saat ini, entitas yang diekstraksi, riwayat dialog, dan logika bisnis. Manajer dialog modern menggunakan kerangka kerja mesin keadaan, pengisian slot untuk pengumpulan data terstruktur, serta penalaran yang didukung oleh LLM untuk pertanyaan terbuka.

4. Integrasi Backend
Sebagian besar tindakan asisten suara melibatkan panggilan API ke sistem backend (pencarian data CRM, gateway pembayaran, sistem inventaris, basis pengetahuan, atau alat pengelolaan tiket). Kecepatan integrasi ini (waktu respons di bawah 200 ms) sangat penting untuk menjaga batas latensi percakapan.

5. Teks ke Suara (TTS)
TTS mengubah respons teks asisten menjadi ucapan yang terdengar alami. Sistem TTS berbasis jaringan saraf (Google WaveNet, Amazon Polly Neural, ElevenLabs) menghasilkan suara yang tak dapat dibedakan dari ucapan manusia untuk sebagian besar kasus penggunaan. Kloning suara memungkinkan perusahaan untuk menciptakan karakter suara yang selaras dengan merek.

Jenis-jenis Asisten Suara

  • Asisten Suara untuk Konsumen: Antarmuka suara berbasis kecerdasan buatan (AI) serbaguna yang terintegrasi dalam perangkat. Contoh: Siri, Alexa, Google Assistant, Cortana.
  • AI Suara untuk Perusahaan / Pusat Layanan Pelanggan: AI percakapan yang dirancang khusus untuk bidang tertentu dan terintegrasi dengan sistem telepon, untuk layanan pelanggan. Contoh: Exotel VoiceAI, Nuance, Google CCAI, Amazon Connect AI.
  • IVR Berbasis Percakapan: Menggantikan IVR berbasis tombol tekan dengan masukan bahasa alami, namun tetap mengikuti alur yang terstruktur. Contoh: sebagian besar platform pusat kontak berbasis cloud.
  • Chatbot Berbasis Suara: Model percakapan chatbot yang disajikan melalui saluran suara, bukan teks. Contoh: WhatsApp Voice, bot klik-untuk-telepon di web.
  • Asisten Suara dalam Aplikasi: Terintegrasi dalam aplikasi seluler untuk navigasi tanpa menggunakan tangan atau penanganan permintaan. Contoh: aplikasi perbankan, aplikasi pengiriman makanan.

Asisten Suara vs IVR Konvensional

  • Metode Masukan: IVR tradisional menggunakan penekanan tombol DTMF (Tekan 1, Tekan 2); sedangkan asisten suara menggunakan ucapan alami (‘Saya ingin mengubah alamat saya’).
  • Kedalaman Menu: IVR tradisional menggunakan struktur pohon tetap dengan kedalaman hingga 5–6 tingkat; sedangkan asisten suara tidak memiliki menu dan mengandalkan navigasi berbasis niat.
  • Fleksibilitas: IVR tradisional bersifat kaku dan mengharuskan penelepon untuk mengikuti alur yang telah ditentukan; sedangkan asisten suara mampu menangani pertanyaan tak terduga, pengubahan kalimat, dan koreksi.
  • Personalisasi: IVR tradisional hanya menawarkan sedikit personalisasi berdasarkan DNIS/CLI; sedangkan asisten suara menawarkan integrasi CRM penuh yang dipersonalisasi berdasarkan riwayat.
  • Tarif Layanan Mandiri: IVR tradisional mampu menangani 20–40% panggilan secara mandiri; asisten suara dapat menangani 50–80% panggilan dengan model NLU yang terlatih dengan baik.
  • Kepuasan Penelepon: IVR tradisional sering kali membuat frustrasi dan dikaitkan dengan ‘neraka IVR’; asisten suara dapat menghasilkan skor kepuasan pelanggan (CSAT) yang lebih tinggi jika dirancang dengan baik.
  • Biaya Pembangunan: IVR tradisional berbiaya rendah dan tersedia di sebagian besar platform; sedangkan asisten suara berbiaya lebih tinggi serta memerlukan pelatihan NLU dan perancangan dialog.

Contoh Penggunaan Asisten Suara dalam Dunia Bisnis

Otomatisasi Layanan Pelanggan
Asisten suara menangani pertanyaan Tingkat 1 secara mandiri, termasuk pengecekan saldo, status pesanan, penjadwalan janji temu, pengaturan ulang kata sandi, dan jawaban atas pertanyaan umum. Tolok ukur industri menunjukkan bahwa sistem AI suara yang dirancang dengan baik mampu menyelesaikan 60–80% pertanyaan tanpa perlu diteruskan ke petugas manusia.

Pemberitahuan & Pengingat Keluar
Panggilan keluar yang diinisiasi oleh AI memberi tahu pelanggan mengenai pengingat janji temu, tanggal jatuh tempo pembayaran, pengiriman OTP, atau status pengiriman. Asisten suara menyampaikan pesan tersebut dan menangani tanggapan umum (konfirmasi/penjadwalan ulang) tanpa keterlibatan agen manusia.

Penagihan & Pemulihan Hutang
AI suara berbasis percakapan menghubungi pelanggan terkait pembayaran yang telah jatuh tempo, menegosiasikan rencana pembayaran, dan mencatat komitmen pembayaran, sambil tetap mematuhi pedoman TRAI mengenai jam panggilan dan daftar DND.

Penilaian Prospek
Saluran penjualan inbound menggunakan kecerdasan buatan (AI) berbasis suara untuk mengajukan pertanyaan penyaringan, mencatat detail prospek, menilai prospek, dan meneruskan peluang yang memenuhi syarat kepada perwakilan penjualan yang tepat, sehingga mengurangi beban agen manusia dalam menangani pertanyaan dengan tingkat minat yang rendah.

BFSI: KYC & Verifikasi
Asisten suara di sektor perbankan menangani verifikasi identitas melalui biometrik suara atau otentikasi berbasis pengetahuan (KBA), sehingga mengurangi hambatan dalam proses pembukaan rekening, pelayanan pinjaman, dan pendaftaran keluhan.

Layanan Kesehatan: Penjadwalan Janji Temu & Penyaringan Gejala
AI suara di bidang layanan kesehatan menangani pemesanan janji temu, penjadwalan ulang, permintaan perpanjangan resep, dan penyaringan gejala dasar, serta hanya meneruskan kasus-kasus yang kompleks atau berisiko tinggi kepada staf klinis.

Metrik Kinerja Utama untuk Asisten Suara

  • Tingkat Pengendalian: Persentase panggilan yang sepenuhnya ditangani oleh AI suara tanpa perlu diteruskan ke petugas manusia. Target: 60–80% untuk sistem yang terlatih dengan baik.
  • Akurasi Pengenalan Niat: Persentase ucapan yang maksudnya teridentifikasi dengan benar. Target: lebih dari 90%.
  • Tingkat Kesalahan Kata (WER): Persentase kata yang salah ditranskripsikan oleh ASR. Target: di bawah 5% untuk bahasa utama.
  • Tingkat Penyelesaian Tugas: Persentase sesi di mana tujuan penelepon tercapai. Hal ini berbeda dengan “containment”, karena sebuah panggilan bisa saja terkelola namun tugasnya belum selesai.
  • Tingkat Eskalasi: Persentase panggilan yang diteruskan ke petugas layanan pelanggan. Tingkat eskalasi yang rendah memang diinginkan, tetapi tidak jika hal itu berarti penanganan yang dipaksakan.
  • Waktu Penanganan Rata-rata (AI AHT): Waktu dari awal panggilan hingga penyelesaian oleh AI. Biasanya 40–60% lebih singkat daripada AHT yang ditangani manusia untuk pertanyaan yang setara.
  • CSAT untuk Sesi AI: Peringkat kepuasan pasca-panggilan untuk panggilan yang ditangani oleh AI. Seiring dengan semakin matangnya model-model tersebut, peringkat ini seharusnya mendekati tingkat kepuasan pelanggan (CSAT) yang dicapai oleh petugas layanan pelanggan manusia.
  • Latensi / Waktu Respons: Waktu antara akhir ucapan penelepon dan awal respons AI. Target: kurang dari 1,5 detik untuk percakapan yang alami.

Manfaat Utama Asisten Suara bagi Bisnis

  • Tersedia 24/7 Tanpa Biaya Agen: AI Suara menangani pertanyaan pelanggan pada pukul 02.00 dini hari di hari libur nasional dengan kualitas yang sama seperti pada jam-jam sibuk, sehingga menghilangkan biaya dan kerumitan operasional yang timbul akibat penempatan staf pada shift malam atau pengelolaan kapasitas tambahan.
  • Pengurangan Biaya yang Signifikan: Sistem AI suara yang diterapkan dengan baik dan mampu menangani 60–70% volume panggilan masuk secara mandiri dapat mengurangi biaya operasional pusat layanan pelanggan sebesar 30–50%. Biaya per interaksi yang ditangani oleh AI biasanya 5–10 kali lebih rendah daripada biaya panggilan yang ditangani oleh manusia.
  • Tanggapan yang Konsisten dan Bebas Kesalahan: Berbeda dengan petugas manusia yang mungkin menyimpang dari skrip, lupa menyampaikan informasi penting, atau memberikan informasi yang tidak konsisten saat kelelahan, AI suara selalu memberikan respons yang telah disesuaikan dengan tepat setiap saat, yang sangat penting bagi industri yang diatur secara ketat seperti perbankan dan asuransi.
  • Skalabilitas Instan: Sistem AI berbasis suara mampu menangani 10 panggilan secara bersamaan atau bahkan 10.000 panggilan tanpa perlu mengubah infrastruktur maupun melalui proses perekrutan. Hal ini sangat transformatif bagi bisnis yang mengalami lonjakan volume panggilan musiman atau yang dipicu oleh acara tertentu.
  • Penurunan Waktu Penanganan Rata-rata: Interaksi yang ditangani oleh AI biasanya 40–60% lebih singkat dibandingkan interaksi serupa yang ditangani oleh manusia untuk pertanyaan terstruktur seperti saldo rekening, status pesanan, dan penjadwalan janji temu, karena AI tidak melakukan obrolan ringan, tidak perlu menavigasi menu yang membingungkan, atau menempatkan penelepon dalam antrean untuk mencari informasi.
  • Tanpa Waktu Tunggu untuk Panggilan Layanan Mandiri: Penelepon yang masalahnya diselesaikan oleh AI suara tidak mengalami waktu antrian sama sekali; panggilan mereka langsung dijawab dan masalahnya diselesaikan dalam sesi AI tersebut. Inilah faktor tunggal terbesar yang mendorong peningkatan CSAT dalam penerapan AI suara.
  • Peningkatan Berkelanjutan Melalui Data: Setiap sesi AI suara menghasilkan data terstruktur (intensi, entitas, tingkat fallback, dan hasil penangkapan) yang menjadi masukan bagi siklus pelatihan ulang model, sehingga sistem menjadi semakin akurat tanpa campur tangan manusia.
  • Eskalasi ke Pihak Manusia yang Lancar dan Dilengkapi Konteks: Ketika AI suara meneruskan panggilan ke agen manusia, agen tersebut menerima ringkasan terstruktur dari percakapan dengan AI (tujuan, entitas yang teridentifikasi, dan tindakan yang diambil), sehingga menghilangkan pengalaman pelanggan yang paling menjengkelkan: harus mengulangi penjelasan setelah menunggu dalam antrean.

AI Suara & Model Bahasa Besar (LLMs)

Integrasi LLM (GPT-4, Claude, Gemini) ke dalam arsitektur asisten suara sedang mengubah batas-batas kemungkinan:

  • Respons Generatif: Alih-alih memilih dari templat respons yang sudah disiapkan sebelumnya, AI suara yang didukung LLM menghasilkan jawaban yang sesuai dengan konteks untuk pertanyaan terbuka.
  • Persyaratan Data Pelatihan yang Lebih Sedikit: LLM melakukan generalisasi berdasarkan pelatihan awal; penyempurnaan model untuk domain tertentu membutuhkan data berlabel yang jauh lebih sedikit dibandingkan dengan pelatihan model NLU tradisional.
  • Alur Percakapan Dinamis: LLM mampu menangani alur percakapan yang tak terduga tanpa berakhir pada jalan buntu berupa pesan ‘Maaf, saya tidak mengerti’.
  • Ringkasan untuk Serah Terima Agen: Saat diteruskan ke petugas layanan pelanggan, LLM menghasilkan ringkasan singkat dari percakapan AI tersebut, sehingga pelanggan tidak perlu mengulangi penjelasannya.

Namun, AI suara berbasis LLM menghadirkan tantangan baru: risiko halusinasi (menghasilkan informasi yang salah), latensi (proses inferensi LLM menambah waktu 200–800 ms), dan biaya saat diterapkan dalam skala besar. Arsitektur hibrida (alur terstruktur untuk intensi berfrekuensi tinggi, LLM untuk pertanyaan terbuka) saat ini menjadi praktik terbaik di kalangan perusahaan.

Pertimbangan Regulasi untuk AI Suara

  • Persyaratan Pengungkapan: Peraturan di berbagai yurisdiksi (Undang-Undang AI Uni Eropa, rancangan pedoman TRAI) mewajibkan adanya pengungkapan apabila penelepon berinteraksi dengan sistem AI, bukan dengan manusia.
  • Persetujuan Perekaman Panggilan: Rekaman panggilan yang dihasilkan oleh AI tunduk pada kewajiban persetujuan yang sama seperti rekaman panggilan yang dilakukan oleh agen manusia.
  • Penyimpanan Data: Data suara yang diproses oleh ASR mungkin mengandung PII. Kewajiban penyimpanan dan penghapusan berdasarkan GDPR dan Undang-Undang DPDP India berlaku.
  • Bias & Keadilan: Sistem ASR dapat memiliki tingkat kesalahan yang lebih tinggi pada aksen atau kelompok demografis tertentu. Dalam penerapan di tingkat perusahaan, perlu dilakukan audit terhadap WER di seluruh segmen populasi.

Kemampuan AI Suara Exotel

Exotel menawarkan agen suara berbasis AI yang dapat diterapkan di seluruh dunia.

  • ASR Multibahasa: Dukungan untuk lebih dari 10 bahasa India dengan kosakata khusus untuk adaptasi domain di berbagai sektor, seperti perbankan, asuransi, e-commerce, dan layanan kesehatan.
  • IVR Berbasis Percakapan: Gantilah sistem IVR berbasis tombol dengan alur bahasa alami, sehingga pengalaman penelepon dan tingkat penggunaan layanan mandiri meningkat secara signifikan.
  • Agen AI Suara untuk Layanan Keluar: Agen AI yang sepenuhnya otonom untuk kampanye pemberitahuan keluar, penagihan, dan penjadwalan janji temu, yang menangani percakapan dari awal hingga akhir dalam skala besar.
  • Bantuan Agen Langsung: ASR dan NLU secara real-time selama panggilan dengan agen manusia, menampilkan artikel basis pengetahuan yang relevan, petunjuk kepatuhan, dan saran tindakan terbaik berikutnya.
  • Eskalasi yang Lancar: Eskalasi cerdas ke agen manusia dengan ringkasan percakapan lengkap dan konteks CRM, sehingga memastikan pelanggan tidak perlu mengulangi penjelasannya.
  • Analisis & Peningkatan Berkelanjutan: Setiap sesi AI suara dianalisis untuk menilai akurasi niat, cakupan, dan CSAT, yang menjadi dasar siklus pelatihan ulang model.

Keep exploring

key-9

Elevate Customer Experiences with GenAI powered Voice Bot

Transform customer engagement with our AI Voice Assistant. More than a bot, it’s your conversational partner, fluent in Hindi, English, and Hinglish. Available 24/7, it learns continuously for meaningful, personalised interactions.

key-10

Hub of advanced AI technologies for modern conversational AI.

Utilizing Gen AI and Natural Language Processing (NLP) capabilities, the House of AI transforms customer conversations into engaging, human-like experiences. It goes deep into understanding context, sentiment, and intent, enabling dynamic, personalized responses that boost engagement and loyalty.

key-11

Enabling conversations with documents and knowledge bases to enhance productivity.

At Exotel, we understand the frustration of support engineers, service managers, IT personnel, sales representatives and customers when placed on hold. ExoInsights provides users with just the right and relevant answer, tailored to their specific queries. It simplifies access to accurate information, making the decision-making process more efficient and user-friendly.

key-12

AI-powered Conversation Quality Analysis tool

Automate cross-channel conversation quality analysis against your SOPs and KPIs to maintain top-tier service quality and agent efficiency, effortlessly.