Pengesanan Niat Pelanggan: Bagaimana AI Memahami Mengapa Pelanggan Menghubungi Anda

Apakah pengesanan niat pelanggan, digambarkan melalui kanta yang mendedahkan matlamat pelanggan

Turn this article into takeaways for your work.

Each assistant summarizes the article only for you and suggests best practices for your work.

Pengesanan niat pelanggan ialah pengelasan automatik mesej pelanggan kepada sebab mereka menghubungi anda, seperti "di mana pesanan saya", "batalkan langganan saya" atau "saya dicaj dua kali". Outputnya ialah satu label, biasanya dengan skor keyakinan, yang dilampirkan pada sembang, e-mel, tiket atau transkrip panggilan sebelum manusia membacanya.

Label itu kecil, tetapi banyak perkara bergantung padanya. Ia menentukan baris gilir mana yang menerima tiket, sama ada bot patut menjawab atau menyerahkan, dan apa yang dikatakan laporan bulanan anda tentang perkara yang sebenarnya ditanya oleh pelanggan. Lapisan niat yang lemah menghantar soalan pengebilan kepada sokongan teknikal dan menyembunyikan pemacu hubungan teratas anda di dalam baldi bernama "Umum". Lapisan yang baik memberi anda penghalaan yang berfungsi pada hari pertama dan peta permintaan yang boleh anda jadikan asas perancangan.

Panduan ini membincangkan cara pengesanan berfungsi, cara membina senarai niat (taksonomi) yang menjadi tempat bergantung segalanya, dan cara menggunakan label tersebut. Jika anda mahu melihat gambaran yang lebih luas dahulu, gambaran keseluruhan AI dalam perkhidmatan pelanggan ialah teman yang baik.

Fakta Utama

  • Dialogflow CX menilai setiap niat calon daripada 0.0 (sama sekali tidak pasti) hingga 1.0 (sama sekali pasti), hanya memulangkan niat teratas jika ia melepasi ambang pengelasan, dan jika tidak mencetuskan peristiwa tiada padanan (Google Cloud).
  • Google mengesyorkan sekurang-kurangnya 10-20 frasa latihan bagi setiap niat dalam Dialogflow CX, bergantung pada betapa rumitnya niat itu (Google Cloud).
  • Amazon Lex V2 memulangkan niat yang paling berkemungkinan ditambah sehingga 4 alternatif, dan beralih kepada AMAZON.FallbackIntent apabila setiap skor berada di bawah ambang anda (AWS).
  • Contoh kekaburan daripada Lex sendiri: skor 0.75 dan 0.72 bermakna dua niat terlalu hampir untuk diputuskan, manakala 0.95 berbanding 0.65 bermakna yang pertama mungkin betul (AWS).
  • Penanda aras CLINC150 meliputi 150 niat merentasi 10 domain, dan pengarangnya mendapati bahawa pengelas berprestasi baik pada niat dalam skop tetapi bergelut mengenal pasti pertanyaan luar skop (Larson et al., arXiv).
  • Zendesk memaparkan keyakinan Tinggi, Sederhana atau Rendah pada ramalan topik dan bahasa bagi sesuatu tiket, dan menyatakan bahawa pembetulan oleh ejen tidak melatih model (Zendesk).

Apakah Niat Sebenarnya

Niat ialah matlamat di sebalik mesej, bukan perkataannya. "Bungkusan saya tidak pernah sampai", "Mana barang saya?" dan "Penjejakan kata sudah dihantar tetapi saya tak terima apa-apa" ialah tiga rentetan berbeza dan satu niat: status pesanan atau masalah penghantaran.

Dua perkara sering dikelirukan dengannya:

  • Topik atau kategori. "Pengebilan" ialah topik. "Minta bayaran balik untuk caj pendua" ialah niat. Topik sesuai untuk pelaporan sepintas lalu; niat cukup spesifik untuk ditindaki.
  • Sentimen. Sama ada pelanggan marah adalah berasingan daripada sebab mereka menulis. Anda akan mahukan kedua-duanya, tetapi ia medan yang berbeza. Pelanggan yang berang bertanya tentang penghantaran tetap niat penghantaran.

Banyak platform mengesan beberapa isyarat sekali gus. Triaj pintar Zendesk, sebagai contoh, mengelaskan tiket mengikut topik, sentimen, bahasa dan entiti, dan dokumentasinya menyatakan bahawa menggunakan medan itu dalam aliran kerja memerlukan tambahan Copilot (Zendesk). Pusat bantuan Zendesk kini menyebut "topik" di tempat persediaan lama menyebut "niat".

Cara Pengesanan Niat Berfungsi

Terdapat dua pendekatan umum, dan kebanyakan sistem sebenar menggunakan gabungan.

Pengelas berbanding LLM: apa bezanya, digambarkan melalui pengasing terlatih dengan contoh dan pembaca takrifan

Pengelas terlatih

Anda mentakrifkan niat, memberi setiap satu frasa contoh, dan platform melatih model untuk memadankan mesej baharu dengannya. Dialogflow CX dan Amazon Lex berfungsi begini. Model menilai setiap niat dan memilih yang tertinggi.

Kekuatan: ia pantas, murah bagi setiap mesej, boleh diramal, dan memulangkan skor yang boleh anda letakkan ambang. Kelemahan: ia hanya tahu niat yang anda ajar. Mesej tentang sesuatu yang baharu dipaksa masuk ke label terdekat, atau gagal dipadankan langsung. Panduan Google ialah bermula dengan sekurang-kurangnya 10-20 frasa latihan bagi setiap niat, dan ia memberi amaran bahawa memenuhkan niat negatif lalai dengan bilangan frasa yang besar (ia memetik 10,000 sebagai contoh) akan menjejaskan pemadanan biasa (Google Cloud).

Pengelasan berasaskan LLM

Di sini anda memberi model bahasa besar senarai niat dengan takrifan ringkas dan memintanya memilih satu (atau "tiada"). Tiada set latihan untuk dibina, jadi niat baharu boleh aktif sebaik sahaja anda menulis takrifannya. Platform NLU klasik bergerak ke arah yang sama, menambah lapisan LLM di atas model niat terlatih mereka.

Kekuatan: mengendalikan mesej berselirat dan berbilang ayat, bahasa bercampur dan perkataan yang benar-benar baharu. Kelemahan: ia lebih mahal bagi setiap mesej, lebih perlahan, boleh hanyut apabila gesaan atau model berubah, dan mungkin mereka-reka label melainkan anda menghadkannya kepada senarai anda. Tentukur keyakinan yang dinyatakannya berbanding sampel berlabel tangan dan jangan terus mempercayainya.

Pengelas terlatih Berasaskan LLM
Usaha persediaan Frasa contoh bagi setiap niat Takrifan bertulis bagi setiap niat
Mengendalikan perkataan baharu Hanya jika serupa dengan frasa latihan Biasanya dengan baik
Tempoh siap niat baharu Kumpulkan contoh, latih semula Sunting takrifan
Skor keyakinan Terbina dalam Perlu ditentukur
Konsistensi dari masa ke masa Tinggi sehingga dilatih semula Boleh beralih apabila model atau gesaan berubah
Paling sesuai untuk Niat berisi padu tinggi dan stabil Ekor panjang, input berselirat atau berbilang bahasa

Persediaan yang lazim: pengelas mengendalikan 15 hingga 20 niat teratas yang membentuk kebanyakan isi padu, dan LLM mengambil apa yang ditolak oleh pengelas. Jika hubungan anda tiba dalam beberapa bahasa, baca catatan tentang sokongan berbilang bahasa sebelum memilih, kerana data latihan bagi setiap bahasa bertambah dengan pantas.

Ambang Keyakinan dan Sandaran

Setiap pendekatan memerlukan peraturan untuk "saya tidak pasti". Ia mempunyai tiga bahagian.

Keyakinan niat dan sandaran, digambarkan melalui ruang menunggu bagi ketidakpastian

Ambang. Dialogflow dan Lex membolehkan anda menetapkan skor minimum. Dalam Dialogflow CX, niat teratas dipulangkan hanya jika ia memenuhi ambang pengelasan yang ditetapkan dalam tetapan ejen; jika tidak, peristiwa tiada padanan dicetuskan (Google Cloud). Dalam Lex V2, ambang ialah nombor antara 0.00 dan 1.00, ditetapkan bagi setiap bahasa, dan setiap skor di bawahnya menghasilkan niat sandaran (AWS). Lex juga memberi amaran bahawa skornya ialah nilai perbandingan, bukan mutlak, dan mungkin berubah apabila perkhidmatan bertambah baik. Jadi jangan salin 0.7 orang lain; uji milik anda sendiri.

Margin. Jurang antara dua skor teratas sama pentingnya dengan skor teratas. Dokumentasi Lex memberi contoh 0.75 berbanding 0.72 sebagai kekaburan sebenar. Corak yang baik: jika skor teratas di bawah ambang anda, atau dua yang teratas berada dalam margin kecil, jangan meneka. Tanya soalan penjelasan ("Adakah ini tentang bayaran balik atau pembatalan?") atau halakan kepada seseorang.

Laluan sandaran. Tentukan lebih awal apa yang berlaku apabila tersasar. Pilihan, daripada yang paling sedikit usaha pelanggan hingga yang paling banyak:

  1. Hantar mesej ke baris gilir umum dengan dua tekaan teratas dilampirkan, supaya ejen bermula dengan petunjuk.
  2. Tanya satu soalan penjelasan dengan dua atau tiga butang.
  3. Serahkan kepada manusia bersama perbualan setakat ini.

Kajian menyokong mengapa ini penting. Set data CLINC150 dibina untuk menyertakan pertanyaan luar skop justeru kerana pengelas yang kelihatan baik pada niat yang diketahui bergelut apabila seseorang bertanya sesuatu di luar senarai (Larson et al., arXiv). Trafik sebenar anda kebanyakannya ialah kes itu yang menunggu untuk berlaku.

Tetapkan ambang mengikut kegunaan. Keputusan penghalaan (baris gilir mana) boleh bertoleransi dengan ambang yang lebih rendah, kerana tekaan salah hanya menelan satu penugasan semula. Tindakan automatik, seperti membatalkan akaun atau mengeluarkan bayaran balik, memerlukan ambang yang jauh lebih tinggi, atau langkah pengesahan. Untuk soalan yang lebih sukar tentang tugas mana yang hendak diserahkan kepada AI sama sekali, lihat automasi atau bantuan.

Membina Taksonomi Niat

Taksonomi ialah senarai niat, dan ia lebih penting daripada model. Model yang hebat pada senarai yang keruh memberi anda label tepat yang tiada siapa boleh gunakan.

Bina taksonomi niat yang boleh ditindaki, digambarkan melalui kabinet pengasingan matlamat dengan dulang tidak diketahui

Mulakan daripada data, bukan carta organisasi

Tarik beberapa ratus tiket atau sembang terkini dan bacalah. Kumpulkan mengikut apa yang pelanggan mahukan, bukan mengikut pasukan mana yang kini mengendalikannya. Jika data nipis atau tidak konsisten, baiki itu dahulu: menyediakan data sokongan untuk AI membincangkan pembersihannya.

Pilih ketelitian yang betul

Terlalu kasar dan label tidak dapat memacu tindakan ("Pengebilan" merangkumi invois, bayaran balik, pembayaran gagal dan soalan cukai, yang memerlukan orang berbeza). Terlalu halus dan model tidak dapat membezakan label, ejen tidak dapat mengingatinya, dan laporan berpecah kepada 200 baris dengan 3 tiket setiap satu.

Ujian yang boleh digunakan: adakah niat ini mengubah apa yang kita lakukan seterusnya? Jika dua niat calon mendapat jawapan yang sama, dihalakan kepada pasukan yang sama dan dilaporkan sebagai satu nombor, gabungkan. Jika ia akan mendapat pengendalian yang berbeza, pisahkan.

Struktur dua peringkat biasanya berkesan: segelintir kategori induk untuk pelaporan eksekutif dan kira-kira 20 hingga 60 niat anak untuk penghalaan dan automasi. Julat itu ialah panduan kasar, bukan piawaian; biarkan isi padu anda yang menentukan. Anda tidak dapat bertindak ke atas ekor panjang niat yang muncul dua kali sebulan.

Namakan niat sebagai matlamat pelanggan

Gunakan corak konsisten yang bermula dengan kata kerja: request_refund, change_billing_address, report_login_problem. Elakkan nama yang menggambarkan proses dalaman anda ("tier2_escalation") atau yang kabur ("other_issue"). Tulis satu baris takrifan dan dua atau tiga mesej contoh bagi setiap satu, termasuk kes sempadan ("Jika pelanggan menyebut caj pendua, gunakan report_billing_error, bukan request_refund").

Sentiasa sertakan baldi "lain-lain", dan awasi ia

Niat "lain-lain" atau "tidak diketahui" bukan kegagalan; ia penderia perubahan anda. Ciri produk baharu, perubahan harga atau gangguan semuanya muncul di situ dahulu. Dua peraturan memastikan ia berguna:

  • Hadkannya. Jika "lain-lain" melebihi kira-kira 10 peratus isi padu, taksonomi anda sudah lapuk. Angka itu ialah sasaran kerja, bukan penanda aras industri.
  • Ambil sampelnya. Baca 50 hingga 100 hubungan "lain-lain" sebulan, dan naikkan sebarang corak yang berulang kepada niat sebenar.

Dialogflow mempunyai versi terbina dalam bagi gelung ini: cadangan niatnya menganalisis kejadian tiada padanan dan mengesyorkan niat atau frasa latihan baharu, walaupun ciri itu terhad kepada rantau tertentu dan mesti didayakan dalam tetapan ejen (Google Cloud).

Tetapkan kadar semakan

Semak taksonomi setiap bulan pada mulanya, kemudian setiap suku tahun apabila ia mantap, dan sentiasa selepas pelancaran produk atau perubahan harga. Hentikan niat yang senyap, pecahkan yang luas, dan simpan log perubahan supaya penurunan dalam "permintaan bayaran balik" bukan sekadar label yang dinamakan semula.

Kategori induk Contoh niat anak Pengendalian lazim
Pesanan dan penghantaran track_order, report_missing_package, change_delivery_address Carian bot, kemudian baris gilir logistik
Pengebilan request_refund, report_billing_error, update_payment_method Baris gilir pengebilan, bayaran balik memerlukan kelulusan
Akses akaun reset_password, report_login_problem, delete_account Bot untuk tetapan semula, pasukan keselamatan untuk pemadaman
Bantuan produk how_to_use_feature, report_bug, request_feature Pusat bantuan, sokongan, atau maklum balas produk
Pembatalan dan pengekalan cancel_subscription, downgrade_plan Pakar pengekalan, tidak pernah bot sahaja
Lain-lain unknown, out_of_scope Baris gilir umum, disemak setiap bulan

Menggunakan Niat untuk Penghalaan dan Pelaporan

Penghalaan

Niat menjadi berguna apabila ia memacu peraturan. Yang lazim:

Gunakan label niat dua kali, digambarkan melalui hubungan bertanda yang mengalir ke baris gilir dan buku kiraan

  • Penghalaan berasaskan kemahiran. Niat pengebilan pergi ke pasukan pengebilan, niat teknikal ke pasukan teknikal, dengan bahasa sebagai penapis kedua.
  • Bot atau manusia. Niat berisiko rendah dan jelas takrifannya seperti penjejakan pesanan pergi kepada automasi. Yang sensitif, seperti pembatalan, ancaman undang-undang atau keselamatan, sentiasa pergi kepada seseorang.
  • Keutamaan. Gabungkan niat dengan sentimen dan peringkat pelanggan. Permintaan "batalkan langganan" daripada akaun bernilai tinggi dengan sentimen negatif memintas baris gilir.
  • Bantuan yang diisi awal untuk ejen. Paparkan niat yang dikesan dan artikel atau makro (balasan tersimpan) yang dicadangkan dalam pandangan ejen. Ini berpasangan secara semula jadi dengan AI agent assist.

Kekalkan manusia dalam proses untuk pembetulan. Zendesk membolehkan ejen menukar topik yang diramal dalam panel sifat tiket, tetapi menyatakan bahawa berbuat demikian tidak melatih model (Zendesk). Itu bermakna pembetulan perlu ditangkap di tempat yang boleh anda gunakan, seperti medan yang anda eksport untuk pelabelan semula, atau kesilapan yang sama akan berulang.

Pelaporan

Apabila setiap hubungan mempunyai niat, anda boleh menjawab soalan yang dahulu memerlukan audit manual:

  • Apakah sepuluh sebab teratas pelanggan menghubungi kami, dan bagaimana arah aliran mereka?
  • Niat mana yang mempunyai penyelesaian terendah dan hubungan berulang terbanyak? Gandingkan niat dengan ukuran dalam kadar penyelesaian AI untuk melihat di mana automasi benar-benar berkesan.
  • Niat mana yang boleh dijawab oleh pusat bantuan yang lebih baik? Lihat carian pusat bantuan AI.

Kiraan niat juga ialah input semula jadi untuk ramalan isi padu sokongan AI: meramal mengikut sebab hubungan lebih berguna daripada satu baris jumlah, kerana "tetapan semula kata laluan" dan "pertikaian pengebilan" bertindak balas kepada pemacu yang berbeza dan memerlukan perancangan tenaga kerja yang berbeza.

Contoh mengikut Fungsi

Sokongan pelanggan. Syarikat perisian melabel setiap tiket masuk. "Bagaimana saya mengeksport laporan" pergi ke balasan pusat bantuan; "Eksport rosak" pergi ke sokongan teknikal dengan bendera pepijat. Perkataan yang sama, niat berbeza, baris gilir berbeza.

Kewangan dan pengebilan. Perniagaan langganan memisahkan report_billing_error daripada request_refund. Yang pertama pergi ke baris gilir yang boleh menyiasat; yang kedua memerlukan peraturan kelulusan.

Meja bantuan IT. Meja perkhidmatan dalaman mengesan request_access, report_outage dan reset_password. Tetapan semula kata laluan pergi ke layan diri, gangguan memanggil jurutera bertugas, dan permintaan akses mencetuskan aliran kelulusan.

Peti masuk jualan. Peti masuk kongsi mengasingkan request_pricing, request_demo dan support_question_from_customer. Mengalihkan yang ketiga keluar daripada baris gilir jualan melindungi masa respons untuk lead sebenar.

Pelaksanaan Langkah demi Langkah

  1. Kumpul dan baca sampel. 300 hingga 500 hubungan terkini merentasi semua saluran. Catat sebab sebenar, dalam kata-kata pelanggan.
  2. Draf taksonomi. Induk dahulu, kemudian anak, menggunakan nama yang bermula dengan kata kerja. Tambah takrifan, contoh dan baldi "lain-lain".
  3. Labelkan set ujian dengan tangan. Minta dua orang melabel 200 hingga 300 mesej secara bebas. Di mana mereka tidak bersetuju, takrifan tidak jelas; baiki sebelum menyentuh model.
  4. Pilih kaedah. Pengelas terlatih untuk niat stabil berisi padu tinggi; LLM untuk ekor panjang atau berbilang bahasa; gabungan jika anda memerlukan kedua-duanya.
  5. Tetapkan ambang dan sandaran. Mulakan dengan konservatif untuk tindakan automatik, lebih longgar untuk penghalaan. Tentukan laluan sandaran sebelum pelancaran.
  6. Jalankan dalam mod bayangan. Ramal niat dan paparkannya kepada ejen, tetapi jangan menghalakan berdasarkannya lagi. Bandingkan ramalan dengan apa yang sebenarnya dilakukan oleh ejen.
  7. Hidupkan penghalaan bagi niat yang berprestasi. Ketepatan bagi setiap niat berbeza; hidupkan yang kukuh dahulu.
  8. Tutup gelung. Tangkap pembetulan ejen, ambil sampel "lain-lain" setiap bulan, dan latih semula atau gesa semula mengikut jadual.

Kesilapan Lazim

Membina taksonomi berdasarkan pasukan. Jika niat mencerminkan carta organisasi anda, penyusunan semula organisasi merosakkan pelaporan anda. Dasarkan ia pada matlamat pelanggan.

Mengejar satu nombor ketepatan. Ketepatan keseluruhan menyembunyikan bahawa "jejak pesanan" betul 98 peratus dan "batalkan langganan" 60 peratus. Ukur bagi setiap niat, dan berikan pemberat mengikut isi padu dan kos kesilapan.

Tiada pengendalian luar skop. Seperti yang didapati oleh pengarang CLINC150, pengelas bergelut dengan pertanyaan di luar niat yang diketahuinya (Larson et al., arXiv). Tanpa sandaran yang jelas, mesej di luar senarai dipaksa masuk ke label yang salah.

Melabel mesej pertama sahaja. Pelanggan sering bermula dengan kabur dan menjelaskan kemudian. Simpan niat pertama dan niat akhir.

Menggunakan niat sebagai satu-satunya isyarat. Gabungkan dengan sentimen, peringkat pelanggan dan saluran. Niat yang sama wajar mendapat pengendalian berbeza bagi pengguna percubaan dan akaun enterprise.

About the author

Linh Ngo

Linh Ngo

Customer Success Operations Manager

Linh Ngo is Customer Success Operations Manager at Rework, focused on AI-led process automation for operations teams, especially order fulfillment and finance workflows. Linh writes about process management and the AI productivity tools that take manual steps out of daily operations, so teams can see where work stalls and fix the process before adding headcount.