Yapay Zeka Asistanınızın Kalitesini Nasıl Ölçersiniz: Aylık Rutin

Bir öğleden sonranızı yapay zeka asistanını kurmaya ayırdınız, iki test araması yaptınız, numaranızı yönlendirdiniz ve başka işlere döndünüz. Doğru yaptınız. Yanlış olan tek şey, işin bittiğini sanmak. Telefonu karşılayan bir asistan zamanla kayar – bozulduğu için değil, işletmeniz değiştiği ve profili aynı kaldığı için. Aşağıdaki rutin, onu dürüst tutan şey.

“Kur ve unut” neden sessizce çöker

Bir kez kurduğunuz yazılım genelde bıraktığınız yerde kalır. Telefonu karşılayan biri – ister insan olsun ister yapay zeka – bu lükse sahip değildir, çünkü anlattığı şey sürekli hareket halindedir. Cumartesi mesaisi eklersiniz. Bir hizmeti kaldırırsınız. İlkbaharda fiyatlarınız artar. Tedarikçideki bir gecikme, her zamanki teslim sürenizi uzatır. Siz söylemedikçe bunların hiçbiri asistana ulaşmaz; o da geçen yılın metnini okuyan birinin özgüveniyle yanıt vermeye devam eder.

Arıza nadiren gösterişlidir. Asistan bir anda saçmalamaya başlamaz. Olan şudur: eski bir fiyatı söyler, artık vermediğiniz bir saate randevu yazar ya da tam da satmaya çalıştığınız yeni hizmetten hiç söz etmez. Bunların her biri küçük ve görünmez bir sızıntıdır. Görüşmeleri kendi kulağınızla duymadığınız için de fark etmezsiniz – ta ki bir müşteri laf arasında söyleyene ya da yeni hizmete neden bu kadar az randevu geldiğini merak edene kadar.

Yani kalite kontrolün amacı, makineyi suçüstü yakalamak değil. Amaç, işletmenizin bugün yaptığı iş ile asistanın yaptığınızı sandığı iş arasındaki farkı yakalamak. Bu fark yavaş yavaş açılır ve ayda yaklaşık yirmi dakikada kapanır. Bu rehber, o yirmi dakika.

Aylık rutin bir bakışta

Ayrıntılara girmeden önce tablonun tamamı. Bilerek küçük tutuldu. Gerçekten uyguladığınız bir kalite rutini, ikinci ayda bıraktığınız kusursuz bir rutinden her zaman iyidir.

1. 1
   Üç gizli müşteri araması yapın

   Gerçek bir derdi olan müşteri gibi kendi numaranızı arayın. Her ay senaryoyu değiştirin. Sahibi gibi değil, sizi hiç tanımayan biri gibi dinleyin.
2. 2
   Beş görüşme dökümü inceleyin

   Arama özetlerinizi açın, son aramalardan rastgele beşini seçin ve kısa bir değerlendirme kartına göre puanlayın. Zaten elinizdeler – asistan her görüşmeden sonra e-postayla gönderiyor.
3. 3
   Düzeltmeleri sayın

   Asistanın söylediği bir şeyi kaç kez düzeltmek ya da bunun için özür dilemek zorunda kaldığınızı not edin. Bu sayıyı aydan aya takip edin. Yükselen eğilim, erken uyarı ışığınızdır.
4. 4
   Karar verin: profil mi, destek mi?

   Sorunların çoğu asistanda değil, profilinizde. Kendiniz çözebileceklerinizi, destek ekibine taşımaya değer o nadir durumdan ayırın.

Ayda bir kez yirmi dakika; tercihen başka bir kırtasiye işini hallettiğiniz günle aynı güne koyun ki alışkanlığa dönüşsün. Şimdi ayrıntılar.

Birinci adım: gizli müşteri araması

Yapabileceğiniz en faydalı tek şey, kendi işletmenizi bir müşteri gibi aramak. Telefonun çaldığını görmek için değil; gerçek bir insanın ne duyduğunu duymak için. İşletme sahipleri doğaları gereği kötü test arayıcılarıdır, çünkü asistanın cevabını bildiğimiz soruları sorarız. Gizli müşteri araması, bilerek zor olanları sormak demektir.

Numarayı çevirmeden önce bir senaryo seçin ve onu somutlaştırın. “Randevunuz var mı?” değil, “Bu sabah dişimin bir parçası kırıldı, hafta sonundan önce bakabilecek biri var mı?” “Çalışma saatleriniz nedir?” değil, “Pazartesi resmî tatilde açık mısınız?” Değer kenarlarda saklı, çünkü profilin inceldiği yer kenarlardır.

• Acil arayan: hızlı ve insan sıcaklığı taşıyan bir yanıta ihtiyacı olan biri. Asistan onu rahatlatıp doğru yere yönlendiriyor mu, yoksa robot gibi çalışma saatlerini mi okuyor?
• Fiyat soran: “Şu iş aşağı yukarı ne kadar tutar?” Güncel bir rakam mı veriyor, dürüst bir aralık mı sunuyor, yoksa artık uygulamadığınız bir fiyatı mı taahhüt ediyor?
• Menü dışı soru: vermediğiniz bir hizmet. Bunu açıkça söyleyip en yakın alternatifi öneriyor mu, yoksa blöf mü yapıyor?
• Randevu: gerçekten randevu almayı deneyin, sonra beklediğiniz yere düştüğünü kontrol edin. Size hiç ulaşmayan bir randevu, kaçırılmış aramadan daha kötüdür.

Her ay senaryoyu değiştirin ki sonsuza kadar aynı kolay yolu test etmeyin. Aramayı kısa tutun – denetim yapmıyorsunuz, örnekleme yapıyorsunuz. En önemlisi de telefonu kapattığınız anda tek bir dürüst cümle yazın: randevu alır mıydım, yoksa kapatıp bir sonraki yeri mi arardım? Bu içgüdü, sonradan vereceğiniz herhangi bir puandan daha güvenilirdir.

İkinci adım: değerlendirme kartıyla döküm örneklemesi

Gizli müşteri aramaları, asistanın sizin attığınız topa nasıl karşılık verdiğini gösterir. Döküm örneklemesi ise gerçek arayanların sorduklarını nasıl karşıladığını – ki bu her zaman sizin kurgulayabileceğiniz her şeyden daha tuhaf ve daha çeşitlidir. Vunoon her görüşmeden sonra size özeti ve tam dökümü e-postayla yolluyor; yani hammadde çoktan gelen kutunuzda duruyor. Disiplin, birkaçını gerçekten okumakta.

Hepsini okumayın – kalite kontrol tam da böyle ölür. Son aramalardan aşağı yukarı rastgele beş tanesini seçin. Rastgelelik önemli: yalnızca içinize sinmeyen aramaları incelerseniz asistanı olduğundan kötü sanırsınız ve küçük bir hatanın sessizce geçip gittiği o sıradan, sakin aramaları kaçırırsınız.

Beş aramanın her birini aynı kısa değerlendirme kartına göre puanlayın. Kartı, arama başına on beş saniyede karar verebileceğiniz şeylerle sınırlı tutun. Çoğu küçük işletmede işe yarayan bir kart aşağıda: kopyalayın, ifadeleri kendi işinize göre uyarlayın ve her ay tam olarak aynısını kullanın ki sayılar karşılaştırılabilir olsun.

Beş arama, beş boyut, yirmi beş küçük karar. Yaklaşık beş dakika sürer ve size sezginin veremeyeceği bir şey verir: örüntü. Üslubu tutturamayan tek bir arama gürültüdür. Beş aramanın dördünde doğruluğun düşük çıkması ise sinyaldir – ve neredeyse her zaman profilinizde bayatlamış tek bir şeyi işaret eder.

Dürüstlük satırına ayrı bir dikkat gösterin. İyi bir yapay zeka asistanının bir şeyi bilmeme hakkı vardır. Avlamaya çalıştığınız hata bilgisizlik değil; tam bir özgüvenle sunulan akıcı bir tahmin. Bir dökümde böyle bir şey yakaladığınızda ayın en değerli bulgusunu bulmuşsunuz demektir; çünkü asistanın orada bir daha doğaçlama yapmak zorunda kalmaması için profile tam olarak neyi eklemeniz gerektiğini size o söyler.

Üçüncü adım: kaç kez düzelttiğinizi takip edin

Gizli müşteri araması ve döküm örneklemesi birer fotoğraftır. Düzeltme sıklığı ise eğridir; tutacağınız en faydalı tek sayı da odur. Tanımı basit: bu ay, asistanın bir arayana söylediği bir şeyi kaç kez düzeltmek, açıklamak ya da bunun için özür dilemek zorunda kaldınız?

Bunları sahada yakalarsınız: bir müşteri gelip “asistanınız bana otuz euro demişti” der, oysa öyle değildir; ya da bir randevu yanlış saate düşer; ya da biri aylar önce bıraktığınız bir hizmetten söz eder. Bunların her biri bir düzeltmedir. Sayacı aptalca ve dayanıklı bir yerde tutun: telefonunuzdaki bir not, tablodaki bir satır, randevu defterinizin arka sayfası. Araç önemli değil, süreklilik önemli.

İzlediğiniz şey mutlak sayı değil – her kurulumda birkaç tane olur – yön. Aydan aya düşük ve yatay seyreden bir sayı, profilinizle işletmenizin aynı sayfada olduğu anlamına gelir. Sinsice tırmanan bir sayı ise bir şeyin kaydığını gösteren dumandır: fiyatı değiştirdiniz, hizmet eklediniz, saatlerinizi kaydırdınız; asistan hâlâ eski haritayla çalışıyor.

Ayarı mı düzeltmeli, desteğe mi yazmalı?

Bütün rutin bu karara doğru ilerler. Bir sorun buldunuz. Profilinizde kendiniz mi düzelteceksiniz, yoksa bu destek ekibine taşınacak bir şey mi? Bu ayrımı doğru yapmak, hem boşa açılmış destek taleplerinden hem de aslında sorun olmayan ayarları yeniden okuyarak geçen öğleden sonralardan sizi kurtarır.

Kaba kural şu: asistan işletmeniz hakkında yanlış bir şey söylediyse, bu neredeyse her zaman bir profil düzeltmesidir. Profilinizde ne yazarsa yazsın asistan tuhaf davranıyorsa – net konuşmayı defalarca yanlış anlıyor, aramalar düşüyor, uyması gereken bir talimatı görmezden geliyorsa – destek ekibinin sizden haber almak istediği an odur.

Şu durumlarda kendiniz düzeltin…

• Eski bir fiyat ya da eski bir aralık söylediyse – profildeki rakamı güncelleyin.
• Yeni bir hizmeti bilmiyorsa ya da kaldırdığınız bir hizmeti hâlâ sayıyorsa – profil güncel değil.
• Yanlış saatleri verdiyse ya da tatil kapanışından haberi yoksa – takvimi ekleyin veya düzeltin.
• Sık gelen bir soruyu kem küm ederek yanıtladıysa – sizin vereceğiniz cevabı yazıp ekleyin ki doğaçlamayı bıraksın.
• Dolmasını istemediğiniz bir saate randevu yazdıysa – ayarladığınız uygunluk kurallarını sıkılaştırın.

Şu durumlarda desteğe yazın…

• Net konuşan arayanları tekrar tekrar yanlış anlıyorsa ya da arayanlar sesin kötü geldiğini söylüyorsa – bu, profilinizle değil, yönlendirme veya hat kalitesiyle ilgili olabilir.
• Açık ve doğru biçimde girilmiş bir talimatı görmezden geliyorsa – örneğin fiyat vermemesini söylediğiniz halde fiyat vermeye devam ediyorsa.
• Özetler veya dökümler gelmeyi kesmişse ya da aramalar beklendiği gibi yönlendirilmiyorsa.
• Bir şey ters gidiyor ve profilin doğru olduğunu gerçekten kontrol ettiyseniz. Harita doğru ama davranış değilse, bakması gereken onlardır.

Açık konuşalım: bulacaklarınızın ezici çoğunluğu ilk listeye girer. Bu, asistana yönelik bir eleştiri değil; aracın doğası bu. O yalnızca ona söylediğinizi bilir. Kalite sorunlarının çoğu aslında bilgi sorunudur ve bilgi sorunlarının, nereye bakacağınızı bildiğinizde otuz saniyelik çözümleri vardır.

“İyi” tam olarak neye benzer?

Hedefi net koymakta fayda var, çünkü kusursuzluğun peşine düşmek sizi hem mutsuz eder hem de bütün çabayı boşa çıkarır. İyi bir yapay zeka çağrı karşılama hizmeti, her soruyu hatasız yanıtlayan hizmet değildir. Sık gelen soruları iyi yanıtlayan ve geri kalanında güvenli biçimde pes eden hizmettir – yani bilmediğinde bunu söyleyip, üzerine harekete geçebileceğiniz bir not alan.

İki koltuklu bir diş kliniği düşünün. Arayan kişi, kliniğin başka yere yönlendirdiği özel bir implant işlemini soruyor. Altın standart yanıt, asistanın kendinden emin ve yanlış bir açıklama uydurması değil. Şudur: “Bu işlemi kendi kliniğimizde yapmıyoruz, ama bilgilerinizi alıp hekimimizin sizi arayarak doğru adresi tarif etmesini sağlayabilirim.” Asistan “cevabı bilmemiş” olsa bile bu arama kazanç hanesine yazılır. Not alındı, arayan rahatladı, kimse yanıltılmadı.

Dolayısıyla dökümleri puanlarken, zarifçe söylenmiş bir “not alayım” cümlesini kırık notla cezalandırmayın. Sistem tam da böyle çalışıyor demektir. Blöfü, atlanan ayrıntıları ve bayatlamış bilgileri cezalandırın. Çıta güvenilir ve dürüst olmak; her şeyi bilmek değil. “Bilmiyorum” demeyi hiç beceremeyen bir asistana daha çok değil, daha az güvenmelisiniz.

Rutini gerçekten sürdürmek

En iyi kalite süreci, bırakmadığınız süreçtir. O yüzden onu utanç verecek kadar hafif tutun. Zaten her ay yaptığınız bir işe iliştirin – faturalar, bordro, KDV hesabı – ki yeni bir alışkanlık talep etmek yerine var olanın sırtında yolculuk etsin. Takviminize tekrarlayan bir hatırlatma koyun ve ona “telefon kontrolü” gibi sıkıcı, somut bir ad verin.

1. 1
   Sabit bir gün seçin

   Her ay aynı gün. Ayın ilk pazartesisi, son cuması – hangisini hatırlayacaksanız. Öngörülebilirlik, hırsı yener.
2. 2
   Sayacı göz önünde tutun

   Düzeltmeler, gerçekten baktığınız tek bir yere yazılsın. Hiç açmadığınız bir belgede yaşıyorsa eğri ölür.
3. 3
   Anında düzeltin

   Bir gizli müşteri araması ya da döküm bayatlamış bir bilgiyi ortaya çıkardığında profili hemen güncelleyin – görmezden geleceğiniz bir yapılacaklar listesine eklemeyin.
4. 4
   Eğriyi üç ayda bir gözden geçirin

   Her üç ayda bir düzeltme sayılarınıza dönüp bakın. Düşük ve yatay mı? İşiniz bitti. Tırmanıyor mu? Yapısal bir şey değişmiş – bir kez, adamakıllı kazın.

Bunların hiçbiri için yöneticiye, gösterge paneline ya da formüllü bir tabloya ihtiyaç yok. Gereken şey siz, yirmi dakika ve kendi işletmenizi arayıp sizi tanımayan biri gibi dinleme istekliliği. Bütün disiplin bu; sessizce müşteri kazandıran bir asistanla sessizce müşteri kaybettiren bir asistan arasındaki fark da bu.

Çağrı karşılama kalitesi hakkında sık sorulan sorular