Chatbot Test Senaryoları Nasıl Hazırlanır

Bir chatbotu canlıya almadan önce yazılan diyalog akışlarının gerçek müşteri davranışı karşısında nasıl tepki verdiğini görmenin tek yolu, kapsamlı chatbot test senaryoları hazırlamaktır. Çoğu işletme botu yalnızca kendi yazdığı örnek sorularla dener ve yayına alır; sonra müşteri farklı bir kelime sırasıyla, yazım hatasıyla ya da beklenmedik bir talebiyle geldiğinde bot şaşırır. Test senaryolarını sistematik kurmak bu riski büyük ölçüde azaltır ve destek ekibinin canlıda sürpriz yaşama olasılığını düşürür.

Chatbot Test Senaryoları Neden Planlı Hazırlanmalı

Test senaryosu yazmak, botun cevap verebildiği sorular listesini çıkarmaktan farklı bir iştir. Amaç botun sınırlarını önceden keşfetmek, yani ona doğru sorulduğunda değil, yanlış veya eksik sorulduğunda ne olduğunu görmektir. Planlı bir senaryo seti olmadan yapılan testler genelde ekip üyelerinin aklına gelen birkaç örnekle sınırlı kalır ve gerçek müşteri dilinin çeşitliliğini yansıtmaz. Bu yüzden senaryoları yazıya dökmek, hangi durumların test edildiğini hangi durumların hâlâ boşta olduğunu görünür kılar.

Test Senaryosu Türleri: Mutlu Yol, Sınır Durum, Hata Durumu

Kapsamlı bir chatbot test senaryoları listesi üç ana kategoriden oluşur. Mutlu yol senaryoları, müşterinin niyetini net ve doğru ifade ettiği standart konuşmalardır; kargo takibi, çalışma saatleri, ürün fiyatı gibi sık sorulan konular buraya girer. Sınır durum senaryoları, botun net bir cevabı olmayan ama yine de karşılaşabileceği durumlardır: birden fazla niyetin aynı cümlede geçmesi, eksik bilgiyle sorulan bir talep ya da konuşma dilinde yazılmış bir cümle. Hata durumu senaryoları ise botun hiç anlayamadığı, sistemin cevap veremediği ya da entegrasyonun (stok, sipariş, randevu sistemi gibi) yanıt vermediği anlardır; bu senaryolarda botun insan temsilciye ne zaman ve nasıl aktarım yaptığı ayrıca test edilmelidir.

Chatbot Test Senaryoları Hazırlarken İzlenecek Adımlar

Senaryo hazırlığına başlarken önce gerçek müşteri sorularının bir dökümünü çıkarmak faydalıdır; geçmiş WhatsApp yazışmaları, e-posta talepleri veya canlı destek kayıtları bu konuda en güvenilir kaynaktır. Ardından bu sorular niyet gruplarına ayrılır ve her grup için en az bir mutlu yol, bir sınır durum ve mümkünse bir hata durumu senaryosu yazılır. Sonraki adımda her senaryoya beklenen cevap eklenir; bu, testi yapan kişinin “doğru mu yanlış mı” kararını öznel değerlendirmeden çıkarır. Son olarak senaryolar botun bilgi bankasını eğitme sürecinde kullanılan örneklerle karşılaştırılıp örtüşmeyen alanlar tamamlanır.

Kanal Bazlı Test Farklılıkları

Aynı bot farklı kanallarda farklı davranabilir; bu yüzden test senaryoları kanal bazında da ayrıca gözden geçirilmelidir. Aşağıdaki tablo hangi kanalda hangi noktalara özellikle dikkat edilmesi gerektiğini özetler.

Test Sırasında İzlenecek Metrikler

Senaryoları çalıştırırken yalnızca “doğru cevap verdi mi” değil, birkaç metriği birlikte kaydetmek gerekir: ilk yanıt süresi, niyet tanıma doğruluğu, gerektiğinde insan temsilciye aktarım hızı ve konuşmanın kaç adımda tamamlandığı. Bu ölçümler tek seferlik bir test raporu için değil, botun performans metriklerini zaman içinde karşılaştırmak için de referans oluşturur. Test aşamasında elde edilen ilk sonuçlar, canlıya geçtikten sonra izlenecek eşik değerlerin (örneğin kabul edilebilir yanıt süresi) belirlenmesine de yardımcı olur.

Yayın Öncesi Kontrol Süreciyle İlişkisi

Chatbot test senaryoları tek başına bir adım değil, yayın öncesi kontrol sürecinin bir parçasıdır. Senaryolar tamamlandıktan ve düzeltmeler yapıldıktan sonra botun genel yayın hazırlığı ayrıca kontrol edilmelidir; hangi entegrasyonların bağlı olduğu, hangi mesaj şablonlarının onaylandığı gibi maddeler test senaryolarından bağımsız ama onunla birlikte ilerleyen kalemlerdir. Bu iki süreci ayrı ekipler değil aynı kişi ya da ekip yürütürse, testte bulunan bir sorunun kontrol listesinde atlanma riski azalır.

Test Kurgusunda Tekrarlanan Yanlışlar

Uygulamada en çok görülen hata, testlerin yalnızca yazılı dille yapılıp sesli mesaj veya emoji içeren gerçekçi mesajların denenmemesidir. İkinci sık hata, senaryoların tek seferlik yazılıp botun içeriği güncellendiğinde tekrar çalıştırılmamasıdır; oysa yeni bir bilgi bankası girişi eklendiğinde eski senaryoların hâlâ geçerli olup olmadığı kontrol edilmelidir. Üçüncü hata ise test sonuçlarının sadece geçti/kaldı şeklinde kaydedilip hangi cümlenin botu yanılttığının not edilmemesidir; bu detay olmadan aynı hata bir sonraki güncellemede tekrar ortaya çıkabilir. Senaryoları bir tabloya dökmek ve her güncellemede gözden geçirmek bu üç hatanın önüne geçer.

Kurulum aşamasındayken genel adımları doğru asistan türünü seçme kararıyla birlikte planlamak faydalı olur; hangi bot altyapısının seçildiği, test senaryolarının kapsamını da belirler. Test senaryoları tamamlandıktan sonra sıradaki adım genellikle yayın öncesi kontrol listesini uygulamaktır; bu iki içerik birbirini tamamlar. Test sonuçlarını nasıl okuyacağınızı netleştirmek için GA4 üzerinden dönüşüm ölçümü mantığından da yararlanabilirsiniz, çünkü bot performansını izlemek de benzer bir ölçüm disipliniyle ilerler. Canlıya aldıktan sonra botun gerçek konuşmalardaki başarısını izlemek için performans metriklerine ve karşılaşılan sorunları çözmek için hata yönetimi yaklaşımlarına bakmak işe yarar. Test aşamasında A/B mantığıyla ilerlemek isterseniz deney kurgusu yaklaşımından esinlenmek de mümkündür. Konuşma arayüzü testleri hakkında genel kabul görmüş yaklaşımlar için Nielsen Norman Group’un chatbot kullanılabilirliği üzerine derlediği kaynaklara da göz atabilirsiniz.

Sıkça Sorulan Sorular

Chatbot test senaryoları kaç tane olmalı?

Sabit bir sayı yoktur; her niyet grubu için en az bir mutlu yol ve bir sınır durum senaryosu yeterli bir başlangıçtır. Ürün veya hizmet karmaşıklaştıkça senaryo sayısı doğal olarak artar.

Test senaryolarını kim hazırlamalı?

İdeal olan, botu kuran kişi ile müşteri destek ekibinin birlikte çalışmasıdır; destek ekibi gerçek müşteri dilini bilir, kurulumu yapan kişi ise botun teknik sınırlarını bilir.

Senaryoları ne sıklıkla güncellemek gerekir?

Bilgi bankasına yeni bir konu eklendiğinde veya bir entegrasyon değiştiğinde ilgili senaryolar yeniden gözden geçirilmelidir; sabit bir takvimden çok değişikliğe bağlı bir güncelleme mantığı daha isabetlidir.

Sınır durum senaryosu nedir, örnek verir misiniz?

Müşterinin aynı cümlede hem kargo durumu hem iade talebi sorması, ya da eksik bilgiyle “ürünüm gelmedi” demesi sınır durum örnekleridir; bot bu durumlarda netleştirici bir soru sorabilmelidir.

Test sonuçları nereye kaydedilmeli?

Basit bir tablo (senaryo, beklenen cevap, gerçek cevap, sonuç) çoğu işletme için yeterlidir; önemli olan sonuçların tek seferlik değil, düzenli olarak aynı formatta tutulmasıdır.

Chatbot test senaryolarını kendi ekibinizle hazırlamakta zorlanıyorsanız MY Asistan kurulum desteği üzerinden mevcut bilgi bankanıza ve kanallarınıza uygun bir senaryo seti çıkarılmasına yardımcı olunabilir; MY Asistan sayfasından detaylara ulaşabilir, hazırlanmış diğer içerikler için MY Asistan blogunu inceleyebilirsiniz.