Bir otel chatbot'unun kaç mesaj yanıtladığını görmek başlangıç için yararlıdır; fakat misafirin sorusunun doğru çözüldüğünü tek başına göstermez. Çok kısa bir yanıt eksik olabilir, uzun bir yanıt da yanlış hizmet sözü içerebilir. Performansı değerlendirmek için mesaj hacmini, yanıt kalitesini ve ekip takibini ayrı ayrı incelemek gerekir.
Bu rehber, otel ekibinin haftalık görüşme incelemesi için kullanabileceği bir ölçüm yöntemi sunar. Aşağıdaki göstergeler ve tablo bir çalışma şablonudur. Hepsinin Otelbot panelinde hazır rapor olarak bulunduğu anlamına gelmez; işletme, mevcut görüşme kayıtları ve kendi rezervasyon süreciyle uygulanabilir olanları seçmelidir.
Önce Ölçmek İstediğiniz Sorunu Tanımlayın
“Herkese daha hızlı cevap verelim” hedefi ile “Rezervasyon ekibine eksiksiz talep ulaşsın” hedefi farklıdır. İlkinde yanıt süresi ve yanıtsız görüşmeler öne çıkar. İkincisinde tarih, kişi sayısı ve oda tercihinin anlaşılması önemlidir. Ölçüm başlamadan önce birincil hedefi yazın; her şeyi tek puana sıkıştırmak eksiklerin nedenini gizleyebilir.
Örneğin küçük bir otel, çalışma saati dışında gelen temel soruların karşılanmasını ilk hedef seçebilir. Bu durumda gece başlayan görüşmeler ayrı incelenir. Başka bir otel, yabancı dildeki hizmet koşullarının tutarlı anlatılmasını hedefleyebilir. Onun örnekleminde hedef diller ve koşul soruları ayrıca bulunmalıdır.
Yanıt Kalitesini Dört Soruyla İnceleyin
Her görüşmede şu sorulara bakın: Bilgi doğru mu, soruyu karşılıyor mu, belirsizlik açık mı, gerekli ekip devri uygun mu? Bir yanıtın güzel yazılmış olması bu dört alanın tamamında iyi olduğu anlamına gelmez. Otelde olmayan bir hizmetin kibar biçimde önerilmesi yine bilgi hatasıdır.
Yanıtı kontrol ederken karşılaştırılacak kaynağı kaydedin. Otelin onaylı kahvaltı saatini soran konuşma, güncel hizmet kaynağıyla karşılaştırılır. Müsaitlik sorusu ise gerçek tarih ve kişi sayısıyla eşleşen veri gerektirir. Bağlantı yoksa doğru davranış bir tahmin üretmek değil, teyit gereken durumu açıklamaktır.
| Gösterge | İnceleme Sorusu | Kullanılabilecek Kayıt |
|---|---|---|
| Bilgi doğruluğu | Yanıt güncel otel bilgisiyle eşleşiyor mu? | Görüşme ve onaylı kaynak |
| Konuya uygunluk | Misafirin asıl sorusu yanıtlandı mı? | Soru ve yanıt çifti |
| Talep kalitesi | Ekip için gerekli ayrıntılar anlaşılmış mı? | Görüşme özeti ve ekip değerlendirmesi |
| Ekip devri | Onay gerektiren konu doğru noktada bırakılmış mı? | Devir anı ve sonraki ekip adımı |
| Bilgi eksiği | Yanıtlanamayan soru hangi kaynağı gerektiriyor? | Eksik bilgi listesi |
Tüm sütunları görmek için tabloyu yana kaydırın.
Tek bir kötü görüşmeyi genel sonucun tamamı gibi değerlendirmeyin; tek bir başarılı görüşmeyi de başarı kanıtı saymayın. İncelemede hangi döneme, kanala ve soru türüne bakıldığını belirtin. Karşılaştırma yaparken aynı değerlendirme kurallarını kullanın.
Dengeli Bir Görüşme Örneklemi Seçin
Yalnız sorunsuz geçen konuşmaları seçmek, asıl düzeltilmesi gereken yerleri görünmez bırakır. Web, WhatsApp ve etkin diğer kanallardan farklı soru türlerini alın. Kısa sorular, uzun özel talepler, dil değişimi, yanlış yazılan tarihler ve ekip devri örnekleri ayrı görülebilir olmalıdır. İşletmeniz için önemli ama az sorulan bir koşulu da test görüşmesiyle deneyin.
Her incelemede aynı büyüklükte örneklem seçmek karşılaştırmayı kolaylaştırabilir; ancak sonuçların hangi kapsamdan geldiğini yazmak daha önemlidir. Sezon başında otel bilgileri değiştiyse bunu değerlendirme notuna ekleyin. Kanal bağlantısındaki bir teslim sorunu ile bilgi tabanındaki yanlışlığı aynı hata başlığında toplamayın; çözümleri farklıdır.
Hataları Düzeltilmesi Gereken Yere Göre Ayırın
Bir yanıt eski bilgiyi kullanıyorsa önce kaynak kontrol edilir. Kaynak doğru ama yanıt gereğinden kesin konuşuyorsa talimat ve örnek testler gözden geçirilir. Misafir tarih vermesine rağmen tekrar soruluyorsa konuşma bağlamının kullanımı incelenir. Mesaj hiç ulaşmadıysa kanal ve teslim akışı değerlendirilir.
Bu ayrım, her sorun için bütün sistemi değiştirmeyi önler. Örneğin geçici tadilat bilgisini yanlış anlatan yanıtın çözümü, otelin hizmet durumunu kaynakta açık yazmak olabilir. Özel isteği onaylanmış gibi sunan yanıt ise yetki sınırının netleştirilmesini gerektirir. Bilgi tabanı rehberi, kaynak çelişkilerini düzenlemek için başlangıç sağlar.
Talep Ve Rezervasyonu Ayrı Sayın
“Asistandan gelen talep” ile “Kesinleşen rezervasyon” farklı göstergelerdir. Bir misafirin tarih sorması, ödeme veya rezervasyon onayı aldığı anlamına gelmez. Takip yönteminiz hangi görüşmenin hangi kayıtla eşleştiğini gösterebiliyorsa sonucu değerlendirebilirsiniz; eşleşme yoksa sadece görüşme veya talep sayısından söz edin.
İki dönemi karşılaştırırken sezon, kampanya, oda fiyatı, trafik kaynağı ve işletmenin açık kapasitesi gibi değişiklikleri not edin. Bu etkenler sonucu değiştirebilir. Tek başına chatbot kullanımıyla artış görüldüğünü söylemek için zaman sıralaması yeterli değildir. İşletmeye ait doğrulanmış veri olmadan yüzdelik başarı veya gelir artışı yayınlamayın.
Haftalık Bir Değerlendirme Toplantısı Yapın
İncelemeyi kısa bir çalışma döngüsüne bağlayın. Önce örnek görüşmeleri seçin, ardından hatayı ve ilgili kaynağı yazın. Ekip her bulgu için küçük ve uygulanabilir bir düzeltme belirlesin. Sonraki hafta aynı tür soruyu yeniden deneyerek düzeltmenin beklenen davranışı oluşturup oluşturmadığını kontrol edin.
Örnek bir değerlendirme notu şöyle olabilir: “Geç giriş sorusunda ekip teyidi gerektiği yeterince açık değil. İlgili soru-cevap güncellenecek, ardından Türkçe ve İngilizce örneklerle test edilecek.” Bu not, “Yanıt kalitesi geliştirilsin” gibi genel bir hedefe göre daha kolay uygulanır. Sorumlu kişi ve tamamlanma zamanı işletmenin kendi çalışma düzeninde belirlenir.
- Dönemi, kanalları ve incelenecek soru türlerini seçin.
- Her yanıtı karşılaştıracağınız güncel kaynağı belirleyin.
- Bilgi hatasını, eksik yanıtı ve teslim sorununu ayrı kaydedin.
- Her bulgu için sorumlu kişiyi ve düzeltilecek kaynağı yazın.
- Düzeltmeden sonra aynı soruyu ve yakın bir örneğini yeniden deneyin.
- Sonraki değerlendirmede sonucun değişip değişmediğini kontrol edin.
Yayın Sonrası Testleri Sürdürün
Kurulumda başarılı olan bir yanıt, otel bilgisi değiştiğinde yeniden kontrol edilmelidir. Yeni oda türü, sezonluk hizmet veya saat değişikliği sonrası ilgili senaryoyu tekrar deneyin. Özel talepler ve önemli hizmet koşulları hedef misafir dillerinde de kontrol edilir. Çok dilli test rehberi, bu inceleme için ayrı bir kontrol listesi sunar.
Performans değerlendirmesinin çıktısı yalnız puan olmamalıdır. Güncellenecek kaynaklar, açıklanacak koşullar ve düzenlenecek ekip devri adımları ortaya çıkmalıdır. Otelbot'un hangi kanal ve bilgi kaynaklarıyla kullanılacağını otel asistanı sayfasından inceleyebilir, işletmenizin ölçüm hedeflerini iletişim formunda paylaşabilirsiniz.
