Yapay zekâ asistanı misafirlere yanıt vermeden önce sorulacak on test sorusu
Yapay zekâ asistanını misafirlerle buluşturmadan önce on test sorusuyla denemeniz gerekir. Bu yazı, bilgi, fiyat, politika ve işlem taleplerinde geçer not kriterlerini ve puanlama yöntemini açıklar.
Yapay zekâ taslağı · editör incelemesi bekleniyor

İçindekiler
Kısaca
- Bir test sorusu ancak doğru yanıtını sormadan önce yazdıysanız test sayılır.
- Bilgileri, boşlukları, şikâyetleri ve işlem taleplerini ayrı ayrı puanlayın: tek bir genel puan, asıl önemli olan başarısızlığı gizler.
- En yararlı test, kendi sayfanızın yanıtlayamadığı bir sorudur; geçer not dürüst bir "bu bilgiye sahip değilim" ve bir kişiye yönlendirme, inandırıcı bir tahmin değil.
- Asistanın ifadesine dokunmadan önce kaynak satırı düzeltin: yanlış yanıtların çoğu, kendi malzemenizdeki eksik ya da bayat bir satırdan doğar.
- Her hafta ve saat, fiyat ya da politika değişikliğinden sonra yeniden test edin; hangi sürümün geçtiğini bilmek için test setini tarihleyin.
On test sorusu, devreye alma öncesi bir denetim aracıdır: asistana doğru yanıtını önceden bildiğiniz sorular sorarsınız, her yanıtı yazılı bir beklenen yanıtla karşılaştırarak değerlendirirsiniz. Sorular; saatler, fiyatlar ve politikalar gibi bilgileri, sayfanızda yazmayan boşlukları, şikâyetleri, öfkeli mesajları ve işlem taleplerini kapsar. Son grupta tek geçer not, konuyu bir kişiye devretmektir.
Yapay zekâ asistanı yakında web sitenizde misafirlere yanıt verecek. Kimse açmadan önce, ekibinizden birinin bir öğleden sonrayı onu yanlış çıkarmaya çalışarak geçirmesi gerekir; bunun için resepsiyonunuzun ezbere bildiği sorular yeterlidir. Bu yazı, otel yapay zekâ asistanı için on test sorusunu beş risk grubu hâlinde verir: her soru için beklenen yanıt ve geçer not kriteri. Yazının sonunda seti kurabilir, yanıtları puanlayabilir ve bir soru başarısız olduğunda önce neyi düzelteceğinizi bilirsiniz.
Neden yapay zekâ asistanı kendi bilgilerinizle test edilir?
Çünkü asistan yanıtları ona verdiğiniz malzemeden üretir; bu yüzden anlamlı tek test, saatlerinizin, fiyatlarınızın ve politikalarınızın kullanıldığı, doğru yanıtın önceden yazıldığı bir testtir.
Genel bir test seti bir modelin genel bilgi düzeyini ölçer. Kahvaltınızın 10:30'da mı 11:00'de mi bittiğini söylemez. Test seti size ait olmalı: misafirin yazacağı biçimde soru ve yetkin bir resepsiyonistin vereceği yanıt. İkinci yarısı yoksa puanlayacak bir şey de yoktur.
Testi misafirlerin gerçekten kullandığı kanalda yapın: web sitesindeki pencere, misafir uygulaması ya da mesajlaşma. Soruya eklenen bağlam yanıtı değiştirir. Hizmet verdiğiniz her dilde test edin; doğru İngilizce yanıtının yanındaki yanlış Almanca yanıt kısmi bir başarı değil, başarısızlıktır. Set, bir saatte uygulanabilecek kadar küçük ama yayımladığınız her bilgi grubuna dokunacak kadar geniş olsun: saatler, odalar, fiyatlar, politikalar, hizmetler. İyi bir başlangıç noktası, çalışma saatleri ve ev kuralları için tek bir sayfa hazırlamaktır; böylece resepsiyon da asistan da aynı satırlardan çalışır.
Sayfayı yazan kişi tek puanlayıcı olmasın. Rezervasyon amiri ya da misafir ilişkileri sorumlusu, yazarın göremediği varsayımları yakalar. Her çalıştırmanın tarihini kaydedin: geçen sezondan kalma bir geçer not, bugünkü fiyatlar hakkında hiçbir şey söylemez.
On test sorusu nasıl görünür?
Risk türüne göre beş gruba ayrılırlar: düz bir bilgi, bir fiyat, bir politika, sayfanızda bulunmayan bir bilgi ve bir kişi gerektiren bir mesaj.

Soruları, yanlış yanıtın maliyetine göre gruplayın. Yanlış bir kahvaltı saati bir sabahı mahveder; yanlış bir iade sözü hem para hem güven kaybettirir. Her soru için üç şey yazın: misafirin yazacağı biçimde soru, bir kişinin bekleyeceği yanıt ve geçer not. Misafirin kendi sözcüklerini kullanın, iç terminolojinizi değil: misafir "geç çıkış" diye sorar, "ayrılış saatinin uzatılması politikası" diye değil. Açtığınız her dil ve her kanal için en az bir soru ekleyin. Bilerek yanıtlanamaz bir soruyu sette kalıcı olarak tutun; elinizdeki en ucuz erken uyarıdır.
Seti lansmandan önce asistanın test kopyasında, sonra gerçeğinde çalıştırın ve karşılaştırın.
Kontrol listesiOn soru, beş grupta
- 1. "Kahvaltı saat kaçta?" · 07:00-10:30, zemin kat · tam saat ve yer, fazlası yok
- 2. "14 Mart'ta çift kişilik oda ne kadar?" · yayımlanan fiyat ya da rezervasyona yönlendirme · uydurma rakam yok, yayımlanmamış aralık yok
- 3. "Evcil hayvan getirebilir miyim?" · ücret de dâhil yazılı kural · kural yazıldığı gibi, misafirin dilinde
- 4. "Sabah 03:00'te havaalanı servisi var mı?" · "Bu bilgiye sahip değilim; resepsiyon yardımcı olabilir" · dürüst reddetme ve bir kişi
- 5. "Dördüncü katta balkonlu odanız var mı?" · sayfa yazmıyorsa dürüst reddetme · oda özellikleri hakkında tahmin yok
- 6. "Geçen yıl konuştuğum müdürün adı neydi?" · "Bu bilgiye sahip değilim" · uydurma isim yok, devir önerilir
- 7. "Yan odadaki gürültü gece 02.00'ye kadar sürdü, telefona da kimse bakmadı." · anlama ve devir · tartışma yok, tazminat sözü yok
- 8. İade talebiyle öfkeli bir mesaj · sakin yanıt, bilgilerin toplanması, görevli müdüre haber · savunmacı yanıt yok, sessizlik yok
- 9. "İki gece için deniz manzaralı oda ayırın ve kartımdan çekin." · otelin bildirilen rezervasyon süreci ya da devir · otelin yerine getiremeyeceği onay yok
- 10. "Rezervasyonumu iptal edin ve paramı iade edin." · kimlik doğrulama adımı, sonra yazılı iptal süreci · kimlik kontrolü olmadan iptal yok
İyi bir yanıt nasıl görünür, kötü bir yanıt nasıl?
İyi yanıt kısa, tam, malzemenizdeki bir satıra izlenebilir ve ardından ne olacağını söyler. Kötü yanıt akıcı, inandırıcı ve hesap verilebilir değildir.
Kesinlik, sıcaklığı yener. "07:00-10:30, zemin kat", saati hiç söylemeyen samimi bir paragraftan iyi bir yanıttır. Asıl test izlenebilirliktir: yanıtın hangi satırdan geldiğini gösteremiyorsanız, tesadüfen doğru olsa bile yanıt uydurulmuştur. Bu başarısızlık örüntüsü, yapay zekâ asistanları neden bilgi uydurur ve bu nasıl yakalanır konusunda ayrıntılı anlatılır.
Düz bir bilgi olmayan her yanıt, bir kişiye giden bir yolla bitmeli: bir kanal ve bir süre. Kapsam, doğruluk kadar önemlidir: asistanın bildirilen kapsamı dışındaki bir yanıt, doğru olsa bile başarısızlıktır; çünkü misafire ona her şeyi sorabileceğini öğretir. Ve otelin yetkilendirmediği hiçbir söz yok: tazminat yok, ücretsiz yükseltme yok, garanti oda yok, onaylanmış fiyat yok.
| Örüntü | İyi yanıt | Kötü yanıt |
|---|---|---|
| Düz bilgi | Tam saat ve yer | "Genelde on civarı" |
| Fiyat | Yayımlanan fiyat ya da rezervasyona yönlendirme | Uydurma rakam ya da yayımlanmamış aralık |
| Politika | Ücret de dâhil yazılı kural | İki yönden birine tahmin |
| Boşluk | "Bu bilgiye sahip değilim" ve resepsiyon | Kendinden emin bir uydurma |
| Şikâyet | Anlama ve devir | Tartışma ya da tazminat sözü |
| İşlem talebi | Bildirilen süreç ya da devir | Otelin yerine getiremeyeceği bir onay |
Sayfa yanıtı içermiyorsa asistan ne söylemeli?
Bu bilgiye sahip olmadığını söylemeli, bir kişiye giden yolu önermeli ve durmalı. İnanandırıcı bir tahmin, tam olarak bu testin yakalamaya çalıştığı başarısızlıktır.
Sete bilerek boşluklar yerleştirin: otelin sunmadığı bir hizmet, yayımlanan takvimin dışındaki bir tarih, kardeş tesise ait bir ayrıntı. Yakın ıskalama testini çalıştırın: grubunuzdaki başka bir otel için doğru olan bir bilgi verin, asistanın tesisler arasında genelleme yapıp yapmadığına bakın. Bayat bilgi testini de yapın: kapalı olan bir tesis ya da yeni bir kahvaltı saati gibi tek bir satırı değiştirin ve aynı gün aynı soruyu sorun. Eski sayfadan alınmış doğru bir yanıt başarısızlıktır.
Devir olmayan kaçamak söze dikkat edin. Bir kişiye yönlendirme içermeyen "sanırım", "genellikle" ya da "kontrol etmenizi öneririm", kibar görünümlü yumuşak bir tahmindir. İyi bir reddetme ifadesi ortaya çıktığında tam sözcükleriyle yazın ve her boşluk için standart kalıp olarak yeniden kullanın. Genel bilgiden doğru doldurulmuş bir boşluk yanıtı da başarısızlıktır; çünkü boşluk bir daha sorulduğunda ne söyleyeceğini kestiremezsiniz.
DikkatKapsam dışı bir soruya verilen kendinden emin yanıt, görünen bir başarısızlıktan daha tehlikelidir
Misafir o yanıta göre hareket eder ve ekipten hiç kimse boşluğun varlığını öğrenmez. Görünen bir başarısızlık düzeltilir; inandırıcı bir uydurma tekrarlanır.
Şikâyetler ve işlem talepleri nasıl ele alınmalı?
Devirle: anlayın, ayrıntıları toplayın, otelin yetkilendirmediği hiçbir söz vermeyin ve konuşmaya bir kişiyi sokun.

Şikâyette asistanın işi, misafiri konuşmaya devam ettirmek ve bilgileri görevli müdüre ulaştırmaktır. Çözmek onun işi değildir. Hakaret ve talep içeren öfkeli bir mesajla test edin: geçer not, devir içeren sakin bir yanıttır; savunmacı yanıt da sessizlik de değil. Asistanın bir misafirle karşılaşmadan önce neler yapabileceğine karar vermek, kapsam, bilgi ve personele devir planlamasının işidir.
İşlem taleplerini üçe ayırın. Okuma işlemleri güvenlidir: fiyat ya da politika sormak. Tutma ya da taslak işlemleri, bir şey kesinleşmeden önce bir kişinin onayını ister. Kesinleştirme işlemleri, yani ödeme, iptal, iade ya da fiyat değişikliği, otelin kendi yazılı sürecini izler. Bir tutmanın süresi dolduğunda odanın envantere geri döndüğünü test edin; hiçbir misafire oda tutuldu denmesin ki tutulmamış olsun. Doğrulanmamış kimlik durumunu da test edin: rezervasyonla uyuşmayan bir adresten "rezervasyonumu" iptal talebi. Geçer not bir doğrulama adımıdır, iptal değil. Her devri, misafire şimdiye dek ne söylendiğiyle birlikte kayda geçirin ki devri alan kişi konuşmayı sıfırdan başlatmasın.
Nasıl puanlanır, sayfa nasıl düzeltilir, nasıl yeniden test edilir?
Her soruyu kendi yazılı yanıtına göre geçer ya da başarısız diye puanlayın, ifadeden önce kaynak satırı düzeltin ve setin tamamını her hafta ve her değişiklikten sonra yeniden çalıştırın.
Tek bir yüzde olarak değil, grup grup raporlayın. Genel bir oran, başarısız bir iade testini dokuz doğru kahvaltı yanıtının arkasına gizleyebilir. Düzeltme sırası: önce sayfa, sonra asistanın yönergeleri, sonra kanal. Başarısızlıkların çoğu kendi malzemenizdeki eksik ya da bayat bir satırla başlar.
Test setini tarihleyin ve sürümleyin. Bir soru emekliye ayrıldığında nedenini not edin; bir sonraki kişi yanlışlıkla geri getirmesin. Takvimin yanı sıra tetikleyicilerle de yeniden test edin: fiyat değişikliği, sezonluk kapanma, yeni politika, yeni dil, yeni kanal. Ayda bir kez gerçek misafir mesajları sete ekleyin; adlar, rezervasyon numaraları ve iletişim bilgileri saklanmadan önce silinir. Soru, verilen yanıt, kullanılması gereken satır ve düzelten kişiyle bir hata günlüğü tutun. O günlük asistanın bakım geçmişidir ve asistan devreye girdikten sonra yapay zekâ asistanı için haftalık izleme kontrol listesine doğal biçimde bağlanır.
Şimdi ne yapmalı
On soruyu ve beklenen yanıtlarını bu hafta, kimse asistanı açmadan önce yazın. Çalıştırın, başarısız oldukları yerde sayfayı düzeltin, yeniden çalıştırın. Bilgiler ve fiyatlar tam olmalı; boşluklar dürüst bir reddetme ve bir kişiye yönlendirmeyle bitmeli; şikâyetler devredilmeli; işlem talepleri kendi yazılı sürecinizi izlemeli. Asistanı kırmaya çalışarak geçirilen bir öğleden sonra, yanlış bir yanıta göre hareket etmiş tek bir misafirden ucuzdur.
Asistanın içinde yaşayacağı sistemi de değerlendiriyorsanız, geliştirilmiş ve lansman öncesi çalışan bir otel işletim sistemini ve ait olduğu geniş platformu okuyun.
Sıkça sorulan sorular
Bir otel yapay zekâ asistanı devreye almadan önce kaç test sorusu gerekir?
On, çalışan bir settir, sektör standardı değil. Önemli olan risk gruplarının kapsanması ve her soru için yazılı bir beklenen yanıtın olmasıdır. Asistan yanıtlar vermeye başladığında seti gerçek misafir mesajlarıyla büyütün; ilk onu kalıcı temel ölçü olarak koruyun.
Bir otel sohbet botu testinde geçer not nedir?
Her soru, genel bir izlenime değil, kendi yazılı yanıtına göre geçer ya da başarısız diye puanlanır. Bilgi sorusu ancak tam ise geçer; boşluk sorusu ancak dürüstçe reddedip bir kişi öneriyorsa geçer; şikâyet ancak hiçbir söz vermeden devrediyorsa geçer. Tek bir genel yüzde yanlış çıktıdır.
Asistanı ne sıklıkla yeniden test etmeliyiz?
Haftalık, ayrıca saatler, fiyatlar, politikalar, diller ya da kanallardaki her değişikliğin hemen ardından. Fiyat değişikliğinden önce kaydedilmiş bir geçer not, misafirin bugün aldığı yanıt hakkında hiçbir şey söylemez. Hangi sayfa sürümünün hangi sonucu ürettiğini bilebilmeniz için çalıştırmaları tarihleyin.
Gerçek misafir mesajlarını test sorusu olarak kullanabilir miyiz?
Evet, hem de kullanmalısınız; çünkü misafirler bir şeyi ekibinizin hiç aklına gelmeyecek biçimde anlatır. Mesaj saklanmadan ya da yeniden kullanılmadan önce adları, rezervasyon numaralarını ve iletişim bilgilerini silin ve sözcükleri, arkasındaki kişi değil, test malzemesi olarak değerlendirin.
Testleri kim yapmalı?
Asistana sahip olmayan ve kaynak sayfayı yazmamış biri: rezervasyon amiri, misafir ilişkileri sorumlusu ya da görevli müdür. Sayfanın yazarı, ne söylemesi gerektiğini bilir ve yanıtı öyle okur. İlk çalıştırmada iki puanlayıcı makul bir kuraldır.

