Kısa yanıt
Şirket verisiyle AI asistanı kurmadan önce belgeleri kaynak, sahip, güncellik ve erişim grubu bazında envanterleyin; yetkiyi belgeyle birlikte taşıyın ve güncelleme ile silme akışını tanımlayın. Veri hazır değilse asistanın kalitesi model değiştirerek düzelmez.
Kaynak envanteri
Belgeleri kaynak, içerik sahibi, güncellik ve erişim grubu bazında listeleyin. Birbirini tekrar eden ve çelişen sürümleri ayırın. Görsel PDF ile metin içeren doküman farklı işleme gerektirebilir.
Yetkiyi belgeyle birlikte taşıyın
Sadece uygulamaya giriş yaptırmak belge yetkisini çözmez. Arama sonucu kullanıcının erişebileceği kaynaklarla sınırlanmalıdır. İndeks kayıtları belge kimliği ve erişim bilgisini korumalıdır.
Güncelleme ve silme
Kaynakta değişen veya silinen belgenin ne zaman sisteme yansıyacağı belirlenmelidir. Eski içerikten yanıt verilmesi süreçleri yanlış yönlendirebilir. Yenileme başarısızlıkları izlenmelidir.
Değerlendirme soruları
Sık sorulan doğru yanıtlı soruların yanında yanıtsız kalması gereken ve yetkisiz kaynak isteyen sorular da hazırlayın. Kaynak uygunluğu, hata ve veri erişim davranışı birlikte sınanmalıdır.
Veri kalitesi sorunları
Asistanın yanıt kalitesini en çok etkileyen sorunlar çoğu zaman belge kaynaklıdır: birbirinin yerini almış çelişkili sürümler, taranmış ve okunamayan sayfalar, sahipsiz ve güncelliği belirsiz belgeler ve tabloya ya da şekle gömülmüş bilgi. Bu sorunları indekslemeden önce sınıflandırmak, yanlış yanıtın nedenini sonradan aramaktan ucuzdur.
Uygulamaya geçmek için bir çalışma
Aynı konuda farklı tarihlerden iki belge varsa hangisinin yetkili kaynak olduğunu belirleyin. Belgeleri rol bazlı erişimle deneyin; izni olmayan kullanıcıya başlık veya alıntı sızmadığını kontrol edin. Cevabı kaynakta bulunmayan sorular da test setinde yer alsın. Asistanın yanıt vermemesi gereken durumlar, doğru yanıt örnekleri kadar açık tanımlanmalıdır.
Sık sorulan sorular
Bu konuda sık sorulan iki soru.
Belgelerin hepsini yüklemek gerekir mi?
Hayır. Önce asistanın yanıtlayacağı sorulara uygun, güncel ve yetkili kaynakları seçin. Az sayıda iyi kaynak, çok sayıda belirsiz kaynaktan daha iyi sonuç verir.
Hassas belgeler nasıl ele alınır?
Erişim hakları arama aşamasında uygulanmalı, hassas içerik yetkisiz kullanıcıya bağlam olarak verilmemelidir. Hangi verinin hangi hizmete gideceği yazılı netleştirilmeden belge paylaşılmamalıdır.