Kendi adına, Güncellenmiş bir SSS’de şaşkınlık söylendi web tarayıcısı PerplexityBot’un, robots.txt kodunu kullanarak izin vermeyen hiçbir sitenin metin içeriğinin tamamını veya bir kısmını dizine eklemeyeceğini. Robots.txt dosyaları, web tarayıcılarına bir web sitesinin hangi sayfalarını veya bölümlerini taramalarına ve dizine eklemelerine izin verildiği konusunda talimat vermek üzere bir web sunucusunda depolanan yaygın basit metin dosyalarıdır.
SSS’de “PerplexityBot yalnızca robots.txt ile uyumlu içeriği tarar” diye açıklandı. Perplexity ayrıca “temel modeller” (büyük dil modelleri olarak da bilinir) oluşturmadığını, “bu nedenle içeriğinizin AI modeli ön eğitimi için kullanılmayacağını” söyledi.
Yamin, sonuçta genAI geliştikçe arama motorlarının “zor bir konumda” olduğunu söyledi. “Artan oranda yapay zeka tarafından oluşturulan veya yapay zeka ile geliştirilmiş içerik içeren kullanıcılara en iyi sonuçları sunmak istiyorlar. Aynı zamanda orijinal içerik oluşturucuları korumaları ve arama sonuçlarının bütünlüğünü sürdürmeleri gerekiyor. Bu dengeyi kurmaya yönelik çabalar görüyoruz ancak bu, tamamen ele alınması zaman alacak karmaşık bir konu.”
