Teknoloji

Perplexity’nin web sitelerinin robots.txt dosyasını ihlal etmesi iddiaları gündemde

Perplexity’nin web sitelerinin robots.txt dosyasını ihlal etmesi iddiaları gündemde
Haberleri Kaçırma! Teknoblog'u Google Arama'da tercihli kaynağın yap ve En Çok Okunan Haberler'de bizi daha sık gör.
Tercihli Kaynak Ekle

Kendisini “ücretsiz bir AI arama motoru” olarak tanımlayan bir şirket olan Perplexity, son günlerde çeşitli eleştirilerle karşı karşıya. Forbes’un, Perplexity’yi haberlerini çalmakla ve çeşitli platformlarda yeniden yayınlamakla suçlamasının hemen ardından, Wired da şirketin Robots.txt Protokolü’nü görmezden geldiğini ve Condé Nast yayınları dahil olmak üzere çeşitli web sitelerini kazıdığını haberleştirdi. Teknoloji sitesi The Shortcut da şirketin makalelerini aldığını iddia etti. Son olarak da Reuters, Perplexity’nin bu ihlalleri yapan tek AI şirketi olmadığını bildirdi.

Reuters, AI firmaları ile yayıncıları lisans anlaşmaları yapmaları için eşleştiren bir girişim olan TollBit’ten yayıncılara gönderilen bir mektubu gördüğünü belirtti. Bu mektup, “birçok kaynaktan gelen AI ajanlarının (sadece bir şirket değil) içerik toplamak için robots.txt protokolünü atlamayı tercih ettikleri” hususunda uyarıyordu. Robots.txt dosyası, web tarayıcılarına hangi sayfalara erişebilecekleri ve hangilerine erişemeyecekleri konusunda talimatlar içerir. Web geliştiriciler bu protokolü 1994 yılından beri kullanıyor, ancak uyumluluk tamamen gönüllülük esasına dayanıyor.

TollBit’in mektubunda herhangi bir şirket ismi verilmemiş olsa da, Business Insider’ın öğrendiğine göre sırasıyla ChatGPT ve Claude chatbotlarının geliştiricileri olan OpenAI ve Anthropic de robots.txt sinyallerini görmezden geliyor. Her iki şirket de daha önce web sitelerinin robots.txt dosyalarına ekledikleri “tarama yapma” talimatlarına saygı gösterdiklerini iddia etmişti.

Wired’ın araştırması sırasında, bir Amazon sunucusunda “kesinlikle Perplexity tarafından işletilen” bir makinenin web sitesinin robots.txt talimatlarını görmezden geldiği ortaya çıktı. Wired, Perplexity’nin içeriğini alıntılayıp alıntılamadığını doğrulamak için, şirketin aracına makalelerinin başlıklarını veya hikayelerinin kısa açıklamalarını sağladı. Araç, makalelerini “minimum atıfla” yakın biçimde yeniden yazan sonuçlar üretti. Hatta zaman zaman hikayelerinin yanlış özetlerini bile oluşturdu. Wired, chatbot’un belirli bir Kaliforniya polisinin suç işlediğini iddia eden yanlış bir haber oluşturduğunu belirtti.

Fast Company ile yaptığı röportajda, Perplexity CEO’su Aravind Srinivas, şirketinin “Robot Exclusions Protokolü’nü görmezden gelmediğini ve sonra bu konuda yalan söylemediğini” söyledi. Ancak, bu, protokolü görmezden gelen tarayıcılardan fayda sağlamadığı anlamına gelmiyor. Srinivas, şirketin kendi tarayıcılarının yanı sıra üçüncü taraf web tarayıcılarını da kullandığını ve Wired’ın belirlediği tarayıcının bunlardan biri olduğunu açıkladı. Fast Company, Perplexity’nin tarayıcı sağlayıcısına Wired’ın web sitesini kazımayı bırakmasını söyleyip söylemediğini sorduğunda, Srinivas yalnızca “bu karmaşık” yanıtını verdi.

Srinivas, şirketinin uygulamalarını savunarak, Robots.txt Protokolü’nün “yasal bir çerçeve olmadığını” belirtti ve yayıncılar ile şirketler arasında yeni bir tür ilişkinin kurulması gerekebileceğini önerdi. Ayrıca Wired’ın, Perplexity’nin chatbot’unun bu şekilde davranmasını sağlamak için kasıtlı olarak belirli girdiler kullandığını ima etti, bu nedenle sıradan kullanıcılar aynı sonuçları alamayacaklar. Aracın ürettiği yanlış özetler hakkında ise Srinivas, “Hiçbir zaman halüsinasyon görmediğimizi söylemedik.” dedi.

⚡️⚡️ BU FIRSATLAR İLGİNİZİ ÇEKEBİLİR ⚡️⚡️

MSI 23.8\" PRO MP243X 1920x1080 (FHD) FLAT IPS 100HZ 1MS ADAPTIVE-SYNC MONITOR
MSI G2712F 27\" Ultra Rapıd 1ms 180Hz Adaptive-Sync IPS Full HD Gaming (Oyuncu) Monitör
Bilgisayarda Kaçmaz Fırsatlar
Seçili Dyson Süpürgelerinde Net İndirim
Seçili Dyson Ürünlerinde 3000 TL İndirim
Game Garaj Elite S67 Amd R5 7500F 32GB Ram 1tb SSD RTX5070 120MM Sıvı Soğt Freedos Oyuncu Oem Paket
Asus Prime Lc 360 Argb 360 mm Intel-Amd Uyumlu Sıvı Soğutucu
Hepsiburada Satıcılı Monitörlerde Sepette %5 Net İndirim
Samsung S26 Ailesi Ürünlerinden Alana Samsung Watch 8 5000 TL İndirimli!

Teknoblog'un satış ortaklıkları vardır. Bunlar, editoryal içeriği etkilemez, ancak Teknoblog, satış ortaklığı bağlantıları üzerinden satın alınan ürünler için komisyon kazanabilir.