Birçok yazılım geliştiricisi, AI Web-Plawing Bots’un İnternet’in hamamböceğidir. Bazı geliştiriciler ustaca, genellikle mizahi yollarla savaşmaya başladı.
Herhangi bir web sitesi kötü tarama davranışı tarafından hedeflenebilirken – bazen siteyi indirmek – açık kaynak geliştiricileri “orantısız” etkilenir, yazıyor Plazma olarak bilinen bir Linux masaüstünün geliştiricisi ve Librenews blogunun sahibi Niccolò Venerandi.
Doğası gereği, ücretsiz ve açık kaynaklı (FOSS) projelere ev sahipliği yapan siteler, altyapılarının daha fazlasını kamuya açıklar ve aynı zamanda ticari ürünlerden daha az kaynağa sahip olma eğilimindedirler.
Sorun şu ki, birçok AI botu, botlara, başlangıçta arama motoru botları için oluşturulan neyi taramayacağını söyleyen araç olan Robotlar Dışlama Protokolü Robot.txt dosyasını onurlandırmıyor.
“Yardım Çığlığı” nda Blog yazısı Ocak ayında, FOSS geliştiricisi XE IOSO, Amazonbot’un bir GIT Server web sitesinde DDOS kesintilerine neden olduğu noktaya nasıl acımasızca dövüldüğünü açıkladı. GIT sunucuları, kodu indirebilir veya buna katkıda bulunabilmesi için Foss projelerini barındırır.
Ancak bu bot, IOSO’nun robotunu görmezden geldi, diğer IP adreslerinin arkasına saklandı ve diğer kullanıcılar gibi davrandı.
“Yalan söyledikleri, kullanıcı aracısını değiştirdikleri, konut IP adreslerini vekil olarak ve daha fazlasını kullandıkları için AI paletli botları engellemek boşuna” dedi.
“Sitenizi düşene kadar kazıyacaklar ve sonra biraz daha kazanacaklar. Her bağlantıdaki her bağlantıyı tekrar tekrar görüntüleyerek her bağlantıyı tıklayacaklar. Bazıları aynı saniyede aynı bağlantıya bile tıklayacaklar,” diye yazdı geliştirici yazı.
Mezarların Tanrısını Girin
Böylece Ioso, Anubis adlı bir araç inşa ederek akıllıca savaştı.
Anubis Ters proxy iş kanıtı kontrolü İsteklerin bir GIT sunucusuna basmasına izin verilmeden önce geçirilmelidir. Botları engeller, ancak insanlar tarafından işletilen tarayıcılardan geçer.
Komik kısım: Anubis, Mısır mitolojisinde ölüleri yargıya götüren bir tanrının adıdır.
“Anubis ruhunuzu (kalbinizi) tarttı ve eğer bir tüyden daha ağır olsaydı, kalbiniz yenildi ve Mega öldü,” dedi. Bir web isteği meydan okumayı geçerse ve insan olmaya kararlıysa, Sevimli bir anime resmi başarıyı duyurur. Iato, çizim “antropomorfizasyon anubis’i almam” diyor. Eğer bir botsa, istek reddedilir.
Türlü adlandırılmış proje, Foss topluluğu arasında rüzgar gibi yayıldı. IOSO Github’da paylaştı 19 Mart’ta ve sadece birkaç gün içinde 2.000 yıldız, 20 katılımcı ve 39 çatal topladı.
Savunma olarak intikam
Anubis’in anlık popülaritesi, Ioso’nun ağrısının benzersiz olmadığını gösteriyor. Aslında, Venerandi hikayeden sonra hikaye paylaştı:
- Kurucu CEO Sourcehut Drew DeVault tarif etti “Herhangi bir haftada zamanımın% 20-100’ünden hiper-agresif LLM tarayıcılarını ölçekte hafifletiyor” ve “haftada düzinelerce kısa kesinti deneyimliyor”.
- Linux Industry Haber Sitesi LWN’i yöneten ünlü bir Foss geliştiricisi Jonathan Corbet, sitesinin olduğu konusunda uyardı DDOS düzeyinde trafik ile yavaşlamak “AI Scraper Bots’tan.”
- Kevin Fenzi, Muazzam Linux Fedora Projesinin Sysadmins, dedi AI kazıyıcı botlar Çok agresif olmuş olsaydı, tüm Brezilya ülkesini erişimden engellemek zorunda kaldı.
Venerandi, TechCrunch’a aynı sorunları yaşayan birçok projeyi bildiğini söyler. Bunlardan biri “tüm Çin IP adreslerini bir noktada geçici olarak yasaklamak zorunda kaldı.”
Venerandi, sadece robot.txt dosyalarını görmezden gelen yapay zeka botlarını savuşturmak için bir an için batmasına izin verin – geliştiricilerin “tüm ülkeleri yasaklamaya bile dönmesi gerekiyor” diyor.
Bir web talep eden kişinin ruhunu tartmanın ötesinde, diğer geliştiriciler intikamın en iyi savunma olduğuna inanıyor.
Birkaç gün önce Hacker haberlerikullanıcı Xyzal Önerilen Robot.txt Yasak Sayfaları “İçme Ağartıcısının Faydaları Üzerine Bir Kova Yük Makalesi” veya “Yakalamanın Yatakta Performans Üzerindeki Olumlu Etkisi” ile ilgili makaleler.
Xyzal, “Botların _negative_ yardımcı değer değerinin sadece sıfır değeri değil, tuzaklarımızı ziyaret etmesini hedeflememiz gerektiğini düşünün” dedi.
Olduğu gibi, Ocak ayında, “Aaron” olarak bilinen anonim bir yaratıcı Nepentler Bu tam olarak bunu yapmayı amaçlıyor. Dev’in sonsuz bir labirentini, devin kabul ettiği bir hedefi yakalar. Ars Technica düpedüz kötü niyetli olmasa da agresiftir. Araç, etobur bir bitkinin adını almıştır.
Ve belki de en büyük ticari oyuncu olan Cloudflare, AI tarayıcılarını savuşturmak için birkaç araç sunan, geçen hafta AI Labyrinth adlı benzer bir araç yayınladı.
Cloudflare, AI tarayıcılarının ve ‘tarama yok’ direktiflerine saygı duymayan diğer botların kaynaklarını “yavaşlatmak, karıştırmayı ve boşa harcamayı ve boşa harcamayı” amaçlıyor Blog yazısında. Cloudflare, yanlış davranan AI tarayıcılarını “meşru web sitesi verilerinizi çıkarmak yerine alakasız içerik” beslediğini söyledi.
SourceHut’un DeVault, TechCrunch’a “Nepenthes’in tatmin edici bir adalet duygusu var, çünkü kuyularını zehirler ve zehirler için saçmalık besliyor, ancak sonuçta Anubis sitesi için işe yarayan çözüm” dedi.
Ancak DeVault ayrıca daha doğrudan bir düzeltme için halka açık, yürekten bir itiraz yayınladı: “Lütfen LLM’leri veya AI görüntü jeneratörlerini veya Github Copilot’u veya bu çöplerden herhangi birini meşrulaştırmayı bırakın. Onları kullanmayı bırakmanız, onlar hakkında konuşmayı bırakmanız, yenileri yapmayı bırak, sadece durdurun.”
Bunun olasılığı Zilch olduğundan, geliştiriciler, özellikle Foss’ta, zeka ve mizah dokunuşu ile savaşıyorlar.
