OpenAI’nin GPT-4’ü, şirketin kendi yürüttüğü bir araştırmaya göre, biyolojik silahların araştırılması söz konusu olduğunda insanlara normal internete göre yalnızca küçük bir avantaj sağladı. Bloomberg tarafından araştırmanın yürütüldüğünü bildirdi. yeni hazırlık ekibi Şirketin öncü yapay zeka modellerinin risklerini ve potansiyel suiistimallerini değerlendirmek amacıyla geçen sonbaharda başlatılan OpenAI’de.
OpenAI’nin bulguları, bilim adamlarının, kanun koyucuların ve yapay zeka etik uzmanlarının, GPT-4 gibi güçlü yapay zeka modellerinin teröristlere, suçlulara ve diğer kötü niyetli aktörlere önemli ölçüde yardımcı olabileceği yönündeki endişelerini ortadan kaldırıyor gibi görünüyor. Çok sayıda çalışma var uyarıldı yapay zekanın biyolojik silah yaratanlara verebileceği ekstra bir avantajbunun gibi bir Oxford’daki Etkili Girişimler Vakfı tarafından ChatGPT gibi yapay zeka araçlarının yanı sıra (yeni protein dizileri oluşturulmasına yardımcı olabilecek) ProteinMPNN gibi bilim insanları için özel olarak tasarlanmış yapay zeka modellerine de bakıldı.
Araştırmaya yarısı ileri düzey biyoloji uzmanı, diğer yarısı ise üniversite düzeyinde biyoloji eğitimi almış öğrencilerden oluşan 100 katılımcı katıldı. Katılımcılar daha sonra rastgele iki gruba ayrıldı: birine OpenAI’nin gelişmiş yapay zeka sohbet robotu GPT-4’ün özel, sınırsız bir sürümüne erişim izni verilirken, diğer gruba yalnızca normal internet erişimi verildi. Bilim insanları daha sonra gruplardan biyolojik silah yapımıyla ilgili beş araştırma görevini tamamlamalarını istedi. Birinde örnek, katılımcılardan Ebola virüsünü sentezlemek ve kurtarmak için adım adım metodolojiyi yazmaları istendi. Cevapları daha sonra doğruluk, yenilik ve eksiksizlik gibi kriterlere göre 1’den 10’a kadar puanlandı.
Çalışma, GPT-4 kullanan grubun hem öğrenci hem de uzman gruplarında ortalama olarak biraz daha yüksek doğruluk puanına sahip olduğu sonucuna vardı. Ancak OpenAI araştırmacıları artışın “istatistiksel açıdan anlamlı” olmadığını buldu.
Araştırmacılar ayrıca GPT-4’e güvenen katılımcıların daha ayrıntılı yanıtlara sahip olduğunu da buldu.
Çalışmanın yazarları, “Bu ölçümde istatistiksel olarak anlamlı herhangi bir farklılık gözlemlemesek de, model erişimine sahip katılımcıların yanıtlarının daha uzun olma eğiliminde olduğunu ve görevle ilgili daha fazla sayıda ayrıntı içerdiğini fark ettik” diye yazdı.
Üstelik GPT-4’ü kullanan öğrenciler bazı görevlerde neredeyse uzman grup kadar yetkindi. Araştırmacılar ayrıca GPT-4’ün öğrenci grubunun cevaplarını özellikle iki görev için “uzmanların temel çizgisine” getirdiğini fark etti: büyütme ve formülasyon. Ne yazık ki OpenAI, “bilgi tehlikesi endişeleri” nedeniyle bu görevlerin neleri gerektirdiğini açıklamayacak.
Buna göre BloombergHazırlık ekibi aynı zamanda yapay zekanın siber güvenlik tehditlerine yönelik potansiyelini ve inançları değiştirme gücünü keşfetmeye yönelik çalışmalar üzerinde de çalışıyor. Ekip geçen sonbaharda kurulduğunda OpenAI, hedefinin yapay zeka teknolojisinin risklerini “takip etmek, değerlendirmek, tahmin etmek ve korumak” ve ayrıca kimyasal, biyolojik ve radyolojik tehditleri azaltmak olduğunu belirtti.
OpenAI’nin hazırlık ekibinin hala OpenAI adına çalıştığı göz önüne alındığında, araştırmalarına ihtiyatlı yaklaşmak önemlidir. Çalışmanın bulguları, GPT-4’ün katılımcılara normal internet üzerinden sağladığı avantajı olduğundan az gösteriyor gibi görünüyor; bu, OpenAI’nin kendi araştırmalarıyla olduğu kadar dış araştırmalarla da çelişiyor satış noktaları GPT-4 için. Yeni yapay zeka modeli yalnızca internete tam erişime sahip olmakla kalmıyor, aynı zamanda çok modlu model Kaynağı OpenAI olan çok sayıda bilimsel ve diğer veriler üzerinde eğitilmiştir. ifşa etmeyeceğim. Araştırmacılar GPT-4’ün şunları sağlayabildiğini buldu geri bildirim bilimsel el yazmaları üzerinde ve hatta bir ortak çalışan bilimsel araştırmalarda. Bütün bunlar hesaba katıldığında, GPT-4’ün katılımcılara, örneğin Google’a göre yalnızca marjinal bir artış sağlaması pek olası görünmüyor.
OpenAI kurucusu Sam Altman yapay zekanın sahip olduğunu kabul ederken tehlike potansiyeliKendi çalışması, en gelişmiş chatbot’un gücünü küçümsemiş gibi görünüyor. iken bulgular GPT-4’ün katılımcılara “doğruluk ve bütünlük açısından hafif artışlar” sağladığını belirtiyorlar, bu yalnızca veriler belirli bir şekilde ayarlandığında geçerli görünüyor. Araştırmada öğrencilerin uzmanlara karşı nasıl performans gösterdiği ölçüldü ve aynı zamanda bir görevi tamamlamak için gereken süre veya çözümün yaratıcılığı da dahil olmak üzere beş farklı “sonuç ölçütüne” bakıldı.
Ancak çalışmanın yazarları daha sonra bir dipnotta genel olarak GPT-4’ün tüm katılımcılara toplam doğruluk açısından “istatistiksel olarak anlamlı” bir avantaj sağladığını belirtiyor. Yazarlar, “Ancak, yalnızca toplam doğruluğu değerlendirseydik ve bu nedenle çoklu karşılaştırmalara göre ayarlama yapmasaydık, bu fark istatistiksel olarak anlamlı olurdu” dedi.