Ne bilmek istiyorsun
- Bir grup bilim insanı yakın zamanda önde gelen yapay zeka sohbet robotlarının Star Trek’te olduklarına inanmalarının onları matematik problemlerini çözmede daha iyi hale getirdiğini keşfetti.
- Çalışma ayrıca “ChatGPT kadar akıllısın” gibi motive edici ve teşvik edici ifadelerin, chatbot’un matematiksel sorguları daha iyi ele almasına yardımcı olduğunu ortaya çıkardı.
- Araştırmacılar çalışmayı Meta’nın Llama 2 ve Mistral AI’nın iki versiyonuna odakladılar.
- Kullanıcılar, sohbet robotlarının yanlış yanıtlar vermesiyle ilgili şikayette bulundu ve hatta onları “aptal” olarak damgaladı.
Yapay zeka destekli sohbet robotlarının istediğinizi yapmasını nasıl sağlayacağınıza dair son bölümde, onları matematik problemlerine doğru yanıtlar ve cevaplar üretmeleri için nasıl kandırabileceğinizi öğreneceğiz.
Bir süredir belirli istemlerin sohbet robotlarını tam potansiyellerine itme eğiliminde olduğunu ve sonuçta kullanıcılara daha iyi ve daha kusursuz bir deneyim sunduğunu biliyorduk. Bir kullanıcının, OpenAI’nin ChatGPT’sine bahşiş veriyormuş gibi davrandığınızda doğru ve ayrıntılı yanıtlar üretme eğiliminde olduğunu keşfettiğini hatırlıyor musunuz?
Kullanıcılar, geçtiğimiz birkaç ay boyunca sosyal medya platformlarında, bu sohbet robotlarını kullanırken kötüleşen kullanıcı deneyiminden bariz bir şekilde şikayette bulundular. Bazı kullanıcılar, sohbet robotlarının sorgulara yanlış ve yanlış bilgilendirilmiş yanıtlar ürettiğini belirten raporlar sundu (hatta bazıları, sohbet robotlarının giderek aptallaştığını bile söyledi).
DEVAMINI OKU: Copilot, Rusya’nın muhalefet lideri hakkında sahte açıklamalar yaptı
İlginç bir şekilde, VMware’den bir grup bilim insanı yakın zamanda garip bir keşifte bulundu. Yeni araştırmalarına göre, yapay zeka destekli sohbet robotlarına, bilim kurgu dizisi Star Trek’teymiş gibi davranmalarını söylerseniz (NewScientist aracılığıyla) matematikle ilgili sorgulara daha iyi yanıt veriyorlar.
Bağlam için, Yıldız Savaşları teknoloji, çeşitlilik, etik ve keşif gibi çeşitli temalara odaklanan bir bilim kurgu dizisidir. Televizyon şovunun hikayesi, insanların gezegenler ve türler arasında işbirliği yaptığı bir geleceği tasvir ediyor. Dizinin inceliklerine daha derinlemesine girmesek de Kaptan Kirk, Spock ve Picard gibi ikonik ve unutulmaz karakterlere yer veriyor. Hevesli ve deneyimli Trekki’ler, gösterinin birkaç yan dizi ortaya çıkardığını biliyor.
Yapay zeka sohbet robotlarının matematikte daha iyi olmasını nasıl sağlayabiliriz?
Araştırmanın arkasındaki bilim insanları, sohbet robotlarının matematik problemlerine ve denklemlere daha doğru yanıtlar vermesini sağlamak için olumlu pekiştirme de dahil olmak üzere farklı yollar denedi. Bu, “Derin bir nefes alın ve bunun üzerinde adım adım çalışın” gibi dostane motivasyon ifadelerinin kullanılmasını içeriyordu ve bu ifadeler, “ChatGPT kadar akıllısınız veya Bu eğlenceli olacak!” gibi olumlu kapanış sözleriyle tamamlandı.
AYRICA OKUYUN: Microsoft Copilot’un kötü ikizi SupremacyAGI var
Bilim insanları bu testleri ve deneyleri Meta’nın Llama 2 ve Mistral AI’nın iki versiyonu üzerinde gerçekleştirdiler ve bulgularına göre:
“İstemde yapılan önemsiz değişikliklerin performansta bu kadar dramatik dalgalanmalar sergilemesi hem şaşırtıcı hem de rahatsız edici.”
Araştırmacılar, sorgulara eklenen motive edici ifadelerin ve açıklamaların chatbot’un yanıtlarını olumlu yönde etkileyip etkilemediğini belirlemek için GSM8K’yi (standart bir ilkokul matematik problemi) kullandı.
Başlangıçta bu hilelerin etkisi belirsizdi. Bunun nedeni, bazı sohbet robotlarının çıktılarında önemli gelişmeler tespit ederken diğerlerinin aynı kalmasıdır. Bilim insanları, sohbet robotlarının çıktı doğruluğunu artırmak amacıyla farklı istem çeşitlerini kullanmak için otomatik bir süreçten yararlandı. Bilim adamlarının el yazısıyla yazılan yönlendirmelerle karşılaştırıldığında, hedefe ulaşmanın daha verimli ve etkili bir yol olduğu kanıtlandı.
Bulgularına göre, aşağıdaki ifadeyle bir ipucuna başlamanın, matematik sorularına en doğru yanıtları vermede oldukça verimli ve etkili olduğu kanıtlandı:
“Kaptanın Seyir Defteri, Yıldız Tarihi [insert date here]:.”
Sonuç olarak bu, bilim adamlarını, doğrudan Star Trek’ten alınan ve komut istemine entegre edilen bazı referansların sohbet robotunun performansını olumlu yönde etkilediğine ve sonuçta matematiksel sorgulara verilen yanıtların kalitesini artırdığına ve iyileştirdiğine inanmaya yöneltti.
Şaşırtıcı bir şekilde, modelin matematiksel muhakeme yeterliliğinin Star Trek’e olan yakınlığının ifade edilmesiyle artırılabileceği görülüyor.
VMware araştırmacıları
İnsanların belirli görevlerde iyi performans göstermeleri karşılığında ödüllendirildiklerinde veya teşvik edildiklerinde işlerinde daha iyi performans gösterme olasılıkları daha yüksektir. Aynı durum rüşvet aldığınızda da geçerlidir. Belki bu durum yapay zeka destekli sohbet robotları için de geçerlidir. Bu, bir kullanıcı iyi yapılmış bir iş için bahşiş veriyormuş gibi davrandığında veya bilgi isteminde motivasyon ve övgü ifadeleri içerdiğinde modellerin neden daha iyi çıktılar ürettiğine dair makul bir açıklamadır.