Teksas’ta bu hafta eyaletin zorunlu kıldığı sınavlara giren öğrenciler, bölgedeki insan not verenlerin çoğunluğunun yerini alacak yapay zeka destekli yeni bir puanlama sistemi için kobay olarak kullanılıyor.
Teksas Tribünü raporlar Doğal dil işlemeyi (OpenAI’nin ChatGPT’si gibi sohbet robotlarının kullanıcıları anlamasını ve onlarla iletişim kurmasını sağlayan teknoloji) kullanan bir “otomatik puanlama motoru”, Texas Eyaleti ile ilgili açık uçlu soruları notlamak için Teksas Eğitim Ajansı (TEA) tarafından kullanıma sunuluyor Akademik Hazırlık (STAAR) sınavlarının değerlendirilmesi. Ajans, sistemin geçici insan puanlayıcılara olan ihtiyacı azaltarak yılda 15-20 milyon dolar tasarruf etmesini bekliyor ve 2023’te gerekli olan 6.000 personele kıyasla bu yıl 2.000’in altında sınıf öğrencisi işe almayı planlıyor.
“Mümkün olduğunca çok sayıda yapılandırılmış açık uçlu yanıt tutmak istedik, ancak bunların puanlanması inanılmaz miktarda zaman alıyor.”
Üçüncü ve sekizinci sınıflar arasındaki öğrencilerin temel müfredata ilişkin anlayışlarını test eden STAAR sınavları, geçen yıl daha az sayıda çoktan seçmeli soru içerecek şekilde yeniden tasarlandı. Artık yedi kat daha fazla açık uçlu soru içeriyor; TEA öğrenci değerlendirme direktörü Jose Rios, ajansın “olabildiğince çok sayıda yapılandırılmış açık uçlu yanıt tutmak istediğini, ancak bunların puanlanmasının inanılmaz miktarda zaman aldığını” söyledi. ”
düzenlenen bir slayt gösterisine göre TEA’nın web sitesiYeni puanlama sistemi, halihazırda iki tur insan derecelendirmesi almış olan 3.000 sınav yanıtı kullanılarak eğitildi. Bazı güvenlik ağları da uygulandı; bilgisayarda derecelendirilen tüm sonuçların dörtte biri, örneğin yapay zeka sistemini karıştıran yanıtlar (argo veya İngilizce olmayan yanıtların kullanımı dahil) gibi insanlar tarafından yeniden puanlanacak.
TEA, yapay zekanın tonlarca nakit tasarrufu sağlayacağı konusunda iyimser olsa da, bazı eğitimciler bunun uygulanmasını pek istemiyor. Lewisville Bağımsız Okul Bölgesi müdürü Lori Rapp, otomatik derecelendirme sisteminin Aralık 2023’te sınırlı olarak kullanılmasıyla bölgesinin sıfır puan alan yapılandırılmış yanıtlarda “ciddi bir artış” gördüğünü söyledi. Rapp, “Test sorusunda bir sorun mu var yoksa yeni otomatik puanlama sistemi mi var?” dedi.
Yapay zeka makale puanlama motorları yeni bir şey değil. A 2019 raporu Anakart TEA aynı itibardan kaçınmaya kararlı görünse de, bunların en az 21 eyalette farklı derecelerde başarı ile kullanıldığını buldu. TEA’nın slayt gösterisindeki küçük harfler, yeni puanlama motorunun doğası gereği yapay zekadan farklı olan kapalı bir sistem olduğunu da vurguluyor: “Yapay zeka, uyum sağlamak için aşamalı öğrenme algoritmaları kullanan, verilerin programlama yapmasına izin veren ve esasen kendi kendine öğreten bir bilgisayardır.”
Aralarında bir çizgi çizme girişimi şaşırtıcı değil; kıtlık yok öğretmenlerin çevrimiçi umutsuzluk ödevlerde ve ev ödevlerinde kopya çekmek için üretken yapay zeka hizmetlerinin nasıl kullanıldığı hakkında. Bu yeni puanlama sistemine göre notlandırılan öğrenciler, burada “kuralların benim için değil, senin için” uygulandığına inandıklarını kabul etmekte zorlanabilirler.