GPT-4 beats nearly 2,700 students in creative thinking

Özet

GPT-4 başka bir testte başarılı oluyor, bu sefer Torrance Yaratıcı Düşünme Testleri (TTCT).

Montana Üniversitesi’nde yapılan yeni bir araştırmaya göre, GPT-4 kullanan ChatGPT, orijinal yaratıcı düşünürler arasında ilk %1’lik dilime girdi.

Chatbot’un yaratıcılığı, onlarca yıldır insan yaratıcılığını değerlendirmek için kullanılan Torrance Yaratıcı Düşünme Testleri (TTCT) kullanılarak değerlendirildi.

ChatGPT sekiz yanıt üretti ve insan öğrenciler 24 yanıt üretti. Sonuçlar, yapay zekanın işin içinde olduğundan habersiz olan Scholastic Testing Service’e gönderildi.

GPT-4’e karşı 2.700 öğrenci

GPT-4, akıcılık – çok sayıda fikir üretme yeteneği – ve özgünlük – yeni fikirler üretme yeteneği için en üst yüzdelik dilimdeydi. GPT-4 esneklikte -farklı tür ve kategorilerde fikir üretme yeteneği- biraz düştü ve tüm katılımcıların yalnızca %97’sinden daha iyi performans gösterdi.

2016 yılında TTCT’ye katılan 2.700 öğrenciyle karşılaştırıldığında, GPT-4 büyük çoğunluğu geride bıraktı.

Yazar Dr. Erik Guzik’e göre, eski GPT-3 çok daha kötü performans gösterdi. Ekonomist, üretken bir yapay zeka olarak ChatGPT’nin pek çok fikir üretmesini bekliyordu. Ancak sistemin orijinal fikirleri ne kadar iyi ürettiğine şaşırdı.

GPT-4 yaratıcı mı?

Peki GPT-4 yaratıcı mı? Guzik, “Verileri çok fazla yorumlamamak için konferansta çok dikkatliydik.” Dedi. “Sonuçları sunduk.” Ancak çalışma, GPT-4’ün insanlarınkine eşit veya onları aşan bazı yaratıcı yetenekler geliştirdiğine dair güçlü kanıtlar sağladı, diyor Guzik.

Ancak sonuçlar, insan yaratıcılığını gerçekten anlamadığımızı da gösterdi, dedi.