Çalışma, UM İşletme Fakültesi'nde yardımcı klinik profesör olan Dr. Erik Guzik tarafından yönetildi. O ve ortakları, insan yaratıcılığını değerlendirmek için onlarca yıldır kullanılan iyi bilinen bir araç olan Torrance Yaratıcı Düşünme Testlerini kullandı.
Araştırmacılar, GPT-4 yapay zekâ motoru tarafından desteklenen uygulama olan ChatGPT tarafından oluşturulan sekiz yanıt gönderdi. Ayrıca, Guzik'in girişimcilik ve kişisel finans derslerini alan 24 UM öğrencisinden oluşan bir kontrol grubundan yanıtlar da sundular. Bu puanlar, 2016'da TTCT'ye giren ulusal çapta 2.700 üniversite öğrencisiyle karşılaştırıldı. Tüm gönderimler, yapay zekanın işin içinde olduğunu bilmeyen Scholastic Testing Service tarafından puanlandı.
Sonuçlar, ChatGPT'yi yaratıcılık açısından seçkin bir şirkete yerleştirdi. Yapay zekâ uygulaması, akıcılık, büyük miktarda fikir üretme yeteneği ve özgünlük, yeni fikirler bulma yeteneği açısından en yüksek yüzdelik dilimdeydi. Yapay zekâ, esneklik, farklı fikir türleri ve kategorileri üretme yeteneği için yüzde 97'ye kadar kaydı.
Guzik, "ChatGPT ve GPT-4 için ilk kez orijinallik açısından ilk %1'lik performans sergilediğini gösterdik." dedi. "Bu yeniydi."
UM öğrencilerinden bazılarının da ilk %1'de performans gösterdiğini görmekten memnun oldu. Ancak ChatGTP, ulusal çapta üniversite öğrencilerinin büyük çoğunluğunu geride bıraktı.
Guzik, yapay zekayı ve öğrencilerini bahar döneminde test etti. Çalışmasında UM Western'den Christian Gilde ve Vilnius Üniversitesi'nden Christian Byrge ona yardım etti. Araştırmacılar çalışmalarını mayıs ayında Güney Oregon Üniversitesi Yaratıcılık Konferansı'nda sundular.
Guzik, "Verileri çok fazla yorumlamamak için konferansta çok dikkatliydik." Dedi. "Sonuçları sunduk. Ancak, yapay zekânın yaratıcı yeteneği insan yeteneğiyle aynı hatta hatta onu aşıyor gibi göründüğüne dair güçlü kanıtlar paylaştık."
Guzik, ChatGPT'ye TTCT'de iyi performans gösterip göstermediğinin ne anlama geldiğini sorduğunu söyledi. AI, konferansta paylaştıkları güçlü bir cevap verdi:
"ChatGPT bize, doğru olduğuna inandığım, insan yaratıcılığını tam olarak anlayamayabileceğimizi söyledi" dedi. "Ayrıca, insan ve yapay zekâ tarafından üretilen fikirler arasında ayrım yapabilen daha gelişmiş değerlendirme araçlarına ihtiyacımız olabileceğini de öne sürdü."
TTCT'nin korunan özel bir materyal olduğunu, bu nedenle ChatGPT'nin internetteki veya halka açık bir veri tabanındaki testle ilgili bilgilere erişerek "hile yapamayacağını" söyledi.
Guzik uzun zamandır yaratıcılıkla ilgileniyor. Massachusetts, Palmer'ın küçük bir kasabasında büyüyen bir yedinci sınıf öğrencisi olarak, yetenekli ve yetenekli öğrenciler için bir programdaydı. Bu deneyim onu, aynı zamanda TTCT'yi yaratan öncü psikolog Ellis Paul Torrance tarafından geliştirilen Gelecekteki Problem Çözme süreciyle tanıştırdı. Guzik, o dönemde beyin fırtınasına ve bunun insan hayal gücüne nasıl dokunduğuna âşık olduğunu ve Future Problem Solving organizasyonunda aktif olmaya devam ettiğini, hatta konferanslarından birinde karısıyla tanıştığını söyledi.
Guzik ve ekibi, geçtiğimiz yıl ChatGPT ile biraz uğraştıktan sonra yaratıcılığını test etmeye karar verdi.
"Hepimiz ChatGPT ile keşifler yapıyorduk ve beklemediğimiz bazı ilginç şeyler yaptığını fark ettik" dedi. "Yanıtlardan bazıları yeni ve şaşırtıcıydı. İşte o zaman, gerçekten ne kadar yaratıcı olduğunu görmek için onu test etmeye karar verdik."
Guzik, TTCT testinin gerçek hayattaki yaratıcı görevleri taklit eden istemler kullandığını söyledi. Örneğin, bir ürün için yeni kullanımlar düşünebilir veya bu ürünü geliştirebilir misiniz?
"Basketbol diyelim" dedi. "Bir basketbolun kullanabildiğiniz kadar çok kullanım alanı düşünün. Onu bir çembere alıp sergide kullanabilirsiniz. Kendinizi yeni kullanımlar düşünmeye zorlarsanız, belki onu kesip saksı olarak kullanabilirsiniz. Veya bir tuğlayla bir şeyler inşa edebilirsin ya da kâğıt ağırlığı olarak kullanılabilir. Ama belki onu öğütüp tamamen yeni bir şeye dönüştürebilirsin."
Guzik, ChatGPT'nin pek çok fikir (akıcılık) yaratmada iyi olacağına dair bir beklentiye sahipti, çünkü üretken yapay zekanın yaptığı şey bu. Ayrıca, değerlendiricilerin gözünde konuyla ilgili, faydalı ve değerli olan birçok fikirle istemi yanıtlamakta başarılı oldu.
Guzik, "Konferansta, GPT-3 hakkında bir yıl önce yapılmış önceki araştırmaları öğrendik." dedi. "O zamanlar ChatGPT, orijinal düşünmeyi içeren görevlerde insanlar kadar iyi puan alamıyordu. Şimdi daha gelişmiş GPT-4 ile, tüm insan yanıtları arasında ilk %1'lik dilimde."
Yapay zekâ ilerlemelerinin hızlanmasıyla birlikte, gelecekte iş dünyası için önemli bir araç ve bölgesel ve ulusal inovasyonun önemli bir yeni itici gücü olmasını bekliyor.
Guzik, "Benim için yaratıcılık, işleri farklı şekilde yapmaktır" dedi. "Girişimciliğin sevdiğim tanımlarından biri, girişimci olmanın farklı düşünmek olmasıdır. Dolayısıyla yapay zekâ, yaratıcı düşünme dünyasını iş dünyasına ve inovasyon sürecine uygulamamıza yardımcı olabilir ve bu benim için çok etkileyici."
UM İşletme Koleji'nin yapay zekâ hakkında öğretmeye ve onu derslere dahil etmeye açık olduğunu söyledi.
Guzik, "Geleceğin bir şekilde AI'yı içereceğini biliyoruz" dedi. "Nasıl kullanıldığına dikkat etmeli ve gerekli kural ve düzenlemeleri dikkate almalıyız. Ancak işletmeler bunu zaten birçok yaratıcı görev için kullanıyor. Girişimcilik ve bölgesel yenilik açısından bu, oyunun kurallarını değiştiriyor."