19 üniversitede yürütülen randomize bir deneyde, derse özel yapay zeka araçlarına erişen öğrencilerin gözetimli sınavlarda, araçların kullanıma sunulmasını bekleyen sınıflardaki öğrencilerden daha yüksek puan aldığı görüldü. Çalışmaya 7.200 öğrenci katıldı, deneysel sınav analizine ise 4.768 öğrenci dahil edildi. Araştırmacılar, 0,06 ile 0,59 arasındaki %95 güven aralığında, 0,32 standart sapmalık bir artış tahmin etti.
Neden önemli?
Deney, üç dönem boyunca 55 uygulamalı STEM dersini kapsadı. Araştırmacılar dersleri konu ve akademik düzeye göre gruplandırdı, ardından eğitmenleri araçlarını hemen veya bir eğitim dönemi sonra kullanıma sunmak üzere rastgele atadı. Her iki grup da tasarım ve teknik destek aldı.
Eğitmenler, hedefe yönelik alıştırma ve geri bildirim sunan öğretici araçlar, öğrencilere sorularla problem çözmede rehberlik eden koçlar, simülasyonlar ve rol yapma alıştırmaları geliştirdi. Katılımcı sınıflardaki tüm öğrenciler, öğrenmeyi ölçmek için kullanılan sınavlara girmeden önce dönem boyunca araçlara erişebildi.
Sınav analizi, açılan 44 dersi ve yalnızca gözetim altında yüz yüze yapılan, çoğunluğu kağıt üzerindeki sınavları kapsadı. Araştırmacılar bu eleme kuralını ön kayıttan sonra ekledi ve sınavlarında yapay zeka yardımına izin verilebilecek dersleri kapsam dışında bıraktı. Çalışmada öğrenci katılımı veya memnuniyetinde istatistiksel olarak anlamlı bir değişim bulunmadı.
Piyasaya etkisi
Sonuçlar, özelleştirilmiş yapay zeka araçlarının uygulamalı STEM derslerinde öğrenmeyi destekleyebileceğine dair kanıt sunuyor. Bu alan, eğitim teknolojisi sağlayıcılarının ve bu araçları benimsemeyi değerlendiren üniversitelerin ilgisini çekiyor. Güven aralığının gösterdiği gibi, tahmini artışın büyüklüğü belirsizliğini koruyor.
Deney, derse özel araçlarla genel amaçlı sohbet botlarını değil, araçların kullanıma sunulma zamanını karşılaştırdı. Ayrıca hangi tasarımların artışa en fazla katkıda bulunduğu ve sonuçların uygulamalı STEM dışına genellenip genellenemeyeceği de henüz bilinmiyor.
Sıkça sorulan sorular
-
Sınav analizine kaç öğrenci dahil edildi?
Deneysel sınav analizi, açılan 44 dersteki 4.768 öğrenciyi kapsadı. Daha geniş deneye 7.200 öğrenci katıldı.
-
Sınav puanlarındaki tahmini artış ne kadardı?
Araştırmacılar, 0,06 ile 0,59 standart sapma arasındaki %95 güven aralığında, 0,32 standart sapmalık bir artış tahmin etti.
-
Eğitmenler ne tür yapay zeka araçları geliştirdi?
Eğitmenler, alıştırma ve geri bildirim için öğretici araçlar, sorularla yönlendiren koçlar, etkileşimli simülasyonlar ve rol yapma alıştırmaları geliştirdi.
-
Öğrencilerin sınavlarda yapay zeka kullanmasına izin verildi mi?
Analize gözetimli, yüz yüze sınavlar dahil edildi; sınavlarında yapay zeka yardımına izin verilebilecek dersler dışlandı. Dahil edilen sınavların çoğu kağıt üzerindeydi.
-
Deney, özelleştirilmiş yapay zeka araçlarını genel amaçlı sohbet botlarıyla karşılaştırdı mı?
Hayır. Deney, araçlarını hemen kullanıma sunmak üzere atanan sınıflarla bunları bir eğitim dönemi sonra sunmak üzere atanan sınıfları karşılaştırdı.
CryptoSlate