Khanmigo ile yapılan iki yıllık araştırma yapay zeka desteğinin sınırlı kaldığını gösterdi

ABD'nin Tennessee eyaletindeki 18 ortaokulda yürütülen iki yıllık saha deneyi, üretken yapay zeka tabanlı özel ders araçlarının öğrenci başarısı üzerindeki etkisini ölçtü. Araştırmada öğrenciler, doğrudan yanıt vermek yerine rehberlik etmek üzere tasarlanan Khan Academy'nin yapay zeka eğitmeni Khanmigo'yu matematik derslerinde kullandı. Rastgele atanan gruplardan elde edilen veriler, aracın kullanımının matematik başarısını dönem başına 1,3 ulusal yüzdelik dilim artırdığını ortaya koydu. Bu artış, yıllık bazda yaklaşık 0,06 ile 0,08 standart sapma seviyesinde kaldı.

Elde edilen kazanımlar, yapay zeka desteği bulunmayan geleneksel Khan Academy alıştırmalarının sağladığı fayda düzeyine yakın seyretti. Tam bir yıl boyunca aktif katılım gösteren öğrencilerde etkinin 0,14 standart sapmaya ulaştığı hesaplandı. Ancak öğrencilerin sistemi nadiren kullanması ve yapay zeka ile derinlemesine matematiksel diyalog kurmaması, beklenen yüksek verimin alınmasını engelledi. Öğrencilerin yüzde 96'sı sistemi en az bir kez denemesine rağmen etkileşim oranları hedeflenen seviyeye ulaşmadı.

Araştırma verilerine göre ortalama bir öğrenci, sistemi yalnızca alıştırma yaptığı günlerin üçte birinde ve hata yaptığı oturumların sadece yüzde 17'sinde kullandı. Gönderilen mesajların büyük bölümünün kısa yanıtlardan veya önerilen kalıp butonlara tıklamaktan ibaret olduğu kaydedildi. Araştırmacılar, eğitimde yapay zekanın vadettiği potansiyelin gerçekleşmesi için yalnızca erişim sağlamanın yetmediğini, asıl zorluğun öğrencilerin araçla nitelikli etkileşim kurmasını sağlamak olduğunu açıkladı.