Araştırmacılar sessiz okumayı invaziv olmayan EEG ile çözdü
Öne çıkanlar
- Araştırma kapsamında tek bir katılımcıdan 49 saatte 240 bin kelimelik 19 kanallı EEG verisi toplandı.
- Model, kısa EEG pencerelerini büyük dil modellerinin kelime gömmeleriyle karşıtlık yöntemiyle hizaladı.
- Kelime çözme başarısı veri miktarı arttıkça log-lineer ölçekte artış gösterdi.
Araştırmacılar, invaziv olmayan elektroensefalografi (EEG) sinyallerini kullanarak sessiz okuma sırasındaki kelimeleri ve anlamsal bilgileri çözmeyi başardı. İç konuşmayı doğrudan kaydetmenin zorluğu nedeniyle sessiz okumayı ölçeklenebilir bir vekil görev olarak ele alan ekip, tek bir katılımcıdan 49 saat boyunca toplanan 19 kanallı kuru elektrot EEG verilerini inceledi. Deneyde yaklaşık 240 bin kelime sunumu kaydedildi.
Çalışmada, hızlı seri görsel sunum yöntemiyle gösterilen metinlerin EEG sinyalleri, büyük dil modellerinden alınan gömmelerle CLIP benzeri bir karşıtlık hedefi kullanılarak eşleştirildi. Evrişimli EEG kodlayıcısı ve nedensel transformatör mimarisiyle eğitilen model, rastgele olasılıkların üzerinde bir başarı göstererek açık uçlu kelime dağarcığında nadir kelimeleri dahi tanımlayabildi. Performansın veri hacmiyle log-lineer olarak arttığı ve henüz doygunluğa ulaşmadığı belirlendi.
Bu özet yapay zekâ ile hazırlanmıştır; ayrıntılar ve doğrulama için orijinal kaynağa başvurun.