Yapay zeka belirteçlerini eşit genişlikte gösteren yazı tipi derleyicisi geliştirildi
Öne çıkanlar
- Sistem, belirteçleyici mantığını doğrudan TTF dosyasının şekillendirme kurallarına yerleştiriyor.
- Oluşturulan yazı tipinde her belirteç sabit 3 em genişliğinde çiziliyor.
- Derleme işlemi tarayıcı içinde Pyodide ve fontTools kullanılarak yerel şekilde yapılıyor.
Geliştiriciler, büyük dil modellerinin metin belirteçlerini yazı tipi düzeyinde eşit genişlikte görselleştiren Token-space font compiler adlı yeni bir derleyici yayımladı. Sistem, standart bir yazı tipi dosyasını modelin belirteçleyici kurallarıyla birleştirerek harici bir yazılıma ihtiyaç duymadan tek bir TTF dosyası üretiyor. Yeni araç, yapay zeka modellerinin metni nasıl parçalara ayırdığını kullanıcı arayüzlerinde doğrudan görmeyi sağlıyor.
Derleyici, belirteçleme kurallarını OpenType glif şekillendirme mekanizmasına gömüyor ve her belirteci sabit 3 em genişliğinde oluşturuyor. DeepSeek V4.1 Flash gibi modellerin bayt düzeyindeki BPE algoritmalarını destekleyen sistem, Vesktop üzerinden Discord temaları veya web tabanlı Slack için kullanıcı betikleri aracılığıyla belirli yapay zeka botlarının mesajlarına uygulanabiliyor. Proje, tarayıcı üzerinde Pyodide ve fontTools altyapısıyla yerel olarak çalışıyor.
Geliştirici ekip, aracın kesin bir API faturalandırma sayacı olmadığını, salt metin görselleştirmesi amacıyla tasarlandığını bildirdi. Açıklamada, biçimlendirme etiketlerinin, tarayıcı satır bölmelerinin ve karmaşık alfabelerin glif şekillendirme süreçlerini bölerek belirteç sınırlarını değiştirebileceği aktarıldı. Claude ve LLaMA 3 gibi modellere yönelik kuralların ise henüz tam uyumlu olmadığı ve deneysel aşamada kaldığı kaydedildi.
Bu özet yapay zekâ ile hazırlanmıştır; ayrıntılar ve doğrulama için orijinal kaynağa başvurun.