Anthropic'in yeni nesil modeline ait ağırlıklar Hugging Face'e sızdı
Öne çıkanlar
- Hugging Face'e yüklenen 7,72 terabaytlık veri, Anthropic'in henüz yayımlanmamış modeline ait kontrol noktasını içeriyor.
- Model, 14 trilyon parametre ve 1.224 uzmanlı MoE mimarisiyle hibrit dikkat mekanizmalarını kullanıyor.
- Ağırlıklar, Trainium2 donanımlarında değerlendirme amacıyla NVFP4 biçiminde saklanan kopyadan elde edildi.
Hugging Face platformunda yayımlanan bir depoda, Anthropic şirketine ait olduğu öne sürülen 14 trilyon parametreli "numbat" kod adlı yeni yapay zeka modelinin ağırlıkları paylaşıldı. Sızıntıyı yapan anonim kaynak, söz konusu dosyanın şirketin Mythos sınıfı eğitim sürecinin yaklaşık 1 milyon 830 bininci adımından alınan ham bir kontrol noktası olduğunu açıkladı. Model adı, Mart 2026'da gerçekleşen Claude Code kaynak kodu sızıntısındaki kurum içi referanslarla örtüşüyor.
Paylaşılan veriler, safetensors formatında toplam 772 parçadan ve yaklaşık 7,72 terabaytlık tensör bilgisinden oluşuyor. Mimarinin 114 katman, hibrit GDN ve MLA dikkat mekanizması, 1.224 uzman içeren MoE yapısı ile NVFP4 nicelleştirme standardını kullandığı aktarıldı. Depo içerisinde model yapılandırma dosyalarının yanı sıra kontrol noktasını çalıştırmaya uygun bir referans PyTorch uygulaması da yer alıyor.
Paylaşımı yapan kişi, ham ağırlıkların eğitim kümesinde kaldığını, sızdırılan kopyanın ise Trainium2 yongalarında test çalıştırabilmek amacıyla NVFP4 formatına dönüştürülen değerlendirme sürümü olduğunu bildirdi. Modelin henüz pekiştirmeli öğrenme veya insan geri bildirimiyle hizalama süreçlerinden geçmediği, doğrudan ön eğitim aşamasından alındığı kaydedildi.
Bu özet yapay zekâ ile hazırlanmıştır; ayrıntılar ve doğrulama için orijinal kaynağa başvurun.