Yapay zeka modelleri üç boyutlu mühendislik tasarımlarında zorlanıyor
Öne çıkanlar
- MUSE kıyaslamasında kapalı kaynaklı yapay zeka modelleri nihai tasarım niyetinde ortalama yüzde 20,30 başarı yakaladı.
- Açık kaynaklı modellerin kod çalıştırma oranı yüzde 22,33 olurken nihai tasarım puanı yüzde 3,72'ye geriledi.
- Bileşenlerin iç içe geçmesini önleme adımı, modellerin geometrik geçerlilik aşamasında en çok başarısız olduğu nokta oldu.
- Gemini 3.1 Pro hakem modeli, insan uzman değerlendirmeleriyle tasarım düzeyinde 0,835 korelasyon sağladı.
Araştırmacılar, yapay zeka modellerinin metinden üç boyutlu bilgisayar destekli tasarım (CAD) üretme yeteneklerini sınamak için MUSE adlı yeni bir kıyaslama standardı tanıttı. Çalışma, tekil parça üretiminin ötesine geçerek bileşen grafikleri, parametreler, malzemeler ve üretim süreçlerini içeren 106 adet montaj görevini kapsıyor. Değerlendirme süreci; kodun sanal alanda çalıştırılması, geometrik geçerlilik denetimi ve tasarım niyetine uygunluk olmak üzere üç aşamalı bir süzgeçten oluşuyor.
Test edilen 15 büyük dil modeli arasında kapalı kaynaklı sistemler ortalama yüzde 42,87 kod çalıştırma, yüzde 30,71 geometrik geçerlilik ve yüzde 20,30 nihai tasarım uyumu oranına ulaştı. Açık kaynaklı modellerde ise nihai tasarım başarısı ortalama yüzde 3,72 seviyesinde kaldı. Modellerin en çok zorlandığı noktanın, parçaların birbiriyle çakışmasını engelleyen çok bileşenli uzamsal akıl yürütme olduğu saptandı.
En yüksek başarıyı yüzde 77,36 çalıştırma ve yüzde 68,87 geometrik geçerlilik oranıyla GPT-5.5 gösterdi. Değerlendirmelerde hakem olarak kullanılan Gemini 3.1 Pro, insan uzman değerlendirmeleriyle tasarım düzeyinde 0,835 Pearson korelasyonu yakaladı. Araştırmacılar, mevcut modellerin kod yazabilmesine rağmen üretilebilir ve monte edilebilir mühendislik kurallarını uygulamada yetersiz kaldığını bildirdi.
Bu özet yapay zekâ ile hazırlanmıştır; ayrıntılar ve doğrulama için orijinal kaynağa başvurun.