Yazılımcı robot kolunu büyük dil modelleriyle otonom hale getirdi
Öne çıkanlar
- Geliştirici, LeRobot SO-101 robot kolunu sekiz yıllık Raspberry Pi 3 ile büyük dil modellerine bağladı.
- Claude, kameradan gelen görsel verileri ve motor dirençlerini ölçerek sıfırlama mekanizmasını bağımsız kurdu.
- Yapay zeka modeli gece boyunca insan müdahalesi olmadan üç renkli bloğu belirlenen hedef alana taşıdı.
Deneyimli bir yazılım geliştiricisi, büyük dil modellerini kullanarak robotik kol kontrolünü otonom seviyeye taşıdığı deneyimini paylaştı. Geliştirici, 415 dolara satın aldığı LeRobot SO-101 robot kol kitini sekiz yıllık bir Raspberry Pi 3 kartı ve harici web kamerasıyla donattı. İlk kurulum aşamasında Codex yardımıyla işletim sistemini yapılandıran, gerekli Python kütüphanelerini kuran ve servo motorları korumak için aşırı yük kesme yazılımları geliştiren yazılımcı, donanım kontrolünü adım adım yapay zekaya devretti.
Süreç ilerledikçe modeller arasındaki geçişler öne çıktı ve geliştirici Codex kotasını doldurmasının ardından projeyi Fable ve Claude modellerine aktardı. Başlangıçta yapılan manuel kalibrasyon girişimleri yetersiz kalınca geliştirici müdahaleyi bırakarak yapay zekayı serbest bıraktı. Claude, direnç ölçümlerini ve çift kamera görüntüsünü kullanarak sıfır noktasını otomatik belirledi, masaya fazla baskı uyguladığı anlarda yazılımını kendi kendine güncelledi ve görsel hata paylarını düzelterek nesneleri kavramayı başardı.
Son aşamada geliştirici masaya farklı renklerde işaretlenmiş bloklar bırakarak denetimi tamamen modele devretti ve gece boyunca sistemi çalışır halde bıraktı. Sabah kontrol edildiğinde robot kolun kırmızı, mavi ve mor blokları hedeflenen alana başarıyla taşıdığı görüldü. Otonom çalışma sürecinde kaydedilen ekran görüntüleri birleştirilerek hızlandırılmış bir video haline getirildi. Geliştirici sonraki aşamada bu verileri görsel dil eylem (VLA) modelleri için eğitim verisine dönüştürmeyi hedefliyor.
Bu özet yapay zekâ ile hazırlanmıştır; ayrıntılar ve doğrulama için orijinal kaynağa başvurun.