Generalist AI, Yeni Görevleri Saniyeler İçinde Kavrayan Robot Modeli GEN-1.5'i Duyurdu

Generalist AI, robotların yeni fiziksel görevleri tek bir gösterimle öğrenmesini sağlayan GEN-1.5 adlı yeni temel modelini tanıttı. Şirketin açıklamasına göre GEN-1.5, 3 ila 12 saniyelik bir gösterimi bağlam içinde değerlendirerek herhangi bir gradyan güncellemesi veya ince ayar sürecine ihtiyaç duymadan görevi yerine getirebiliyor. Generalist AI, sensör verileri ve hareket dizilerinden oluşan örneklerin modele bağlam olarak verilmesini "fiziksel istem" olarak adlandırıyor.

Büyük ve çok modlu bir model olan GEN-1.5; video görüntülerinin yanı sıra sensör, dil ve robotun kendi konum ile hareket bilgilerini işliyor. Model, 30 saniyelik bir bağlam penceresi kullanarak saniyede 100 hareket komutu üretebiliyor. Generalist AI'ın deneylerinde, GEN-1.5 10 farklı kısa süreli manipülasyon görevinde tek gösterimle ortalama yüzde 59 başarı oranına ulaştı. Görev başına yaklaşık 50 gösterim içeren beş dakikalık veriyle 10 gradyan adımı boyunca uyarlandığında başarı oranı yüzde 83'e yükseldi. Bir dakikalık veri ve tek bir gradyan adımının kullanıldığı testte ise başarı oranı yüzde 66,5 olarak ölçüldü.

Modelin yetenekleri gösterilen hareketi tekrar etmekle sınırlı kalmıyor. GEN-1.5, birbirinden bağımsız iki fiziksel istemi birleştirerek daha uzun bir görev dizisi oluşturabiliyor. Örneğin, kalem kutusunun fermuarını açma ve içindeki parayı alma gösterimleri ayrı ayrı sunulduğunda, model iki görevi tek bir kesintisiz hareket dizisi halinde gerçekleştirebiliyor. Bu sırada yeniden konumlanma ve hatalardan kurtulma gibi gösterimlerde bulunmayan ara hareketleri de kendisi oluşturuyor.

GEN-1.5'in öne çıkan yeteneklerinden biri de simülasyondan gerçek dünyaya sıfır örnekli aktarım yapabilmesi. Modelin ön eğitiminde herhangi bir simülasyon verisi bulunmamasına rağmen, simülasyon ortamında kaydedilen bir gösterim gerçek bir robot için fiziksel istem olarak kullanılabiliyor. Model ayrıca bazı görevlerde insanların kendi elleriyle yaptığı hareketleri robotun kameralarından izleyerek aynı görevi robot elleriyle tekrar edebiliyor.

Generalist AI'ın paylaştığı örnekler, modelin beklenmedik durumlarda farklı stratejiler geliştirebildiğini de gösteriyor. Bir nesneyi fırçayla kaseye süpürme görevi gösterilen model, daha sonra aynı amaç için muzu geçici bir fırça olarak kullandı. Faraşla karşılaştığında ise nesneyi süpürmek yerine faraşla kaldırıp kasenin içine döken farklı bir yöntem geliştirdi. Model, kasenin üzerini kapatan kağıdı kaldırmak ve kavrama sırasında parmağına takılan Lego parçasını diğer eliyle çıkarmak gibi davranışlar da sergiledi.

GEN-1.5'in ön eğitim süreci sekiz aydan uzun süredir kesintisiz devam ediyor. Şirkete göre model, fiziksel etkileşimlerden oluşan büyük ölçekli verilerle eğitildikçe yeni görevlere daha az veri ve hesaplama gücüyle uyum sağlamaya başladı. Modelin bağlam içinde öğrenme ve doğaçlama yetenekleri için özel bir eğitim yöntemi veya ek hedef kullanılmadığı, bu özelliklerin ön eğitim sürecinde kendiliğinden ortaya çıktığı belirtiliyor. Generalist AI, test edilen görevlerin basit ve kısa süreli, mevcut başarı oranlarının ise henüz sınırlı olduğuna dikkat çekiyor. Bununla birlikte şirket, GEN-1.5'in farklı fiziksel görevleri tek veya birkaç gösterimden öğrenebilen ilk genel robot modellerinden biri olduğunu savunuyor.

Neden önemli?Bu gelişme, robotların programlama veya ince ayar gerektirmeden hızla yeni görevlere adapte olabilmesini sağlayarak robotik alanındaki eğitim süreçlerini basitleştirme potansiyeli taşıyor ve otomasyonun yaygınlaşmasına önemli katkıda bulunabilir.

Şu ana kadar bildiklerimiz

• Generalist AI'ın GEN-1.5 modeli, 3 ila 12 saniyelik tek bir gösterimle robotların yeni fiziksel görevleri öğrenmesini sağlıyor.
• Model, video, sensör, dil ve robotun kendi konum/hareket bilgilerini işleyerek saniyede 100 hareket komutu üretebiliyor.
• GEN-1.5, simülasyonda kaydedilen gösterimleri gerçek robotlar için fiziksel istem olarak kullanabiliyor ve beklenmedik durumlarda farklı stratejiler geliştirebiliyor.