TARSphere: Evrilen fiziksel ve sosyal ortamlar için uzun vadeli gömülü ajanlar
TARSphere, fiziksel ve sosyal kısıtlar altında uzun vadeli görevler için tam yığın bir robotik çerçevesidir. Fizik simülatöründe çalışan TARSphere-Infra, gömülü NPC'ler ve kısıtlı diyalog sunar. TARSphere-Harness, donmuş bir çok modlu dil modelinin çok seviyeli becerilerle hareket etmesini sağlar. TARSphere-Bench, 30 iç mekan sahnesinde 360 epizod içerir ve beş eşleşen koşulda algısal dayanıklılık ile insan koordinasyonunu değerlendirir.
Bu yazıda
Ne değişti?
TARSphere-Harness, donmuş bir çok modlu dil modelinin hiyerarşik bellek ve geri bildirimle kararlarını revize etmesini sağlar.
Değerlendirme, genel amaçlı modellerin gömülü modellere kıyasla bazı durumlarda daha iyi performans gösterdiğini ortaya koyar.
Neden önemli?
Mevcut gömülü ajan sistemleri genellikle belirli hedeflere odaklanır veya soyut sembolik eylemlere indirgenir. TARSphere, değişen dünyada değerlendirme sınırlılığını aşmak için fiziksel ve sosyal temelli bir altyapı sunar. Olaya dayalı sonlu durum makinesi, görev durumlarını tamamlanan eylemlere göre günceller. Bu yaklaşım, robotların dinamik ortamlarda güvenilirliğini test etmenin yeni bir yolunu açar.
Geliştirici için ne anlama geliyor?
Geliştiriciler, donanım bağımlılığı olmadan fiziksel ve sosyal kısıtları test edebilir. Donmuş MLLM'lerin çok seviyeli becerilerle nasıl karar verdiğini inceleyebilirler. Bu yapı, görev güncellemeleri ve insan etkileşimi gibi zor senaryolarda model performansını ölçmek için pratik bir zemin sunar.
Henüz neyi bilmiyoruz?
- Çalışma fizik simülatörü üzerinde yürütüldüğü için gerçek dünya donanım gecikmeleri ve sensör gürültüsü yansıtılmamıştır.
- 360 epizodluk veri seti, karmaşık sosyal dinamiklerin tüm çeşitliliğini kapsayacak kadar geniş olmayabilir.
Haberin kaynakları
Birincil kaynakTARSphere: A Robot-Oriented Full-Stack Framework for Long-Horizon Embodied Agents in Evolving Physical and Social Environmentsarxiv.org Araştırma keşfiHugging Face Daily PapersÖzgün sayfayı açYayın tarihleri
- blue'og yayını
- Kaynak yayını
Bu yazı, bağlantılı kaynaklar okunarak yapay zekâ ile hazırlandı. Kaynaktaki bulguların yanı sıra kullanım alanları ve açıklanmayan noktalar da yer alır. Görsel ve videoların kaynakları üzerlerinde belirtilir; hakları sahiplerine aittir. En güncel ayrıntılar için kaynakları inceleyebilirsiniz.
