Hide and Seek: Siyah Kutu Modeller İçin Kavram Bazlı Açıklama Yöntemi
Hide and Seek (HnS), siyah kutu görsel modelleri kavram bazlı olarak yorumlamak için yeni bir yöntem sunar. Model ağırlıklarına veya büyük etiketli veri setlerine ihtiyaç duymadan, görsel-dil modelleri kullanarak kavramları lokalize eder ve maskeler. Bu sayede model çıktısındaki değişimi ölçerek sadık atöribüsyon sağlar. CelebA ve COCO-Stuff üzerinde test ed
Ne değişti?
HnS, model ağırlıklarına veya etiketli kavram veri setlerine erişim gerektirmeden geniş bir görsel model yelpazesini yorumlayabilir.
Yöntem, görsel-dil modelleriyle kavram hizalı görselleri bulup maskelendirerek model çıktısındaki değişimi ölçerek sadık atöribüsyon sağlar.
Neden önemli?
Mevcut kavram bazlı yöntemler genellikle yalnızca sınıflandırma ve regresyon modelleriyle sınırlıdır ve model ağırlıklarına erişim gerektirir. HnS, bu kısıtlamaları aşarak görsel özetleme ve uydu görüntüsü segmentasyonu gibi çeşitli görevlerde uygulanabilirlik gösterir. Bu, kapak
Geliştirici için ne anlama geliyor?
Ağırlık erişimi gerektirmeyen bu yaklaşım, kapalı uçlu görsel modellerin karar süreçlerini denetlemeyi kolaylaştırabilir. Özellikle görsel özetleme ve segmentasyon gibi karmaşık görevlerde, mevcut yöntemlerin erişemediği yerel açıklamalar üretme potansiyeli taşır. Geliştiriciler, model şeffaflığı için ek etiketli veri seti veya ağırlık in
Henüz neyi bilmiyoruz?
- Yöntemin doğruluğu, kullanılan görsel-dil modelinin kavramları doğru lokalize etme yeteneğine bağımlıdır.
- Çalışma, CelebA ve COCO-Stuff gibi sınırlı veri setlerinde doğrulanmıştır; genel geçerlilik için daha geniş testler gerekebilir.
Asıl kaynağa dön.
Birincil kaynakComputer Science > Computer Vision and Pattern Recognitionarxiv.org Resmî duyuruarXiv / cs.AI + cs.CLResmî kaynak sayfasını açBu analiz, bağlantılı birincil kaynak üzerinden yapay zeka desteğiyle hazırlanmıştır. Kaynakta yer alan bulgular, geliştirici etkisi ve sınırlamalar birlikte sunulur. Kapak görseli, konuyu anlatan editoryal bir illüstrasyondur. Ayrıntılar ve en güncel bilgiler için asıl kaynağı inceleyin.