Başarılı örnek her zaman iyi öğretmen değil.
Orijinal başlık: SWE-Prime: Fewer Trajectories, Better Performance
KISACA
- Bulgu
- SWE-Prime: Yazılım hatası çözen ajanların 'başarılı' kayıtları bile gereksiz, riskli adımlar barındırabiliyor.
- Farkı yaratan
- az ama kaliteli veri, çok ama gürültülü veriden daha değerli.
Ne oldu?
Büyük dil modellerinin gerçek dünya yazılım sorunlarını çözme becerisini geliştirmek için bugüne kadarki çalışmalar genellikle büyük ölçekli ajan işlem (trajectory) veri setleri toplayıp başarılı örnekler üzerinde denetimli ince ayar yapmaya odaklanmıştı. Ancak bir görevin başarılı sayılması, o sürecin iyi bir öğretim örneği olduğu anlamına gelmiyor - başarılı görevler bile içinde etkisiz, gereksiz ya da riskli adımlar barındırabiliyor. SWE-Prime, bu gürültülü örnekleri doğrudan kullanmak yerine daha az ama daha kaliteli örnekle daha iyi performans elde etmeyi hedefleyen bir yaklaşım öneriyor.
Miktar değil, kalite kazanacak.
Bu notu kaynak göstererek alıntılayabilirsin: Hasan Amanet, “Başarılı örnek her zaman iyi öğretmen değil.”, Notes for Data Science, 30 Ağustos 2026.