Araştırmacılar uzun döngüli otonom ajanlar için bir mimari sundu

Araştırmacılar, An Architecture for Long-Horizon Agents adlı çalışmayı yayımladılar, bu çalışma haftalarca süren görevlerin yapılabilmesi için bir yapıyı tanımlamaktadır. Yazarlar, sınırlı bağlamsal pencere sorununa bir çözüm önerdiler, bu çözüm, ajanların işlemlerin yeniden başlatılması sırasında veri kaybı olmadan çalışmaya devam etmesine olanak tanır.

Önerilen mimari, üç ana bileşenden oluşur: zaman çizelgesi tarafından dizinlenen hiyerarşik seviyeler, otonom eylemler için bir saat mekanizması ve bir kaskad zeka sistemi. Sonuncusu, görevin daha güçlü bir modele yalnızca temel seviye iç kalite kontrolünü geçemediğinde iletildiği durumdur.

10 gün süren bir deney sırasında, bu mimariye dayanan bir ajan, pekiştirme öğrenimi alanında yayınlanmış bir sonucu başarılı bir şekilde yeniden üretti. Bununla birlikte, insan katılımı yalnızca günde bir kez gerekti. Sistem, oturum sınırları ve bağlam sıfırlamaları boyunca mantıksal bir zinciri koruma yeteneğini gösterdi.

Araştırmanın temel sonucu, ajanların sürekli öğrenimi için modelin bağlamsal penceresinin dışında var olan bir altyapının gerekli olduğudur. Çalışmanın erken aşamalarında kaydedilen bilgiler, modelin kendi ağırlıklarının değiştirilmesine gerek kalmadan sistemin sonraki davranışını etkiledi. Çalışma, Creative Commons Attribution 4.0 lisansı altında yayınlandı.