Sunulan Python-runtimesi arc-cua, macOS arayüzünü yönetmek için kullanılır

Geliştiriciler, masaüstü uygulamalarını yöneten ajanlar oluşturmak için tasarlanmış özel bir Python çalışma zamanı olan arc-cua'yı yayınladı. Araç, macOS ortamında çalışmaya yöneliktir ve kullanıcı komutlarının yürütülmesinde düşük gecikme sağlar.

Sistem mimarisi, yüksek seviyeli mantıksal akıl yürütme ve grafik arayüzle düşük seviyeli etkileşimi ayırır. Ekran durumunun analizinde yerleşik OCR sistemi kullanılır,而 macOS erişilebilirlik API'si ise öğeleri yönetmek için kullanılır. Bu, ajanın pencere yapısını okummasına ve kullanıcı eylemlerini yüksek doğrulukla taklit etmesine olanak tanır.

arc-cua'da karar alma için standart arka uç olarak JEV kullanılır. Bu bağlantı, karmaşık bilişsel görevleri özel modellere devretmeye olanak tanır, çalışma zamanının teknik olarak tıklama, metin girişi ve menü gezintisi görevini bırakmasına olanak tanır.

Proje açık kaynaklı olarak dağıtılır ve bilgisayarda rutin operasyonları otomatikleştirmek için özerk asistanlar oluşturan geliştiriciler için tasarlanmıştır. Yerel veri işleme araçlarının kullanılması, ekran görüntüleri ve komutların uzak sunuculara aktarılmasından kaynaklanan gecikmeleri en aza indirir.

Benzer çözümlerin ortaya çıkması, API aracılığıyla entegrasyon ihtiyacı olmadan herhangi bir yazılım ile etkileşime girebilen ajanlar oluşturmayı kolaylaştırır. Mantık ve yürütme ayrımı, bilgisayar görüşü ve iş akışı otomasyonu sistemlerinin geliştirilmesinde kilit bir trenddir.