Araştırmacılar kurumsal belgelerin otomasyonunu için SAGE çerçevesini sundu

Araştırmacılar, kurumsal rehberleri yapılandırılmış çalışma artefaktlarına dönüştürmek için tasarlanmış çok aşamalı bir LLM tabanlı konveyör olan SAGE'i sundu. Sistem, metin, tablo ve resimler içeren belgelerden veri çıkarma işlemini otomatikleştirir ve aynı zamanda sıkı sürüm kontrolü ve veri bütünlüğü doğrulaması sağlar.

SAGE mimarisi, sürüm kontrolü ile kurallar deposu, işleme aşamaları arasındaki sözleşme doğrulama şeması ve veri kökenini izleme sistemini içerir. Çalışma sırasında çıkarılan kurallar, deterministik yapısal doğrulama ve LLM semantik değerlendirmesinden geçer. Tutarsızlık modülü, otomatik olarak kopyaları kaldırır, spécifikasyonlarda çelişkiler ve boşluklar tespit eder ve yalnızca tartışmalı öğeleri manuel inceleme için yönlendirir.

120 belge örnekleminde test edilmesi, işleme süresini birkaç günden 20-100 dakikaye azaltmıştır. Sistem, belge düzeyinde %96 başarı elde etmiştir ve hatalı sonuç oranı %3,2 olarak belirlenmiştir. Karşılaştırıldığında, yönetim ve doğrulama mekanizmaları olmadan hata oranı %15,7ye çıkar. Deney sırasında 3.896 kural çıkarılmış ve 812 hazır artefakt oluşturulmuştur.

Bu tür sistemlerin uygulanması, şirketlerin teknik belgelerle çalışırken manuel emeği en aza indirmesine olanak tanır. Creative Commons lisansı kullanımı, metodolojinin şeffaflığını sağlar ve doğrulama aşamasının otomatikleştirilmesi, karmaşık kurumsal kaynaklardan veri otomatik çıkarma ile ilgili riskleri azaltır.