Araştırmacılar AquiLLM platformunu bilimsel verilerle çalışmak için sundu

Bir grup bilim insanı, akademik ortamlarda RAG (Retrieval-Augmented Generation) sistemlerini dağıtmak için açık ağırlıklı özel bir platform olan AquiLLM'yi sundu. Sistem, kapalı bilgi tabanları ve bilimsel arşivlerle çalışmaya yönelik olup, veri altyapısı üzerinde yerel kontrol sağlar.

Geliştirmenin temelinde, sunulan bilimsel bağlama göre oluşturulan cevapların "sadakat" (faithfulness) kavramı yatmaktadır ve bu, uydurulmuş gerçekler olmadan oluşturulan cevapların derecesi olarak tanımlanmaktadır. Yazarlar, platformu astronomi görevlerinde test etti ve modelin uzman belgelerinden bilgi çıkarma ve analitik sonuçlar oluşturma yeteneğini değerlendirdi.

Araştırma sonuçları, AquiLLM'nin bilgi tabanından belirli parçaları temel alan doğrudan arama sorgularını gerçekleştirmede yüksek güvenilirlik gösterdiğini ortaya koydu. Ancak, veri sentezi veya belirsiz formülasyonların çözülmesi gerektiğinde, modelin doğruluğu düşer, bu da uzmanlar tarafından ek kontrole ihtiyaç duyulmasına neden olur.

Yazarlar, standart benchmark'lerin her zaman bilimsel çalışmanın özgüllüğünü yansıtmadığını vurgulamaktadır, bu nedenle bu tür sistemlerin değerlendirilmesi için alan yaklaşımı gerekli olmaktadır. Platform, CC BY-SA 4.0 lisansı altında dağıtılır, bu da araştırma gruplarının çözümü kendi ihtiyaçlarına göre uyarlamalarına olanak tanır.

Geliştirme, bulut API'lerine aktarılamayan hassas verilerin işlenmesiyle ilgili gizlilik sorunlarını çözmeye yöneliktir. Yerel modellerin kullanılması, kurumların arşivleri ve araştırma sonuçları üzerinde tam egemenliği korumasına olanak tanır.