È stata rilasciata il modello ZTC-Judge-9B per la valutazione dell'attendibilità delle risposte

I sviluppatori hanno presentato ZTC-Judge-9B — un modello linguistico specializzato destinato alla verifica dell'attendibilità delle risposte. A differenza degli LLM standard, il sistema esegue la valutazione in un solo passaggio (single forward pass), senza generare token aggiuntivi.
Il modello ha raggiunto un punteggio di 30 punti secondo la metrica interna di efficienza, impiegando circa 2 ore per l'elaborazione della richiesta nel corso dei test. L'architettura è orientata al controllo automatico dei fatti e alla valutazione della qualità della generazione di altri modelli in tempo reale.
Durante i benchmark ZTC-Judge-9B ha dimostrato risultati superiori ai modelli di base nel superare gli esami professionali. Tuttavia, durante i test su compiti che richiedono profondi ragionamenti scientifici e valutazione della sicurezza in situazioni critiche, il modello ha mostrato prestazioni al di sotto degli standard attesi.
L'assenza di generazione di token consente di utilizzare lo strumento per la filtrazione ad alta velocità dei contenuti senza significativi costi computazionali. Questa soluzione completa la gamma di verificatori specializzati, finalizzati a ridurre le allucinazioni nei sistemi AI attraverso l'introduzione di una fase di controllo dell'attendibilità dei dati.



