Il modello jev di TypeSafe è stato testato nel gioco 2048

I sviluppatori hanno condotto jev, un nuovo modello della classe System One della società TypeSafe, attraverso una serie di test nel gioco logico 2048. L'obiettivo del test era determinare la capacità della rete neurale di prendere decisioni ottimali in condizioni di campo di gioco limitato.

Durante l'esperimento, il modello ha mostrato un'elevata efficienza quando gli sono stati forniti dati completi sullo stato della tavola e sulle opzioni di movimento disponibili. In tali condizioni, jev ha seguito con successo le regole del gioco definite, dimostrando una logica consequenzialità delle azioni. Tuttavia, quando ha tentato di analizzare il gioco esclusivamente sulla base della rappresentazione visiva della tavola senza un elenco esplicito delle mosse possibili, le prestazioni del modello sono diminuite notevolmente.

I test hanno confermato che l'architettura System One richiede un input di dati strutturato per raggiungere risultati prevedibili. Il modello dimostra una dipendenza dai suggerimenti contestuali, il che limita la sua autonomia nelle attività con alta dinamica di cambiamento, dove è richiesta un'interpretazione autonoma dei pattern visivi senza metadati ausiliari.

I risultati dell'analisi, pubblicati nel repository aperto, sottolineano la differenza tra la capacità del modello di elaborare istruzioni formalizzate e le sue possibilità in attività con regole implicite. I dati ottenuti consentono agli sviluppatori di ottimizzare meglio i prompt per l'integrazione del modello in sistemi applicativi che richiedono una alta precisione nella presa di decisioni.