METR ha registrato un'accelerazione doppia nello sviluppo dell'IA presso Anthropic

L'organizzazione non profit METR ha completato un audit di 11 settimane sui dati di ricerca interni dell'azienda Anthropic. L'audit ha mostrato che il ritmo di creazione di nuovi modelli è raddoppiato rispetto ai periodi precedenti.

Secondo il rapporto, circa l'80% di questo aumento di velocità è dovuto a ricerche condotte con l'ausilio dei sistemi di intelligenza artificiale stessi. Secondo le stime dei revisori, la soglia di allerta interna sull'accelerazione è stata superata già a luglio.

Durante la verifica sono emersi dei limiti: l'azienda stessa ha omesso le prove più significative nei documenti. Per questo motivo, gli osservatori indipendenti devono fare affidamento in gran parte sulle valutazioni degli esperti di METR, mentre all'interno dell'azienda permangono opinioni scettiche riguardo a queste metriche.

I dati ottenuti dimostrano l'effetto pratico dell'applicazione ricorsiva dell'IA per la creazione delle generazioni successive di modelli. Ciò cambia l'approccio alla valutazione del ritmo del progresso tecnologico nei principali laboratori di IA.