È stato rilasciato il plug-in ComfyUI-Spectrum-Qwen2.1 per accelerare la generazione di immagini

I sviluppatori hanno presentato ComfyUI-Spectrum-Qwen2.1 — un'estensione per la popolare interfaccia di generazione, che ottimizza il lavoro del modello Qwen-Image-2.1. Lo strumento consente di ridurre il tempo di elaborazione delle richieste grazie al cambiamento dell'algoritmo di passaggio attraverso i livelli del trasformatore.

Il meccanismo principale di funzionamento del plug-in consiste nel saltare dal 65% al 70% di tutti i passaggi del trasformatore. Per raggiungere il risultato, viene utilizzato il metodo di previsione spettrale, che non richiede un ulteriore addestramento del modello. Ciò consente di ridurre notevolmente il carico computazionale mantenendo le caratteristiche visive del contenuto di output.

La funzionalità dell'estensione include la possibilità di generare immagini con sfondo trasparente e la possibilità di utilizzare più immagini di riferimento contemporaneamente. Gli sviluppatori notano che l'utilizzo del metodo di previsione spettrale conferisce ai risultati della generazione un'estetica specifica "aerografica", che può essere utile per determinati compiti artistici.

Lo strumento è disponibile come repository aperto su GitHub. L'utilizzo di questo metodo consente agli utenti di ComfyUI di accelerare notevolmente il processo di inferenza senza la necessità di modificare i pesi del modello di base. Questa soluzione è orientata a coloro che desiderano ottimizzare i processi di lavoro locali quando si lavora con architetture multimediali della famiglia Qwen.