Geliştiriciler Fable 5 modelinde düşünme verimliliğinde bir düşüş kaydetti

Araştırmacılar Ağustos ayında Fable 5 modelinde mantıksal düşünce göstergelerinde bir düşüş kaydetti. Test sırasında sistem 5 saat çalışma için 283 puan aldı, bu da önceki dönemlerle karşılaştırıldığında istek işleme kalıplarında bir değişikliği gösteriyor.

Analiz, Ağustos ayında modelin meisten çağrılarının "düşünme" tokenlerinin minimum miktarıyla veya tamamen yokluğuyla birlikte geldiğini gösterdi. Bu, derin mantıksal işleme gerektiren görevlerde yanıt kalitesinde bir azalmaya yol açtı. Uzmanlar, sorunun kendisinin mimari degradasyonunda değil, sondern aktuellen çıkarım modunun özelliklerinde olduğunu belirtiyorlar.

Teknik gözlem topluluğu tarafından, zincirli akıl yürütme destekleyen modellerle çalışırken oluşturma parametrelerinin ayarlanmasının önemini vurguluyor. Modelin yeteneklerinin "nerf" veya zorla kısıtlanmasına ilişkin varsayımlar yerine, geliştiricilerin, akıl yürütme mekanizmalarının aktivasyonunu doğrudan etkileyen çıkarım yapılandırmasını kontrol etmeleri öneriliyor.

Bu olay, sistemsel çıktı ayarlarının değiştirilmesinin gerçek görevlerdeki sinir ağlarının davranışını nasıl radikal olarak değiştirebileceğini gösteriyor. Modelin "düşünme" sürecine için hesaplamalı kaynakları nasıl dağıttığını anlamak, üretim ortamlarında稳il bir performansı sürdürmek için kritik bir faktör haline geliyor.