Geliştiriciler Realtime-Venus adlı görsel-işitsel iletişim sistemini sundu

Realtime-Venus ekibi Realtime-Venus için tam duplex bir sistem yayınladı ve asenkron görev delegasyonunu destekler. Çözüm, kullanıcı ve AI arasında gerçek zamanlı doğal bir diyalog oluşturmayı amaçlıyor.

Sistemin temelinde 9 milyar parametre ile MiniCPM-o 4.5 veya Qwen3-8B mimarilerine dayanan bir model yer alıyor. Teknik uygulama, proaktif etkileşimi, konuşma sırasında kesintilerin doğru işlenmesini ve video içeriği için uzun süreli hafıza işlevini destekler ve bu, ek eğitim gerektirmez.

Sistem akış verilerini işleme amacıyla tasarlandı, bu nedenle model görsel ve ses sinyallerine minimal gecikmeyle yanıt verebilir. 9B mimarisinin kullanılması, performansı ve hesaplama kaynaklarına olan talepleri arasında bir denge sağlar, bu da çözümü çeşitli etkileşim senaryolarında dağıtmayı mümkün kılar.

Asenkron görev delegasyonu özelliği, sistemın arka planda görevleri gerçekleştirerek kullanıcı ile olan mevcut iletişim akışını bozmasını sağlar. Bu, modelin bir kişisel asistan olarak kullanılabilme olanaklarını genişletir, böylece uzun süreli video oturumlarının bağlamını koruyabilir ve diyalog sırasında görevler arasında hızlı bir şekilde geçiş yapabilir.

Çıkış, geliştiricilere üçüncü taraf uygulamalara çoklu.modal özellikleri entegre etmek için hazır bir araç seti sağlar. Modelin kaynak kodu ve ağırlıkları açık erişimdedir, bu da sistemin yerel olarak test edilmesini ve özel görsel-işitsel akış işleme görevlerine uyarlanmasını sağlar.