Geliştirici Fugleramme sistemini AI aracılığıyla kuşları görselleştirmek için sundu

Geliştirici Arne Giacomo, Fugleramme adlı, Raspberry Pi tabanlı bir cihazı sundu - gerçek zamanlı olarak kuşların şarkılarını tanır ve bunları 19. yüzyıl illüstrasyonlarının tarzında görselleştirir. Sistem, ses akışını yakalamak için bir mikrofon kullanır ve hazırlanmış görüntüyü E-ink ekran üzerinde gösterir.

Projenin temelinde, kuş türlerini ses kalıplarına göre tanımlamaktan sorumlu BirdNET-Go kütüphanesi yatmaktadır. Tür belirlendikten sonra sistem, stilize bir görüntü oluşturmak için bir generatif modele başvurur. Yazılım kısmı Go dilinde yazılmıştır, bu da tek kartlı bir bilgisayarda çalışırken düşük kaynak tüketimi sağlar.

Cihaz, evde bağımsız çalışmaya yöneliktir. E-ink teknolojisi kullanımı, görüntüyü sürekli güç beslemesi olmadan ekran üzerinde koruyarak enerji tüketimini en aza indirir. Proje açık kaynaklı olarak dağıtılır, bu da kullanıcıların kendilerinin tanıma parametrelerini ve illüstrasyon üsluplarını ayarlamalarına olanak tanır.

Ses analitiğinin kompakt "donanımda" generatif modellerle entegrasyonu, bulut API'lerine başvuruya gerek kalmadan yerel veri işlemenin olanaklarını göstermektedir. Kaynak kodu ve montaj talimatları, projenin resmi deposunda mevcuttur, burada ayrıca topluluk tarafından geliştirmeler tartışılır.