Riffusion Projesi, Yapay Zeka Örnekleri

Riffusion, müziği spektogramlarla görselleştirerek besteleyen açık kaynaklı bir AI modelidir. Metinle eşleştirilmiş spektrogramlardan AI müziği oluşturmak için v1.5 kararlı difüzyon modelini kullanır.

Uygulama, Next.js, React, TypeScript, three.js, Tailwind ve Vercel kullanılarak oluşturulmuştur.

Uygulama, çıkarım çağrılarını bir GPU sunucusunda çalıştırmak için bir API üzerinden iletişim kurar. Modeli paketlemek ve GPU destekli çıkarım, otomatik ölçeklendirme ve gözlemlenebilirlik sağlayan Baseten'e dağıtmadan önce yerel olarak test etmek için Truss'u kullandık. Üretimde NVIDIA A10Gs kullandık.

Beş saniyenin altında kararlı difüzyon sonuçları oluşturacak kadar güçlü bir GPU'nuz varsa, test şişesi sunucumuzu kullanarak deneyimi yerel olarak çalıştırabilirsiniz.

Kaynak: https://www.riffusion.com/about