KI-gründerbedriften Stability AI har nettopp lansert Stable Audio Open Small. Denne modellen beskrives som «en stereolydgenererende KI-modell». Selskapet hevder at modellen er den raskeste på markedet. Det mest spennende er at Open Small-modellen er så kompakt og effektiv at den kan kjøres direkte på smarttelefoner.
Stable Audio Open Small er resultatet av et samarbeid mellom Stability AI og Arm. Arm er brikkeprodusenten som står bak mange prosessorer i nettbrett, telefoner og andre mobile enheter. Selv om det finnes andre KI-drevne apper som kan generere lyd, for eksempel Suno og Udio, er de fleste avhengige av skyprosessering og kan derfor ikke brukes offline. Stable Audio Open Small er utviklet for å kjøre lokalt.
En viktig detalj er at Stability hevder at Stable Audio Open Smalls treningssett utelukkende består av sanger fra de lisensfrie lydbibliotekene Free Music Archive og Freesound. Dette betyr at det, i motsetning til tidligere musikk-KI-er, ikke kan oppstå opphavsrettslige problemer med musikken som genereres med Open Small-modellen. Totalt 486 492 lydopptak inngikk i opplæringsmaterialet, 472 618 fra Freesound og 13 874 fra Free Music Archive.
Modellen inneholder 341 millioner parametere og er optimalisert for å kjøre på Arm-prosessorer. Akkurat det du finner i de fleste smarttelefoner. Den er utviklet for raskt å generere korte lydklipp og lydeffekter, som for eksempel tromme- og instrumentriff.
Modellen har imidlertid sine begrensninger. Stable Audio Open Small støtter bare instruksjoner skrevet på engelsk. Stability påpeker også at modellen ikke kan generere realistiske vokaler eller sanger av høy kvalitet, og at den på grunn av begrensninger i opplæringsmateriellet fungerer best i populære vestlige stiler.
Den største begrensningen er imidlertid at Stable Audio Open Small for øyeblikket bare kan lage opptil 11 sekunder med lyd på en smarttelefon. Men det kan den gjøre på mindre enn åtte sekunder.
Når det gjelder vilkårene for bruk, er Stable Audio Open Small gratis å bruke for forskere, hobbyister og selskaper med mindre enn 1 million dollar i årlige inntekter. Et beløp som svært få musikere kan håpe på å komme i nærheten av.
Mer information: Stability AI
