Beatoria: 10.381 AI obrada pjesama koje preoblikuju poznate hitove s posve novim tekstovima

Beatoria besplatni je katalog AI obrada pjesama koji se temelji na neobičnom pravilu: svaka pjesma ponovno izvodi poznatu skladbu u novom glasu, ali nijedna linija originalnog teksta nije ponovljena. Deset tisuća pjesama, dvadeset i pet glazbenih jezika, četrnaest žanrova, gotovo osam tisuća stilskih uputa — i studio u kojem možete generirati vlastite skladbe. Evo kako je cijeli projekt sastavljen.

Ideja u jednom rečenici

Uzmite pjesmu koju svi poznaju. Zadržite njezin osjećaj — žanr, razdoblje, energiju, oblik aranžmana. Zatim napišite posve novi tekst za nju, generirajte novi vokal, jasno navedite originalnog izvođača i objavite rezultat pod izmišljenim imenom izvođača.

To je Beatoria. Nije to karaoke stranica, alat za razdvajanje glazbenih zapisa (stems), alat za kopiranje glasa niti arhiva tekstova pjesama. To je katalog originalnih pjesama koje su u dijalogu s poznatim skladbama — a razlika između ta dva pojma čini cjelokupni proizvod.

Stoga skladba u katalogu stoji kao „Snijeg iz druge godine“ — obrada pjesme White Christmas — Bing Crosby. Ili „Treperenje u propuhu“, obrada pjesme Candle in the Wind 1997 — Elton John. Ili „Цвіт опівночі“, koja se vraća k pjesmi Червона рута — Володимир Івасюк. Izvor je naveden na stranici; riječi su nove.

Katalog, brojke u brojkama

Žanrovi

Četrnaest kategorija, a njihova raspodjela pravedno odražava stvarnu sliku popularne glazbe:

Jezici

Dvadesetpet govornih jezika, a upravo se ovdje katalog prestaje činiti ekskluzivnim anglosaksonskim eksperimentom. Engleski jezik predvodi s 4.122 skladbe, ali španjolski ima 1.105, hindski 592, korejski 488, japanski 431, portugalski 422, kineski 382, francuski 304, turski 237, arapski 230, ruski 229, talijanski 228, njemački 220, ukrajinski 200, švedski 171 — a zatim slijedi dugi, namjerno izjednačen rep od po 115 skladbi na indonežanskom, perzijskom, poljskom, vijetnamskom, hebrejskom, tajskom, grčkom i tagalskom, plus 76 na nizozemskom.

Taj ravni rep nije slučajnost podataka. To je odluka o proizvodnji: za svaki jezik generiran je fiksni paket kako bi slušatelj koji dođe iz Manile, Teherana ili Bangkoka pronašao pravi odjeljak, a ne samo tri tokena.

Zemlje

Trideset dviju zemalja ima svoj vlastiti pregledni odjeljak — Ujedinjeno Kraljevstvo, Španjolska, Indija, Južna Koreja, Japan, Portugal, Ukrajina, Kina, Francuska, Turska, Egipat, Italija, Rusija, Njemačka, Švedska, Vijetnam, Izrael, Filipini, Iran, Indonezija, Tajland, Grčka, Poljska, Nizozemska, Uzbekistan, Bangladeš, SAD i još mnogo toga. Zemlja je zasebna os od jezika jer je skladba s Bollywooda i skladba na hindijskom jeziku nisu isto pitanje pretraživanja.

Izvođači i albumi

3.219 izvornih izvođača navedeno je u katalogu, a 186 albuma grupira skladbe u uređene zbirke. Svaki navedeni izvođač dobiva nadimak — izmišljeno ime izvođača pod kojim su objavljene AI obrade. Obrade The Beatles pojavljuju se kao Ash Titan; Elvis Presley kao Saint & the Beacons; Arethe Franklin kao The Northern Crowns; Marvina Gayea kao Iron Circuits. To je mala dizajnerska odluka koja obavlja mnogo posla: održava iskrenost priznanja, a istovremeno jasno ukazuje da ne slušate izvornog izvođača.

Kako pregledavati deset tisuća skladbi

Katalog ove veličine vrijedi onoliko koliko su mu dobri načini pristupa, a Beatoria nudi pet neovisnih osi, od kojih svaka ima svoj skup stranica:

Taj popis upita zaslužuje pažnju. Sedam tisuća osamsto osamdeset dva različita opisa stilova, od širokih (trap, disco rock, brz pop, dance pop EDM) do iznimno specifičnih (tema animea iz 1975. godine, španjolski pop rock iz sredine 2000-ih, tema s tulipanima, robotski vokoder, praznično patriotski, galopirajući riff, gudačka dionica, ženski harmonijski vokal). Svaki je stranica, a svaka stranica je ulaz.

Sustav faketa u pozadini

Iza vidljive taksonomije nalazi se druga, strukturirana: 55 faketa kroz sedam ortogonalnih grupa, pridruženih skladbama i korištenih za filtriranje i logiku stranice "slično ovome".

Zanimljiv dio je način na koji se ove vrijednosti ponderiraju pri sortiranju. Rangiranje relevantnosti kataloga ne tretira sve podudarnosti po facetama jednako — uske, smislene fakultete (era, raspoloženje, aktivnost) računaju se više od širokih (tempo, energija), jer je svaka pjesma nekim tempom, ali samo neke pjesme su nostalgija 80-ih za vožnju. Popularnost, mjerena stvarnim brojevima reprodukcija, služi kao razrješivač izjednačenosti.

Ta kombinacija — aktivnost plus raspoloženje plus era — je tiho najkorisnija stvar u sučelju. "Nekakvo epsko za trening koje zvuči kao osamdesete" je stvaran upit ovdje, a ne samo marketinški primjer.

Studio za stvaranje

Pregledavanje je dostupno svima bez potrebe za računom. Generiranje zahtijeva prijavu, a tijek rada osmišljen je tako da ništa od vašeg stvaralaštva ne dodiruje javni katalog dok vi sami ne odlučite da to želite.

Što kontrolirate

• Opis / prompt Sloban tekstualni opis pjesme koju želite — žanr, raspoloženje, instrumentacija, razdoblje, svega po volji. Ovo je glavni upravljač.
• Tekst pjesme Vaši vlastiti riječi ili oni generirani. U oba slučaja to je tekst koji model pjeva.
• Vokalni jezik Bilo koji od dvadeset i pet jezika koje katalog podržava.
• Trajanje Postavlja se po pjesmi; vlastite pjesme u katalogu uglavnom traju 150–180 sekundi.
• Varijante Do četiri verzije generirane iz jednog zahtjeva, kako biste mogli birati umjesto ponovnog generiranja.
• Referentni audio Opcionalno. Učitajte pjesmu i sustav je koristi kao referencu za obradu.

Trik s referentnim audijem

Ovo je najpametnija mala značajka proizvoda. Učitajte referentnu pjesmu i prije nego što se išta generira, datoteka prolazi kroz laganu analizu temeljenu na biblioteci librosa — bez strojnog učenja, već samo analizu signala — koja čita glazbenu strukturu audija i automatski popunjava polje prompta opisom stila izvedenim iz nje.

Umjesto da buljite u prazno polje za unos i pokušavate opisati zvuk riječima, sustavu predajete zvuk, a on za vas sastavlja prvi nacrt opisa. Zatim taj opis uređujete, što je znatno lakši zadatak od pisanja od nule.

Analiza je stateless — datoteka se prenese u privremenu datoteku, analizira i briše. Ništa se ne zadržava.

Staging, a zatim objavljivanje

Sve što generirate završava u privatnoj zoni za pripremu (staging) vezanoj uz vaš račun, u odvojenom skupu tablica i odvojenoj izlaznoj mapi od javnog kataloga. Odavde imate točno tri opcije, a sve su isključivo vaše:

1. Objavite odabranu verziju u javni katalog, gdje postaje običan unos u katalogu s pripadajućom taksonomijom;
2. Obrišite jednu verziju koju ne želite, zadržavajući ostatak serije;
3. Obrišite cijeli posao i sve u njemu.

Postoji paralelna, administratorima rezervirana inačica iste mehanike za ponovno generiranje postojećih pjesama iz kataloga — generirajte do četiri nove verzije za postojeću pjesmu, a zatim ili zamijenite izvornu verziju na mjestu ili objavite novu verziju kao potpuno novi unos. Ista odvojenost, isto pravilo eksplicitne radnje: ništa automatski ne stiže u javni katalog.

Što zapravo generira glazbu

Beatoria radi na ACE-Step, modelu za generiranje glazbe otvorenog koda, koji se pokreće putem Gradio API na posvećenom GPU uređaju, a ne putem usluge treće strane za glazbu API. Taj izbor ima posljedice vrijednih detaljnog objašnjenja jer su vidljive u proizvodu.

• Bez računa po pjesmi za API Pogon je stroj koji projekt iznajmljuje, a ne usluga koju mjeri. Postoji deset tisuća pjesama jer je generiranje desete tisuće pjesme koštalo ništa osim sati koje su već plaćene.
• Izravna kontrola parametara Web aplikacija komunicira izravno s pozivom za generiranje motora, postavljajući naslov, tekstove pjesme, jezik, trajanje i broj varijanti kao eksplicitne argumente, a ne kroz pojednostavljeni omotač dobavljača.
• Posvećena putanja za obradu Obrade s referentnim zvukom zahtijevaju sesiju koja traje kroz više poziva, pa se stoga koriste putem Python mosta s Gradio klijentom, a ne običnim HTTP-om. Radi se o malom komadu inženjeringa koji postoji isključivo zato što bi naivan pristup izgubio stanje između uploada i generiranja.
• Namjerna mekoća Način obrade prilagođen je za ponovno generiranje vokala za novi tekst, a ne za točno kopiranje referentnog glasa. Sličnost proizlazi iz naslova, stila, tempa i oblika teksta — a ne iz kopiranja izvedbe.

Zadnja točka nije tehničko ograničenje; to je etika proizvoda implementirana u parametru. Sustav prilagođen za maksimalnu sličnost proizveo bi nešto bliže imitaciji. Beatoria je prilagođen za proizvodnju nečega bližeg novom snimanju koje pamti staro.

Sloj slušanja

Stranica prati reprodukciju detaljnije od jednostavnog brojača reprodukcije i to po pjesmi, a ne po pregledu stranice:

Brojači pragova su oni iskreni. Kod generirane glazbe jaz između pokrenuto i preživjelo petnaest sekundi je ogroman, a praćenje tih podataka odvojeno omogućuje da sortiranje popularnosti u katalogu ima smisla. Staza s tisuću pokretanja i četrdeset završetaka nije hit; staza s dvije stotine pokretanja i šezdeset i šest završetaka jest.

Iznad toga nalaze se popisi za slušanje, povijest preuzimanja po korisniku, glasovi i sloj računa s lokalnom prijavom putem e-maila i lozinke te Google OAuth. Slušanje nikada ne zahtijeva ništa od toga — autentifikacija postoji kako bi se otključalo stvaranje, popisi za slušanje i povijest, a ne da bi se katalog stavio pod ključ.

Izgrađeno kao prava aplikacija, a ne omotač

Tehnološki stog zaslužuje odlomak jer objašnjava zašto se katalog s deset tisuća staza učitava na način na koji se učitava.

Prednji dio je Vue aplikacija s jedne stranice s predhodnim renderiranjem na poslužitelju, podijeljena u pakete po rutama — Početna, Biblioteka, Kategorija, Staza, Izvođač, Izvođači, Album, Albumi, Zemlja, Zemlje, Promt, Promptovi, Stvori, Račun, Vodič, Informacije. Pozadinski dio je PHP 8.3 API s čistim rasporedom klasa po domeni (Katalog, Staza, Izvođači, Albumi, Zemlje, Promptovi, Zadaci, Kreacije, Renderiranja, Analiza, Popis za slušanje, Slušanja, Preuzimanja, Glasovi, Autentifikacija, GoogleOAuth) iza jednog rutera.

Tri detalja pokazuju razinu brige:

• Meta podaci za SEO po stranici pohranjeni su u bazi podataka, a ne u JavaScript paketu. Izgradnja s predhodnim renderiranjem ih čita kako bi svaka ruta isporučila ispravan, jedinstveni naslov i opis u HTML-u — aplikacija s jedne stranice koja je doista indeksirana, a ne nominalno.
• Pismoa su samostalno hostirana, s pismima iznad praga pregleda unaprijed učitanim. Ovo uklanja zahtjev treće strane koji blokira renderiranje i kasni pomak izgleda prilikom zamjene fontova koji mu slijedi.
• Upiti za pretraživanje i termini namjere bilježe se, tako da ono što ljudi zapravo traže vraća se u način na koji je katalog organiziran.

Na korijenu se također nalazi strojno čitljiva datoteka llms.txt, napisana posebno za AI odgovorne motore. Ona navodi što je web stranica, nudi ključne stranice i — naglašeno — navodi pravilo o stihovima u obliku koji model može citirati. S obzirom na to da cijela pravna osnova kataloga počiva na toj razlici, objavljivanje tog pravila tamo gdje će ga odgovorni motori čitati točno je pravi potez.

Poslužitelj API iza web mjesta

Prednji dio sustava Beatoria klijent je vlastitog javnog JSON API, što znači da je sve što web mjesto može učiniti dostupno programski. Router izlaže jedan segment po domeni:

Jedan poziv kataloga vraća ukupan broj, stranicu, veličinu po stranici, broj stranica, potpuni popis žanrova, žive brojače faktora za svaki žanr i same stavke — svaku s njezinim skladbama, varijantama, naslovnom umjetninom, jezikom, trajanjem, atribucijom naslovnice i brojem playanja. To je potpuna površina za pregledavanje u jednom zahtjevu, zbog čega se SPA osjeća na taj način.

curl 'https://beatoria.ai/api/catalog?limit=2'

{
  "total": 10381,
  "page": 1,
  "per": 24,
  "pages": 433,
  "categories": ["Pop","Rock","Hip-Hop","R&B/Soul","Electronic","Folk", … ],
  "facets": { "Pop": 2993, "Rock": 2570, "Electronic": 938, … },
  "items": [
    {
      "id": 10415,
      "title": "Wolves of the Longboat",
      "original": "",
      "caption": "Create aggressive and rhythmic hip-hop song",
      "category": "Hip-Hop",
      "artist": null, "album": null,
      "lang": "en", "duration": 180,
      "is_cover": false,
      "tracks": [{ "url": "/output/job10415_1.mp3", "variant": 1 }],
      "plays": 4
    }
  ]
}

Gdje se Beatoria nalazi u krajoliku AI glazbe

Prostor AI glazbe podijelio se u četiri grubo kategorije, a Beatoria namjerno je u onoj s najmanje sudionika.

Praktična razlika je ono što se događa u prvih deset sekundi. Na generatoru dobivate prazno polje za unos. Na Beatoria dobivate knjižnicu. Većina ljudi, većinu vremena, želi knjižnicu — a generator je tu za manjinu posjeta kada je to potrebno.

Druga razlika je priča o licenciranju. Skladba čiji su tekstovi napisani za nju, a čiji je audio proizveden modelom koji projekt sam upravlja, ima znatno jednostavniji profil prava od pretvorbe glasa komercijalne snimke. To nije pravno mišljenje i nije licenca — ali to je razlog zašto katalog može postojati u ovom opsegu i biti besplatan za slušanje.

Pitanje o tekstovima, izravno odgovoreno

Svaki projekt koji stavlja riječ "cover" uz poznate naslove pjesama izaziva očito pitanje, pa je vrijedno odgovoriti na njega jasno, umjesto da ga se prešuti.

Iskrene činjenice

• Prvenstveno je riječ o katalogu Preko devet tisuća pjesama proizvedeno je u seriji od strane samog projekta, a ne korisnika. Studio za stvaranje je stvaran i otvoren, ali biblioteka je glavni proizvod.
• AI vokali i dalje su AI vokali ACE-Step je snažan open-source model i nije sesijski pjevač. Neki žanrovi — velike balade, orkestralna glazba, bliski harmoniji — općenito bolje prolaze od drugih.
• Upiti pokazuju svoje šavove Skoro osam tisuća upita za stilove napisanih tijekom proizvodnog procesa znači da su neki od njih izvrsno precizni, a neki su dugi samo tri riječi. Ipak su pregledni, što je vjerojatno iskreniji izbor.
• Naslovnice su reference, a ne reprodukcije Ako očekujete čuti stvarnu melodiju poznate pjesme s novim tekstom na vrhu, to nije ono što ovo nudi. Odnos prema originalu temelji se na žanru, eri, raspoloženju i strukturi — uz otvoreno priznanje zasluga.

Za koga je ovo zapravo namijenjeno

• Slušateljima kojima je potrebna pozadinska glazba s oblikom Deset tisuća pjesama filtriranih prema aktivnosti, raspoloženju i eri, besplatno, bez računa, bez oglasa koji bi ometali reprodukciju.
• Stvarateljima kojima je potrebna izvorna glazba koju mogu koristiti Pjesme s originalnim tekstovima i bez uzorkovanog snimka u pozadini zahtijevaju sasvim drugačiji ugovor o licenciranju od komercijalne pjesme.
• Ljudi koji uče kako pisati upute za glazbene modele Sedam tisuća uputa za stilove, od kojih je svaka povezana s pjesmom koju je generirala, jedan je od boljih javnih korpusa „ova uputa generirala je ovaj zvuk
• Slušatelji koji ne govre engleski Dvadeset pet vokalnih jezika s pravom publikom za svaki od njih i zemljopisni odjelci odvojeni od jezičnih.
• Svatko tko želi napraviti jednu Prijavite se, opišite pjesmu ili otpremite referentnu pjesmu, dobijte četiri varijante, zadržite onu koja vam se sviđa — a ona ostaje privatna dok je ne objavite.

Kratka verzija

Beatoria ima 10.381 AI-generiranu pjesmu — 10.367 od njih su obrade u specifičnom smislu koji web stranica definira: poznata pjesma ponovno osmišljena s potpuno novim, originalnim tekstovima, koju izvodi AI glas, objavljena pod izmišljenim imenom izvođača, uz navod originalnog izvođača po imenu i umjetniku. Četrnaest žanrova, dvadeset pet vokalnih jezika, trideset dva zemljopisna odjeljka, 3.219 referentnih izvođača, 186 albuma i 7.882 preglednih uputa za stilove, sve besplatno za slušanje bez računa.

Iza toga se nalazi samostalni ACE-Step pogonski sustav, sustav faceti s 55 tagova u sedam grupa, stvarne analitike slušanja do stope završetka do praga i studio za stvaranje vlastitih pjesama gdje se po zahtjevu dobivaju četiri varijante, a otpremanje referentne pjesme automatski generira vašu uputu, ništa ne postaje javno dok ne pritisnete gumb za objavu.

Svaki tekst na Beatoria je originalni tekst napisan za tu pjesmu. Oni ne reproduciraju zaštićene autorskim pravima tekstove originalnih pjesama.

Vlastita napomena Beatoria za AI odgovorne motore

Započnite slušanje: beatoria.ai · cijeli katalog na /library · napravite svoju na /create.