See postitus selgitab järgmist sisu:
- Mis on OpenAI Jukebox?
- Kuidas OpenAI Jukebox töötab?
- Kuidas kasutada OpenAI Jukeboxi?
- Jukeboxi omadused
Mis on OpenAI Jukebox?
Jukebox on süvaõppesüsteem, mis suudab muusikat nullist luua, võttes arvesse teatud sisendit, nagu laulusõnad, žanr, esitaja või meeleolu. Jukebox kasutab muusika mustrite ja funktsioonide õppimiseks suurt andmekogumit, mis koosneb enam kui 1,2 miljonist loost erinevatest allikatest, nagu Spotify, YouTube ja MIDI-failid.
Kuidas OpenAI Jukebox töötab?
Jukebox koosneb kolmest põhikomponendist: VQ-VAE kodeerijast, trafodekoodrist ja ülessamplerist.
VQ-VAE kodeerija
VQ-VAE kodeerija vastutab toorheli tihendamise eest madalama mõõtmega esituseks, mis säilitab muusika olulise teabe. Kodeerija kasutab tehnikat, mida nimetatakse vektorkvantimiseks (VQ), et kaardistada iga helisegment ühte 2048 märgist.
Trafo dekooder
Need märgid suunatakse seejärel trafo dekoodrisse, mis on närvivõrk, mis suudab sisendi ja õpitud muusikaliste teadmiste põhjal luua märgijadasid. Dekooder võib genereerida märke, mis vastavad sõnadele, meloodiale, harmooniale, rütmile, tämbrile ja muudele muusikalistele aspektidele.
Upsampler
Upsampler on viimane komponent, mis teisendab loodud märgid tagasi kvaliteetseks heliks. Ülesdisampler kasutab teist VQ-VAE-d, et rekonstrueerida heli märkide põhjal, lisades samal ajal üksikasju ja nüansse, mis madalama mõõtmega esituses puuduvad. Ülessampler saab kasutada ka lisateavet, näiteks žanri või esitaja manuseid, et väljundit peenhäälestada ning muuta see realistlikumaks ja mitmekesisemaks.
Kuidas kasutada OpenAI Jukeboxi?
Jukeboxi kasutamiseks peab teil olema juurdepääs võimsale GPU-le või pilvandmetöötlusteenusele, mis suudab Jukeboxi koodi käitada. Leiate skripti ja juhised Jukeboxi installimise ja käivitamise kohta GitHub . Mõned näited Jukeboxi loodud lauludest leiate ka veebisaidilt SoundCloud allpool:
Oma lugude loomiseks Jukeboxiga peate sisestama mõned sisendparameetrid, nagu laulusõnad, žanr, esitaja või meeleolu. Samuti saate määrata proovivõtu temperatuuri, mis määrab, kui juhuslik ja loominguline väljund on.
Kõrgem temperatuur tähendab rohkem mitmekesisust ja uudsust, samas kui madalam temperatuur tähendab rohkem sidusust ja sarnasust sisendiga. Samuti saate valida väljundi kvaliteedi ja keerukuse taseme vahemikus 5b (kõrgeim) kuni 1b (madalaim). Kõrgem tase tähendab rohkem täpsust ja detailsust, aga ka rohkem arvutusaega ja ressursse.
Kui olete oma sisendparameetrid seadistanud, saate käivitada Jukeboxi koodi ja oodata, kuni see loob teie loo. Olenevalt teie seadetest ja riistvarast võib see kesta minutitest tundideni või isegi päevadeni. Samuti jälgige edenemist ja kuulake vahepealseid näidiseid. Kui genereerimine on lõpetatud, saate oma laulu alla laadida MP3-failina ja nautida oma muusikalist meistriteost.
Jukeboxi omadused
Jukeboxi saab kasutada erinevatel eesmärkidel, näiteks:
- Originaalse muusika loomine isiklikuks või äriliseks kasutamiseks
- Olemasolevate lugude remiksimine või sämplimine
- Muusika loomine teatud meeleolude, teemade või sündmuste jaoks
- Erinevate žanrite ja muusikastiilide uurimine
- Lõbutseda ja olla loominguline
Järeldus
Jukebox on suurepärane tööriist, mis aitab teil minimaalse pingutusega luua originaalset ja mitmekesist muusikat. Saate seda kasutada erinevate žanrite ja stiilidega katsetamiseks, olemasolevate lugude või artistide remiksimiseks või oma emotsioonide ja ideede väljendamiseks muusika kaudu. Jukebox pole siiski täiuslik; see võib mõnikord tekitada tõrkeid, vigu või mõttetuid väljundeid.