Google huet MusicLM ugekënnegt, kënschtlech Intelligenz déi Musek erstellt aus de Wierder déi Dir tippt, wéi DALL-E 2. Et ass e Sproochmodell erstallt vu Google Research. Donieft hunn se et exklusiv fir d'Musekskreatioun entworf.
An, et gouf op enger grousser Dataset vu Museksdateien trainéiert a ka Musek a verschiddene Stiler a Formen produzéieren. Wann Dir un Musek interesséiert sidd; da sollt Dir kucken wat MusicLM ubitt.
Mat MusicLM produzéiert Dir Musek a verschiddenen Techniken a Formen. Zum Beispill kënnt Dir Piano Stécker, Drums Beats a Melodien fir Texter erstellen.
Och kënnt Dir op bestëmmte Stiler ofstëmmen oder de Benotzer geliwwert Input enthalen. Et ass geduecht fir Musek ze produzéieren déi harmonesch a rhythmesch kohäsiv ass. Also, loosst eis dauchen a kucken wat MusicLM alles ass.
Virdrun Versich
MusicLM ass net deen éischten AI-generéierte Museksystem. Riffusion, Dance Diffusion, Google's AudioML, an OpenAI's Jukebox sinn Beispiller vu vergläichbare Approche. Wéi och ëmmer, dës fréier Systemer goufen duerch technologesch Restriktiounen ageschränkt.
Och hire Mangel u Trainingsdaten huet et schwéier gemaach qualitativ héichwäerteg Melodien ze komponéieren. Wéi och ëmmer, MusicLM huet d'Kapazitéit fir Musek mat engem gréisseren Niveau vu Raffinesséierung a Realismus ze kreéieren.
Iwwersiicht MusicLM
MusicLM léiert d'Struktur an de Stil vun der Musek. Dofir gëtt et op enger grousser Dataset vu MIDI a symbolesche Museksdateien trainéiert. Wéi seng ähnlech Programmer ass MusicLM op Transformer Architektur gebaut.
Benotze vu SelbstOpmierksamkeetstechniken fir op bestëmmten Inputkomponenten ze konzentréieren, gëtt d'Transformatorarchitektur vun MusicLM benotzt fir d'Struktur an de Stil vun der Musek aus engem groussen Dataset ze extrahieren. Als Resultat kënnt Dir harmonesch a rhythmesch kohäsiv Musek kreéieren.
An dës Musek kann d'Organisatioun vum Benotzerinput mimikéieren. Dofir wäert Dir fäeg sinn dat musikalescht Resultat ze kréien deen Dir speziell um Programm beschreift.
Den Erfolleg vun virdrun Sproochmodeller, wéi GPT-2 an GPT-3, déi hir Kapazitéit bewisen hunn fir kohärent a fléissend Schreiwen ze kreéieren, inspiréiert MusicLM. MusicLM, op der anerer Säit, ass den éischte Sproochemodell deen exklusiv fir d'Museksgeneratioun gebaut gouf.
An, mir mengen datt et als ee vun de raffinéiertste Modeller ugesi gëtt.
Wéi Huet Et Aarbecht?
DALL-E 2 a Google's MusicLM Kënschtlech Intelligenz deelen vill strukturell Ähnlechkeeten. Dës Kéier gëtt Är Schreiwen awer musikalesch anstatt visuell vermëttelt. Zu dësem Zäitpunkt kënnt Dir entweder e ganzt Stéck konstruéieren. Och kënnt Dir Rhythmus mat nëmmen engem Instrument generéieren.
Dir kënnt verschidde Probestudien erstallt vum Google AI Team op der Github Säit vu MusicLM kucken. Och wann d'AI nach ëmmer an der Fuerschungs- an Entwécklungsstadium ass, sinn d'Kläng déi et ka maachen héich Opléisung. Och goufen et Virschléi, wéi dës AI mat ChatGPT z'integréieren. Dës Integratioun kéint zu méi komplizéierter a kreativer Musek féieren.
Vun Humming bis Hit Melodien
MusicLM kombinéiert véier verschidde AI Modeller: MuLan, AudioLM, w2v-BERT, a Soundstream. Obwuel all eenzel vun dëse Modeller eng Rei vun ënnerschiddleche Fäegkeeten huet. Wéi se awer integréiert goufen, hunn se zu MusicLM gefouert!
Museker an Industriefachleit hunn d'Kapazitéit vum MusicLM bemierkt fir och déi elementarsten Hummen a Geschwëster a ganz Melodien ze transforméieren. Andeems Dir mat ChatGPT kombinéiert, kann et eenzegaarteg Musek produzéieren.
Dir kënnt d'Musek an d'Kläng erstallt vu MusicLM op hirem lauschteren an entdecken Websäit. Awer bedenkt datt et de Moment an der Testphase ass. Et ass offensichtlech datt MusicLM d'Fäegkeet huet de Museksgeschäft komplett ze transforméieren wéi d'Technologie sech entwéckelt.
AI-generéiert Musek mat Mënsch-ähnlechen Nuancen
Fir Lidder ze produzéieren déi Sënn maachen op Basis vu grëndleche Beschreiwungen, gouf MusicLM op enger grousser Dataset vun 280,000 Stonnen Musek trainéiert. Zum Beispill kënnt Dir "e melodeschen Dubstep-Melodie mat engem déiwe Bass a sophistikéierten Drum-Rhythmen erstellen". Oder, Dir kënnt et froen fir "e verlockende Popsong mat engem faszinéierende Gittarriff an engem kräftege Vokalist ze kreéieren." Är Fantasie ass d'Limite an dësem Fall.
Déi produzéiert Lidder gläichen déi vu mënschleche Museker komponéiert. Dem MusicLM seng Echantillon sinn extrem erstaunlech. Et ass richteg, besonnesch well et kee Mënsch am Zesummesetzungsprozess involvéiert ass. MusicLM kann nuancéiert Aspekter wéi musikalesch Riffs, Melodien an Emotiounen widderhuelen. Ausserdeem funktionnéiert et och wann komplizéiert an explizit Spezifikatioune ginn.
Wichtegst Features
Painting Caption Conditioning
Painting Caption Conditioning ass eng MusicLM Funktioun. Dir kënnt Musek produzéieren op Basis vun enger textueller Beschreiwung oder "Iwwerschrëft" vun engem Bild. Dëst implizéiert datt MusicLM fäeg ass Musek ze kreéieren déi d'Emotiounen, Stëmmungen an Iddien erfaasst, déi an engem Bild ausgedréckt sinn. Dës Fäegkeet ass ganz hëllefräich fir Musek fir Filmer ze maachen, Video Spiller, an all Zorte vu visuellen Medien.
Story Mode
Geschicht Modus Fonktioun hëlt eng Geschicht Text als Input. Dofir erstellt et begleedend Hannergrondmusek. D'Benotzer kënnen dës Funktioun benotze fir e Soundtrack fir eng Geschicht, Videospill oder Film ze bauen andeems se den Szenario oder den emotionalen Toun ofbilden.
Story Mode ass e praktescht Tool fir Medienkënschtler. Sou kann et eng breet Palette vu musikalesche Stiler an Instrumenter generéieren. MusicLM's Tale Mode kritt den emotionalen Impakt vun enger Szen ze erhéijen. Also, Zuschauer kënnen en zousätzleche Grad vun Taucht an der Geschicht hunn.
Museker Erfahrung Niveau
Dir kënnt d'Schwieregkeet vun der erstallt Musek personaliséieren. D'Benotzer kënnen tëscht dräi Niveauen op Basis vun hirem Fäegkeetsniveau wielen. Och kënne si de gewënschte Grad vu Komplexitéit spezifizéieren: Ufänger, Mëttelstuf oder fortgeschratt.
Dës Fonktioun hëlleft Iech wann Dir e bësse musikalesch Expertise hutt a wëllt mat neie Kompositioune experimentéieren. Wéi och ëmmer, wann Dir en erfuerene Museker sidd, kënnt Dir raffinéiert an subtil Musek kreéieren. Dem MusicLM säin Zil mat dëser Feature ass eng zougänglech Erfahrung fir all Benotzer ze liwweren.
Generatioun Diversitéit
Mat der Generation Diversity Funktioun kënnt Dir vill Versioune vun engem Song aus dem selwechten Input produzéieren. An Dir kënnt eng variéiert Palette vun Ausgänge hunn. Dëst implizéiert datt d'AI verschidde Versioune vun engem Song generéiere kann.
Donieft ginn et alternativ Melodien oder Akkordprogressiounen, awer ëmmer nach de Grondstil a Struktur vum Lidd. Dës Fonktioun hëlleft dem AI seng Musek Kreatioun méi kreativ ze sinn. Dofir mécht et d'Musekkreatioun méi analog zum mënschleche Songwriting.
Méiglech Aschränkungen vun MusicLM
Google huet MusicLM nach net fir d'Allgemengheet zur Verfügung gestallt well et nach ëmmer an der Entwécklung ass. Dofir kënnt Dir nach keng speziell Echantillon vun der Aarte vu Musek ginn, déi MusicLM produzéiere kann. Ausserdeem ass et nach e bëssen onbekannt wéi eng Restriktiounen MusicLM kéint hunn.
Well d'Technologie nach ëmmer a senge fréie Stadien ass, kann et gewësse Restriktiounen op de Kaliber vun der Musek hunn déi produzéiert gëtt oder seng Kapazitéit fir speziell Inputen ze handhaben.
Déi verzerrt Qualitéit vun de produzéierte Proben ass ee vun de Schlëssel Nodeeler. Dëst ass en noutwendegt Nebenprodukt vun der Trainingsprozedur déi benotzt gëtt fir MusicLM z'entwéckelen.
En aneren Nodeel ass dat, trotz dem MusicLM seng technesch Fäegkeet fir Gesang ze fabrizéieren. Dozou gehéiert och Chouerlidder. D'Texter, déi vu MusicLM produzéiert ginn, schéngen heiansdo wéi e Gibberish. Ausserdeem kënne se schwéier sinn ze verstoen. Wéi och ëmmer, MusicLM ass nach ëmmer an der Entwécklung an dës Themen kënne verbessert ginn.
Finale Remarken
Schlussendlech gleewen mir datt d'Technologie déi Google MusicLM ënnersträicht souwuel interessant a faszinéierend ass. Et ass erstaunlech datt en AI Musek a ville Stiler ka maachen, mat engem méi héije Realismus. MusicLM huet d'Potenzial fir de Museksgeschäft z'änneren. An, mir sinn opgereegt ze kucken wéi dës Technologie evoluéiert.
Hannerlooss eng Äntwert