Ka taea e koe te whakamahi AI ki te hanga rekoata hou mai i to kaitoi tino pai?
Ko nga waahanga hou i roto i te ako miihini kua whakaatu ka taea e nga tauira te mohio ki nga raraunga matatini penei i nga tuhinga me nga whakaahua. Ko te OpenAI's Jukebox e whakaatu ana ko te waiata ka taea te whakatauira tika e te whatunga neural.
He mea uaua te waiata hei whakatauira. Me whai whakaaro koe ki nga ahuatanga ngawari e rua penei i te waa, te reo oro, me te pitch me nga ahuatanga uaua ake penei i nga kupu, nga taonga whakatangitangi, me te hanganga puoro.
Te whakamahi matatau akoranga mīhini nga tikanga, kua kitea e OpenAI tetahi huarahi ki te huri i te ororongo mata ki te ahua ka taea e etahi atu tauira te whakamahi.
Ma tenei tuhinga e whakamarama he aha nga mahi a Jukebox, me pehea te mahi, me nga herenga o te hangarau o naianei.
He aha te Jukebox AI?
Jukebox he tauira neural net na OpenAI ka taea te whakaputa waiata ma te waiata. Ka taea e te tauira te whakaputa waiata i roto i nga momo momo me nga momo toi.
Hei tauira, ka taea e Jukebox te whakaputa i tetahi waiata toka ki te ahua o Elvis Presley, he waiata hip hop ranei i te ahua o Kanye West. Ka taea e koe te toro ki tenei paetukutuku ki te tuhura i te whai hua o te tauira ki te hopu i te oro o nga kaitoi puoro me nga momo tino pai.
Ko te tauira e hiahia ana he momo, he kaitoi, he kupu hei whakaurunga. Ko tenei whakaurunga ka arahi i tetahi tauira kua whakangungua mo nga miriona kaitoi me nga raraunga waiata.
He pehea te mahi a Jukebox?
Kia titiro tatou ki te whakahaere a Jukebox ki te whakaputa i nga ororongo hou mai i tetahi tauira kua whakangungua mo nga miriona waiata.
Tukanga Whakawaehere
Ahakoa kei te whakamahi etahi tauira whakatipuranga puoro i nga raraunga whakangungu MIDI, ka whakangunguhia a Jukebox ki te konae ororongo tuuturu. Hei kopiri i te oro ki te waahi motuhake, ka whakamahi a Jukebox i te huarahi whakawaehere-aunoa e mohiotia ana ko VQ-VAE.
VQ-VAE e tu ana mo Vector Quantized Variational Autoencoder, he ahua uaua pea te tangi, no reira me wehewehe.
Tuatahi, kia mohio tatou ki ta tatou e hiahia ana ki konei. Ki te whakatauritea ki nga kupu, waiata pepa ranei, he tino uaua ake te konae ororongo mata. Mena kei te pirangi tatou kia "ako" ta tatou tauira mai i nga waiata, me huri tatou ki te ahua o te ahua o te ahua ngawari ake. I roto akoranga mīhini, ka kiia e matou tenei ahuatanga o raro he waahi huna.
An whakawaehereaunoa he tikanga ako kaore i te tirotirohia e whakamahi ana i a te whatunga taiao ki te kimi whakaaturanga huna kore-raina mo tetahi tohatoha raraunga. Ko te autoencoder e rua nga wahanga: he encoder me te wetewaehere.
te pouakahere ka ngana ki te kimi i te mokowā huna mai i te huinga raraunga mata i te wa e pūwetewaehere ka whakamahi i te whakaaturanga huna ki te ngana ki te hanga ano ki tona whakatakotoranga taketake. Ka akohia e te autoencoder me pehea te kopiri i nga raraunga mata hei whakaiti i te hapa hanga.
Inaianei kua mohio tatou he aha te mahi a te autoencoder, me ngana ki te mohio he aha te tikanga o te "rerecoder" autoencoder. Ka whakatauritea ki nga kaitahuri-aunoa, ka taapirihia e nga kaiwhakawaehere rerekee i mua i te waahi huna.
Ki te kore koe e ruku ki te pangarau, ka taapirihia he tohu o mua ka mau tonu te tohatoha huna. Ko te rereketanga nui i waenga i te VAE me te VQ-VAE ko te mea ka whakamahia e te whakamutunga he whakaaturanga huna motuhake, kaua ki te haere tonu.
Ka whakawaehere takitahi ia taumata VQ-VAE i te whakauru. Ko te whakawaehere taumata o raro ka whakaputa i te hanganga-kounga teitei. Ko te whakawaehere taumata-runga e pupuri ana i nga korero puoro whakahirahira.
Te whakamahi i nga Transformers
Inaianei kei a matou nga waehere puoro kua whakawaeheretia e VQ-VAE, ka taea e matou te ngana whakaputa waiata i roto i tenei mokowā motumotu kōpeke.
Ka whakamahi Jukebox nga huringa autoregressive ki te hanga i te ororongo whakaputa. Ko nga Kaihuri he momo whatunga neural e mahi pai ana me nga raraunga raupapa. Ka hoatu he raupapa tohu, ka ngana tetahi tauira whakawhiti ki te matapae i te tohu e whai ake nei.
Ka whakamahia e Jukebox tetahi momo ngawari o Sparse Transformers. Kia whakangungua nga tauira katoa o mua, ka whakaputahia e te kaihurihuri nga waehere kua kopeke, katahi ka wetewetehia ki te ororongo mata ma te whakamahi i te wewetewaehere VQ-VAE.
Kaitoi me te momo Whakaahua i roto i te Jukebox
Ko te tauira whakaputa a Jukebox ka kaha ake te whakahaere ma te whakarato tohu herenga taapiri i te wa o te whakangungu.
Ko nga tauira tuatahi ka tukuna e nga kaitoi me nga tapanga momo mo ia waiata. Ka whakaitihia te entropy o te matapae ororongo ka taea te tauira kia pai ake te kounga. Ka taea hoki e nga tapanga te arahi i te tauira ki tetahi momo ahua.
I tua atu i te kaitoi me te momo, ka taapirihia nga tohu wa i te wa whakangungu. Kei roto i enei tohu te roa o te waiata, te wa timata o tetahi tauira, me te hautanga o te waiata kua pahemo. Ko enei korero taapiri ka awhina i te tauira ki te mohio ki nga tauira ororongo e whakawhirinaki ana ki te hanganga katoa.
Hei tauira, ka ako pea te tauira ko te pakipaki mo te waiata ora ka puta i te mutunga o te waiata. Ka taea hoki e te tauira te ako, hei tauira, he roa ake nga waahanga taputapu o etahi momo i etahi atu.
lyrics
Ko nga tauira ahua kua whakahuahia i te waahanga o mua ka kaha ki te whakaputa i nga momo reo waiata. Heoi ano, ko enei reo he ahua koretake me te kore e mohiotia.
Hei whakahaere i te tauira whakahiato ina tae mai ki te reanga waiata, ka whakaratohia e nga kairangahau etahi atu horopaki i te wa whakangungu. Hei awhina i te mahere raraunga kupu ki te wa i runga i te ororongo tuturu, i whakamahia e nga kairangahau Panapita ki te tango reo me te NUSAunoaLyricsTirohia ki te tiki i nga whakaritenga taumata kupu o nga kupu.
Te herenga o te tauira Jukebox
Ko tetahi o nga here nui o Jukebox ko tona mohio ki nga hanganga puoro nui ake. Hei tauira, he pai te tangi o te topenga poto 20-hekona o te putanga, engari ka kite te hunga whakarongo kei te ngaro te hanga puoro o te tukurua i nga waiata me nga whiti i te putanga whakamutunga.
He puhoi ano te tauira ki te tuku. Tata ki te 9 haora te roa ki te whakaputa katoa i te meneti kotahi o te ororongo. Ka whakawhāitihia te maha o nga waiata ka taea te hanga me te aukati i te tauira kia whakamahia i roto i nga tono tauwhitiwhiti.
Ka mutu, kua kite nga kairangahau ko te tauira huinga raraunga kei te reo Ingarihi me te whakaatu i nga huihuinga puoro o te Tai Hauauru. Ka taea e nga kairangahau AI te arotahi ki nga rangahau a meake nei ki te whakaputa waiata i etahi atu reo me nga momo puoro ehara i te Tai Hauauru.
Opaniraa
Ko te kaupapa Jukebox e whakaatu ana i te kaha tipu o nga tauira ako miihini ki te hanga i nga whakaaturanga huna tika o nga raraunga uaua penei i te ororongo mata. He rite ano nga mahi i roto i nga tuhinga, penei i nga kaupapa penei GPT-3, me nga whakaahua, e kitea ana i OpenAI's DALL-E2.
Ahakoa he mea whakamīharo te rangahau i tenei waahi, kei reira tonu nga awangawanga mo nga mana taonga hinengaro me te paanga o enei tauira ki nga umanga auaha katoa. Me kaha tonu te mahi tahi a nga kairangahau me nga kaihanga auaha kia pai ake ai enei tauira.
Ko nga tauira puoro a meake nei ka kaha ki te mahi hei taputapu mo nga kaiwaiata, hei tono ranei mo nga mahi auaha e hiahia ana ki te waiata ritenga mo nga kaupapa.
Waiho i te Reply