Rann neral se yon teknik émergentes nan aprantisaj pwofon ki gen pou objaktif pou ogmante tiyo klasik grafik òdinatè ak rezo neral.
Yon algorithm rann neral pral mande pou yon seri imaj ki reprezante ang diferan nan menm sèn nan. Lè sa a, imaj sa yo pral manje nan yon rezo neral yo kreye yon modèl ki ka pwodiksyon nouvo ang nan menm sèn nan.
Briyan ki dèyè rann neral se nan ki jan li ka rkree avèk presizyon sèn fotoreyalis detaye san yo pa bezwen konte sou metòd klasik ki ka plis mande pou enfòmatik.
Anvan plonje nan ki jan rann neral travay, an n ale sou Basics yo nan rann klasik.
Ki sa ki rann klasik?
Ann premye konprann metòd tipik yo itilize nan rann klasik.
Rann klasik refere a seri teknik yo itilize pou kreye yon imaj 2D nan yon sèn ki genyen twa dimansyon. Konnen tou kòm sentèz imaj, rann klasik itilize divès algoritm pou simulation ki jan limyè reyaji ak diferan kalite objè.
Pou egzanp, rann yon brik solid pral mande pou yon seri algoritm patikilye pou detèmine pozisyon nan lonbraj la oswa ki jan byen limen chak bò nan miray la pral. Menm jan an tou, objè ki reflete oswa refrakte limyè, tankou yon glas, yon objè klere, oswa yon kò dlo, yo pral mande pou pwòp teknik yo tou.
Nan rann klasik, chak avantaj reprezante ak yon may poligòn. Yon pwogram shader pral Lè sa a, sèvi ak poligòn nan kòm opinyon detèmine ki jan objè a pral sanble bay ekleraj la espesifye ak ang.
Rann reyalis pral mande plis pouvwa kalkil depi byen nou yo fini gen dè milyon de poligòn yo itilize kòm opinyon. Pwodiksyon òdinatè a ki komen nan sukse Hollywood yo anjeneral pran semèn oswa menm mwa pou rann epi li ka koute dè milyon de dola.
Apwòch trase reyon an patikilyèman koute chè paske chak pixel nan imaj final la mande pou yon kalkil sou chemen limyè a pran soti nan sous limyè a nan objè a ak nan kamera a.
Avansman nan pyès ki nan konpitè te fè grafik rann pi aksesib pou itilizatè yo. Pou egzanp, anpil nan dènye a jwèt videyo pèmèt efè ray-trace tankou refleksyon foto-reyalis ak lonbraj osi lontan ke pyès ki nan konpitè yo se jiska travay la.
Dènye GPU yo (inite pwosesis grafik) yo bati espesyalman pou ede CPU a okipe kalkil ki trè konplèks ki nesesè pou rann grafik foto-reyalis.
Leve non nan rann neral
Rann neral eseye atake pwoblèm nan rann nan yon fason diferan. Olye pou nou itilize algoritm pou simulation ki jan limyè reyaji ak objè, e si nou te kreye yon modèl ki aprann kijan yon sèn ta dwe gade nan yon sèten ang?
Ou ka panse a li kòm yon chemen kout pou kreye sèn fotoreyalis. Avèk rann neral, nou pa bezwen kalkile ki jan limyè reyaji ak yon objè, nou jis bezwen ase done fòmasyon.
Apwòch sa a pèmèt chèchè yo kreye bon jan kalite rann nan sèn konplèks san yo pa bezwen fè
Ki sa ki se jaden neral?
Kòm mansyone pi bonè, pifò rann 3D itilize may poligòn pou estoke done sou fòm ak teksti chak objè.
Sepandan, jaden neral yo ap pran popilarite kòm yon metòd altènatif pou reprezante objè ki genyen twa dimansyon. Kontrèman ak may poligòn, jaden neral yo diferan ak kontinyèl.
Ki sa nou vle di lè nou di jaden neral yo diferan?
Yon pwodiksyon 2D ki soti nan yon jaden neral kapab kounye a dwe antrene yo vin fotoreyalis pa jis ajiste pwa yo nan rezo neral la.
Sèvi ak jaden neral, nou pa bezwen similye fizik limyè a pou rann yon sèn ankò. Konesans ki jan yo pral limen rann final la kounye a estoke implicitement andedan pwa yo nan nou an nè rezo.
Sa a pèmèt nou kreye imaj roman ak videyo relativman rapid soti nan jis yon ti ponyen nan foto oswa pye videyo.
Ki jan yo fòme yon jaden neral?
Kounye a ke nou konnen de baz yo sou ki jan yon jaden neral travay, ann pran yon gade nan ki jan chèchè yo kapab antrene yon jaden klere neral oswa NeRF.
Premyèman, nou pral bezwen echantiyon kowòdone yo o aza nan yon sèn epi nouri yo nan yon rezo neral. Lè sa a, rezo sa a pral kapab pwodwi kantite jaden.
Kantite jaden yo pwodui yo konsidere kòm echantiyon ki soti nan domèn rekonstriksyon vle sèn nou vle kreye a.
Lè sa a, nou pral bezwen kat rekonstriksyon an nan imaj aktyèl 2D. Lè sa a, yon algorithm pral kalkile erè rekonstriksyon an. Erè sa a pral gide rezo neral la pou optimize kapasite li pou rekonstwi sèn nan.
Aplikasyon nan rann neral
Novel View sentèz
Sentèz View Novel refere a travay la nan kreye pèspektiv kamera nan nouvo ang lè l sèvi avèk done ki soti nan yon kantite limite nan pèspektiv.
Teknik rann neral eseye devine pozisyon relatif kamera a pou chak imaj nan dataset la epi bay done sa yo nan yon rezo neral.
Lè sa a, rezo neral la pral kreye yon reprezantasyon 3D nan sèn nan kote chak pwen nan espas 3D la gen yon koulè ki asosye ak dansite.
Yon nouvo aplikasyon NeRFs nan Google Street View sèvi ak sentèz vi nouvo pou pèmèt itilizatè yo eksplore kote nan mond reyèl la tankou si yo te kontwole yon kamera k ap pran yon videyo. Sa a pèmèt touris yo eksplore destinasyon yo nan yon fason Immersion anvan yo deside vwayaje nan yon sit espesifik.
Foto-reyalis avatar
Teknik avanse nan rann neral kapab tou pave wout la pou plis reyalis avatar dijital. Lè sa a, avatar sa yo ka itilize pou divès wòl tankou asistan vityèl oswa sèvis kliyan, oswa kòm yon fason pou itilizatè yo mete resanblans yo nan yon jwèt videyo oswa rann simulation.
Pou egzanp, yon papye pibliye nan mwa mas 2023 sijere itilize teknik rann neral yo kreye yon avatar foto-reyalis apre kèk minit nan pye videyo.
konklizyon
Rann neral se yon domèn etid enteresan ki gen potansyèl pou chanje tout endistri grafik òdinatè a.
Teknoloji a ta ka bese baryè a nan antre pou kreyasyon an nan byen 3D. Ekip efè vizyèl yo ka pa oblije rete tann ankò pou rann kèk minit nan grafik foto-reyalis.
Konbine teknoloji a ak aplikasyon VR ak AR ki egziste deja ka pèmèt tou devlopè yo kreye plis eksperyans immersion.
Ki sa ou panse se vre potansyèl pou rann neral?
Kite yon Reply