ʻO ka neural rendering kahi ʻenehana e puka mai ana i ke aʻo hohonu e manaʻo nei e hoʻonui i ka pipeline maʻamau o nā kiʻi kamepiula me nā pūnaewele neural.
Pono ka neural rendering algorithm i kahi hoʻonohonoho o nā kiʻi e hōʻike ana i nā kihi like ʻole o ka hiʻohiʻona like. A laila e hānai ʻia kēia mau kiʻi i loko o kahi pūnaewele neural e hana i kahi kumu hoʻohālike e hiki ke hoʻopuka i nā kihi hou o ke ʻano like.
Aia ka nani ma hope o ka neural rendering pehea e hiki ai iā ia ke hana hou i nā hiʻohiʻona photorealistic kikoʻī me ka ʻole o ka hilinaʻi ʻana i nā ʻano hana maʻamau i ʻoi aku ka koi ʻana i ka helu.
Ma mua o ka luʻu ʻana i ka hana ʻana o ka neural rendering, e hele kāua ma luna o nā kumu kumu o ka hoʻolilo maʻamau.
He aha ke ʻano o ka hoʻolilo ʻana maʻamau?
E hoʻomaopopo mua kākou i nā ʻano hana maʻamau i hoʻohana ʻia i ka hoʻolilo kuʻuna.
ʻO ka unuhi maʻamau e pili ana i ka hoʻonohonoho o nā ʻenehana i hoʻohana ʻia e hana i kiʻi 2D o kahi hiʻohiʻona ʻekolu. ʻIke ʻia hoʻi ʻo ke kiʻi synthesis, hoʻohana ka hana maʻamau i nā algorithms like ʻole e hoʻohālikelike i ka pili ʻana o ka mālamalama me nā ʻano mea like ʻole.
No ka laʻana, ʻo ka hāʻawi ʻana i kahi pōhaku paʻa e koi ai i kahi pūʻulu algorithms e hoʻoholo ai i ke kūlana o ke aka a i ʻole ka mālamalama maikaʻi o kēlā ʻaoʻao o ka pā. Pēlā nō, ʻo nā mea e hōʻike a hoʻopololei paha i ka mālamalama, e like me ke aniani, kahi mea ʻālohilohi, a i ʻole ke kino wai, e koi pū i kā lākou ʻenehana ponoʻī.
Ma ka hoʻohālike maʻamau, ua hōʻike ʻia kēlā me kēia waiwai me kahi mesh polygon. E hoʻohana ka polokalamu shader i ka polygon i mea hoʻokomo e hoʻoholo ai i ke ʻano o ka mea i hāʻawi ʻia i ke kukui a me ke kihi i kuhikuhi ʻia.
Pono ka hoʻolilo maoli ʻana i ka mana helu ʻoi aʻe ma muli o ka pau ʻana o kā mākou waiwai i nā miliona o nā polygons e hoʻohana ai i mea hoʻokomo. ʻO ka hoʻopuka i hana ʻia e ka lolouila i maʻamau i nā blockbusters Hollywood maʻamau e lawe i nā hebedoma a i ʻole mau mahina e hana ai a hiki ke kūʻai ʻia he miliona miliona.
He kumu kūʻai nui ke ala ʻimi ray no ka mea e pono ana kēlā me kēia pika i ke kiʻi hope i ka helu ʻana i ke ala e lawe ʻia ai ke kukui mai ke kumu kukui a i ka mea a i ke kamera.
ʻO ka holomua o ka ʻenehana i hiki ke maʻalahi i nā mea hoʻohana. No ka laʻana, nui nā mea hou loa wikiō pāʻani e ʻae i nā hopena ray-traced e like me nā noʻonoʻo kiʻi-ʻoiaʻiʻo a me nā aka inā lōʻihi kā lākou lako lako i ka hana.
Kūkulu ʻia nā GPU hou loa (nā ʻāpana hana kiʻi) e kōkua i ka CPU e mālama i nā helu paʻakikī i koi ʻia e hana i nā kiʻi kiʻi maoli.
Ka Piʻi ʻana o ka Neural Rendering
Ke ho'āʻo nei ka neural rendering e hoʻoponopono i ka pilikia rendering ma ke ʻano ʻokoʻa. Ma mua o ka hoʻohana ʻana i nā algorithms e hoʻohālikelike i ka pili ʻana o ka mālamalama me nā mea, pehea inā mākou i hana i kahi kumu hoʻohālike e aʻo ai i ke ʻano o kahi hiʻohiʻona e nānā ai mai kahi kihi?
Hiki iā ʻoe ke noʻonoʻo iā ia he ala pōkole i ka hana ʻana i nā hiʻohiʻona photorealistic. Me ka neural rendering, ʻaʻole pono mākou e helu i ka pili ʻana o ka māmā me kahi mea, pono mākou i ka ʻikepili aʻo lawa.
ʻO kēia ala e hiki ai i nā mea noiʻi ke hana i nā kiʻi kiʻekiʻe o nā hiʻohiʻona paʻakikī me ka ʻole o ka hana
He aha nā kahua neural?
E like me ka mea i hōʻike mua ʻia, hoʻohana ka hapa nui o nā render 3D meshes polygon e mālama i ka ʻikepili ma ke ʻano a me ke ʻano o kēlā me kēia mea.
Eia nō naʻe, ke kaulana nei nā māla neural ma ke ʻano he ala ʻē aʻe o ka hōʻike ʻana i nā mea ʻekolu-dimensional. ʻAʻole like me nā polygon meshes, ʻokoʻa a hoʻomau nā māla neural.
He aha kā mākou e ʻōlelo ai he ʻokoʻa nā kahua neural?
Hiki ke hoʻomaʻamaʻa ʻia kahi hoʻopuka 2D mai kahi kahua neural i lilo i photorealistic ma ka hoʻoponopono wale ʻana i nā paona o ka pūnaewele neural.
Ke hoʻohana nei i nā māla neural, ʻaʻole pono mākou e hoʻohālikelike i ka physics o ka mālamalama e hana i kahi hiʻohiʻona. ʻO ka ʻike e pili ana i ke ʻano o ka hoʻomālamalama ʻana o ka hopena hope loa i mālama ʻia i loko o nā paona o kā mākou kaʻenehana kikowaena.
Hiki iā mākou ke hana i nā kiʻi hou a me nā wikiō me ka wikiwiki mai ka liʻiliʻi o nā kiʻi a i ʻole nā kiʻi wikiō.
Pehea e aʻo ai i kahi kahua neural?
I kēia manawa ua ʻike mākou i ke ʻano o ka hana ʻana o kahi kahua neural, e nānā kākou pehea e hiki ai i nā mea noiʻi ke hoʻomaʻamaʻa i kahi kahua neural radiance a i ʻole. NeRF.
ʻO ka mea mua, pono mākou e hoʻohālikelike i nā hoʻonohonoho maʻamau o kahi hiʻohiʻona a hānai iā lākou i loko o kahi pūnaewele neural. A laila hiki i kēia pūnaewele ke hana i ka nui o ka māla.
Manaʻo ʻia ka nui o ke kahua i hana ʻia he mau laʻana mai ke kahua kūkulu hou i makemake ʻia o ke kahua a mākou e makemake ai e hana.
A laila pono mākou e palapala i ke kūkulu hou ʻana i nā kiʻi 2D maoli. A laila e helu ana kahi algorithm i ka hewa hana hou. Na kēia kuhi hewa e alakaʻi i ka pūnaewele neural e hoʻonui i kona hiki ke kūkulu hou i ke ʻano.
Nā hoʻohana ʻana i ka neural Rendering
Hōʻike Hōʻike Hou
ʻO ka Novel view synthesis e pili ana i ka hana o ka hana ʻana i nā hiʻohiʻona kamera mai nā kihi hou me ka hoʻohana ʻana i ka ʻikepili mai kahi helu palena o nā hiʻohiʻona.
Ke ho'āʻo nei nā ʻenehana neural rendering e koho i ke kūlana pili o ka pahupaʻikiʻi no kēlā me kēia kiʻi i ka ʻikepili a hānai i kēlā ʻikepili i loko o kahi pūnaewele neural.
A laila e hana ka neural network i kahi hiʻohiʻona 3D o ka hiʻohiʻona kahi i loaʻa i kēlā me kēia kiko i ka lewa 3D kahi waihoʻoluʻu pili.
ʻO kahi hoʻokō hou o NeRF ma Google Street View hoʻohana i ka synthesis ʻike hou no ka ʻae ʻana i nā mea hoʻohana e ʻimi i nā wahi o ka honua maoli me he mea lā e hoʻomalu ana lākou i kahi pahupaʻikiʻi e lawe ana i ke wikiō. ʻAe kēia i ka poʻe mākaʻikaʻi e ʻimi i nā wahi i kahi ala immersive ma mua o ka hoʻoholo ʻana e hele i kahi kahua kikoʻī.
Nā avatar kiʻi maoli
Hiki i nā ʻenehana kiʻekiʻe ma ka neural rendering hiki ke hoʻokaʻawale i ke ala no nā avatar kikohoʻe maoli. Hiki ke hoʻohana ʻia kēia mau avatar no nā hana like ʻole e like me nā mea kōkua virtual a i ʻole lawelawe mea kūʻai aku, a i ʻole he ala no nā mea hoʻohana e hoʻokomo i ko lākou ʻano like i kahi wikiō i io holoholona hihiu a i ʻole ka hoʻohālikelike ʻana.
Eia kekahi laʻana, a pepa i paʻi ʻia ma Malaki 2023 manaʻo e hoʻohana i nā ʻenehana neural rendering e hana i kahi avatar kiʻi maoli ma hope o kekahi mau minuke o nā kiʻi wikiō.
Panina
ʻO ka neural rendering kahi kahua hoʻonaʻauao hoihoi e hiki ke hoʻololi i ka ʻoihana kiʻi kamepiula holoʻokoʻa.
Hiki i ka ʻenehana ke hoʻohaʻahaʻa i ka pale o ke komo ʻana no ka hana ʻana i nā waiwai 3D. ʻAʻole hiki i nā hui hopena ʻike ke kali hou i nā lā e hana i kekahi mau minuke o nā kiʻi kiʻi maoli.
ʻO ka hoʻohui ʻana i ka ʻenehana me nā noi VR a me AR hiki ke ʻae i nā mea hoʻomohala e hana i nā ʻike immersive.
He aha kāu e manaʻo ai ka hiki maoli no ka neural rendering?
Waiho i ka Reply