Neural rendering ke mokhoa o hlahang oa ho ithuta ka botebo o ikemiselitseng ho eketsa phaephe ea khale ea litšoantšo tsa khomphutha ka marang-rang a neural.
Neural rendering algorithm e tla hloka sete ea litšoantšo tse emelang li-angles tse fapaneng tsa sebaka se le seng. Lits'oants'o tsena li tla kengoa marang-rang a marang-rang ho etsa mohlala o ka hlahisang li-angles tse ncha tsa sebaka se le seng.
Bokhabane bo ka morao ho neural rendering bo mabapi le kamoo e ka qapang ka nepo litšoantšo tse hlakileng tsa litšoantšo ntle le ho itšetleha ka mekhoa ea khale eo e kanna ea ba e boima haholo.
Pele u kenella ka har'a hore na neural rendering e sebetsa joang, a re ke re hlahlobeng lintlha tsa motheo tsa phetolelo ea khale.
Classical Rendering ke Eng?
A re qaleng ka ho utloisisa mekhoa e tloaelehileng e sebelisoang phetolelong ea khale.
Phetolelo ea khale e bua ka sete ea mekhoa e sebelisoang ho etsa setšoantšo sa 2D sa sebopeho sa mahlakore a mararo. E tsejoang hape e le mokhoa oa ho kopanya litšoantšo, phetolelo ea khale e sebelisa li-algorithms tse fapaneng ho etsisa tsela eo leseli le kopanang le mefuta e fapaneng ea lintho.
Ka mohlala, ho etsa setene se tiileng ho tla hloka sete e itseng ea dikgato-tharabololo ho fumana hore na moriti o hokae kapa hore na lehlakore le leng le le leng la lebota le tla bonesoa hantle hakae. Ka mokhoa o ts'oanang, lintho tse bonahatsang kapa tse khantšang leseli, tse kang seipone, ntho e benyang, kapa metsi a mangata, le tsona li tla hloka mekhoa ea tsona.
Phetolelong ea khale, letlotlo ka leng le emeloa ka mesh ea polygon. Lenaneo la shader le tla sebelisa polygon e le ho kenya letsoho ho fumana hore na ntho e tla shebahala joang ha e fuoa mabone a boletsoeng le angle.
Phetolelo ea 'nete e tla hloka matla a mangata a khomphutha kaha thepa ea rona e qetella e e-na le li-polygone tse limilione tse ka sebelisoang e le tlhahiso. Lintho tse hlahisoang ke k'homphieutha tse atileng ho li-blockbusters tsa Hollywood hangata li nka libeke kapa likhoeli ho fana ka tsona 'me li ka bitsa limilione tsa lidolara.
Mokhoa oa ho latela mahlaseli o bitsa chelete e ngata haholo hobane pixel e 'ngoe le e 'ngoe e setšoantšong sa ho qetela e hloka ho baloa ha leseli la tsela le tloha mohloling oa leseli ho ea ho ntho le ho khamera.
Tsoelo-pele ho Hardware e entse hore litšoantšo li fumanehe haholoanyane ho basebelisi. Ka mohlala, tse ngata tsa morao-rao lipapali tsa fitio lumella litlamorao tse lateloang ke mahlaseli joalo ka likhakanyo tsa 'nete tsa lifoto le meriti ha feela hardware ea bona e ntse e sebetsa.
Li-GPU tsa morao-rao (li-graphic processing units) li hahiloe ka ho khetheha ho thusa CPU ho sebetsana le lipalo tse rarahaneng haholo tse hlokahalang ho fana ka litšoantšo tsa sebele.
Ho phahama ha Neural Rendering
Neural rendering e leka ho sebetsana le bothata ba ho fana ka tsela e fapaneng. Ho e-na le ho sebelisa algorithm ho etsisa tsela eo leseli le kopanang le lintho ka eona, ho thoe'ng haeba re ka etsa mohlala o ithutang hore na ketsahalo e lokela ho shebahala joang ho tloha lehlakoreng le itseng?
U ka e nka e le tsela e khuts'oane ea ho theha litšoantšo tsa photorealistic. Ka neural rendering, ha ho hlokahale hore re bale hore na leseli le kopana joang le ntho, re hloka feela lintlha tse lekaneng tsa koetliso.
Mokhoa ona o lumella bafuputsi ho etsa liphetolelo tsa boleng bo holimo tsa litšoantšo tse rarahaneng ntle le ho etsa
Libaka tsa Neural ke eng?
Joalokaha ho boletsoe pejana, boholo ba li-renders tsa 3D li sebelisa meshes ea polygon ho boloka data mabapi le sebopeho le sebopeho sa ntho ka 'ngoe.
Leha ho le joalo, masimo a neural a ntse a tsebahala e le mokhoa o mong oa ho emela lintho tse mahlakore a mararo. Ho fapana le meshes ea polygon, masimo a neural a ka arohanngoa ebile a tsoela pele.
Re bolela'ng ha re re masimo a neural a fapane?
Sephetho sa 2D se tsoang sebakeng sa neural joale se ka koetlisetsoa ho ba photorealistic ka ho fetola feela boima ba marang-rang a methapo.
Ha re sebelisa neural fields, ha re sa hloka ho etsisa fisiks ea leseli ho fana ka ketsahalo. Tsebo ea hore na phetolelo ea ho qetela e tla hotetsoa joang e se e bolokiloe ka mokhoa o hlakileng ka har'a litekanyo tsa rona neural network.
Sena se re fa monyetla oa ho etsa litšoantšo le livideo tse ncha kapele ho tsoa ho lifoto tse seng kae kapa livideo.
Mokhoa oa ho Koetlisa Sebaka sa Neural?
Kaha joale re tseba metheo ea hore na sebaka sa methapo ea kutlo se sebetsa joang, ha re shebeng hore na bafuputsi ba khona ho koetlisa sebaka sa neural radiance joang kapa NeRF.
Taba ea pele, re tla hloka ho etsa mohlala oa likhokahano tse sa reroang tsa ketsahalo ebe re li fepa netwekeng ea methapo. Joale marang-rang ana a tla khona ho hlahisa palo ea masimo.
Likarolo tsa masimo a hlahisitsoeng li nkuoa e le lisampole ho tsoa sebakeng se lakatsehang sa kaho bocha sebakeng seo re batlang ho se theha.
Joale re tla hloka ho etsa 'mapa oa kaho bocha ho litšoantšo tsa 2D tsa nnete. Joale algorithm e tla bala phoso ea kaho bocha. Phoso ena e tla tataisa marang-rang a neural ho ntlafatsa bokhoni ba ona ba ho aha sebaka bocha.
Lisebelisoa tsa Neural Rendering
Novel View Synthesis
Novel view synthesis e bolela mosebetsi oa ho theha maikutlo a khamera ho tsoa likhutlong tse ncha ho sebelisoa data ho tsoa palo e lekanyelitsoeng ea maikutlo.
Mekhoa ea ho fana ka Neural e leka ho hakanya boemo bo lekanyelitsoeng ba khamera bakeng sa setšoantšo se seng le se seng ho dataset le ho fepa data eo ho neural network.
Neural network joale e tla theha setšoantšo sa 3D sa sebaka moo ntlha ka 'ngoe sebakeng sa 3D e nang le 'mala o amanang le letsoalo.
Ts'ebetsong e ncha ea li-NeRF ka View Google Street e sebelisa mokhoa o mocha oa pono ho lumella basebelisi ho hlahloba libaka tsa 'nete tsa lefats'e joalo ka ha eka ba laola khamera e nkang video. Sena se lumella bahahlauli hore ba hlahlobe libaka tseo ba eang ho tsona ka botebo pele ba etsa qeto ea ho etela sebaka se itseng.
Li-avatar tsa sebele tsa lifoto
Mekhoa e tsoetseng pele ea ho fana ka li-neural le eona e ka bula tsela bakeng sa li-avatar tsa sebele tsa dijithale. Li-avatars tsena li ka sebelisoa bakeng sa mesebetsi e fapaneng joalo ka bathusi ba sebele kapa litšebeletso tsa bareki, kapa e le mokhoa oa hore basebelisi ba kenye litšoaneleho tsa bona papali ea video kapa ketsiso ya ho fana.
Ka mohlala, a pampiri e hatisitsoeng ka Hlakubele 2023 e fana ka maikutlo a ho sebelisa mekhoa ea neural rendering ho theha avatar ea 'nete ea foto kamora metsotso e seng mekae ea video.
fihlela qeto e
Neural rendering ke karolo e thabisang ea boithuto e nang le monyetla oa ho fetola indasteri eohle ea litšoantšo tsa khomphutha.
Theknoloji e ka fokotsa tšitiso ea ho kena molemong oa ho theha thepa ea 3D. Lihlopha tsa Visual litlamorao li kanna tsa se sa tlameha ho ema matsatsi ho fana ka metsotso e seng mekae ea litšoantšo tsa 'nete.
Ho kopanya theknoloji le lits'ebetso tse teng tsa VR le AR le hona ho ka lumella baetsi ho theha boiphihlelo bo tebileng.
U nahana hore monyetla oa 'nete oa tlhahiso ea neural ke ofe?
Leave a Reply