Asa manan-danja sy tiana amin'ny fahitana solosaina sy sary ny famokarana sarimihetsika sarin'ny famoronana amin'ny kalitao avo indrindra.
Na dia modely mahomby maro ho an'ny toonification sary sary mifototra amin'ny StyleGAN mahery vaika aza no natolotra, ireo teknika miompana amin'ny sary ireo dia manana lesoka mazava rehefa ampiasaina amin'ny horonan-tsary, toy ny haben'ny frame raikitra, ny fepetra takiana amin'ny fampifanarahana ny tarehy, ny tsy fisian'ny antsipiriany tsy misy endrika. , ary ny tsy fitovian-kevitra ara-potoana.
Ny rafitra VToonify revolisionera dia ampiasaina hamahana ny fifindrana amin'ny fomba fandefasana horonan-tsary sariitatra avo lenta voafehy.
Hodinihintsika ny fandalinana farany momba ny VToonify ato amin'ity lahatsoratra ity, ao anatin'izany ny fiasany, ny tsy fahampiana ary ny antony hafa.
Inona no atao hoe Vtoonify?
Ny rafitra VToonify dia ahafahan'ny fampitana endrika horonan-tsary sariitatra avo lenta azo zahana.
Ny VToonify dia mampiasa ny sosona antonony sy avo lenta an'ny StyleGAN mba hamoronana sary ara-javakanto avo lenta mifototra amin'ny toetran'ny votoaty marobe nalain'ny encoder iray mba hitazonana ny antsipirian'ny frame.
Ny rafitra convolutional tanteraka vokatr'izany dia maka endrika tsy mifanandrify amin'ny sarimihetsika miovaova habe ho fampidirana, ka miteraka faritra feno tarehy miaraka amin'ny hetsika tena misy ao amin'ny vokatra.
Ity rafitra ity dia mifanaraka amin'ny maodely toonification sary mifototra amin'ny StyleGAN ankehitriny, mamela azy ireo hitarina amin'ny toonification video, ary mandova toetra mahasarika toy ny loko azo amboarina sy ny fanamafisana ny hamafiny.
izany fianarana dia manolotra fampandrenesana roa an'ny VToonify miorina amin'ny Toonify sy DualStyleGAN ho an'ny famindrana endrika horonan-tsary mifototra amin'ny fanangonana sy ohatra.
Ny fikarohana ara-panandramana midadasika dia mampiseho fa ny rafitra VToonify natolotra dia manoatra noho ny fomba efa misy amin'ny fanaovana sarimihetsika sariitatra ara-javakanto manara-penitra sy ara-potoana miaraka amin'ny mari-pamantarana endrika miovaova.
Ny mpikaroka dia manome ny kahie Google Colab, mba hahafahanao mandoto tanana amin'izany.
Ahoana no miasa?
Mba hanatontosana ny famindrana endrika horonan-tsary sariitatra avo lenta avo lenta, ny VToonify dia manambatra ny tombony amin'ny rafi-pandikana sary miaraka amin'ny rafitra mifototra amin'ny StyleGAN.
Mba handraisana ny haben'ny fampidirana isan-karazany, ny rafitra fandikana sary dia mampiasa tamba-jotra mirindra tanteraka. Ny fampiofanana hatrany am-boalohany kosa dia mahatonga ny fifindrana amin'ny fomba avo lenta sy voafehy.
Ny maodely StyleGAN efa voaofana mialoha dia ampiasaina ao amin'ny rafitra mifototra amin'ny StyleGAN ho an'ny famindrana endrika avo lenta sy voafehy, na dia voafetra amin'ny haben'ny sary raikitra sy ny fatiantoka amin'ny antsipiriany aza.
StyleGAN dia ovaina ao amin'ny rafitra hybrid amin'ny alàlan'ny famafana ny endri-pampidirana misy habe raikitra sy ny sosona ambany fanapahan-kevitra, ka nahatonga ny rafi-pamokarana encoder-generator feno convolutional mitovy amin'ny an'ny rafi-pandikana sary.
Mba hitazonana ny antsipirihan'ny frame, ampiofana encoder iray haka ireo toetran'ny atiny marobe amin'ny rafitra fampidirana ho fitakiana votoaty fanampiny ho an'ny mpamokatra. Ny Vtoonify dia mandova ny fahafaha-manara-maso ny fomba fanaraha-maso ny modely StyleGAN amin'ny alàlan'ny fametrahana azy ao amin'ny mpamokatra mba hanadio ny angona sy ny modely.
Famerana ny StyleGAN & Vtoonify natolotra
Ny sarin'ny zavakanto dia mahazatra eo amin'ny fiainantsika andavanandro ary koa amin'ny orinasa famoronana toy ny zavakanto, haino aman-jery sosialy avatar, sarimihetsika, dokam-barotra fialamboly, sy ny sisa.
Miaraka amin'ny fivoaran'ny fianarana lalina teknolojia, dia azo atao izao ny mamorona sary ara-javakanto avo lenta avy amin'ny sarin'ny tarehy tena misy amin'ny alàlan'ny famindrana fomba fanaovana portrait mandeha ho azy.
Misy fomba mahomby isan-karazany noforonina ho an'ny famindrana endrika mifototra amin'ny sary, maro amin'izy ireo no mora azon'ny mpampiasa manomboka amin'ny endrika fampiharana finday. Ny fitaovana video dia lasa fototry ny famahanana media sosialy tato anatin'ny taona vitsivitsy.
Ny fiakaran'ny haino aman-jery sosialy sy ny sarimihetsika ephemeral dia nampitombo ny fitakiana fanovana horonan-tsarimihetsika vaovao, toy ny famindrana endrika horonan-tsary portrait, mba hamoronana horonan-tsary mahomby sy mahaliana.
Ny teknika miompana amin'ny sary efa misy dia manana fatiantoka lehibe rehefa ampiharina amin'ny sarimihetsika, mametra ny maha-ilaina azy ireo amin'ny famolavolana horonan-tsary sariitatra mandeha ho azy.
StyleGAN dia hazon-damosina mahazatra amin'ny famolavolana maodely famindrana endrika sary an-tsary noho ny fahaizany mamorona endrika avo lenta miaraka amin'ny fitantanana fomba azo amboarina.
Ny rafitra mifototra amin'ny StyleGAN (fantatra ihany koa amin'ny hoe toonification sary) dia manodinkodina endrika tena izy ao amin'ny habaka latent StyleGAN ary avy eo dia mampihatra ny kaody style amin'ny StyleGAN hafa voarindra tsara amin'ny angon-drakitra sary kanto mba hamoronana dikan-teny manara-penitra.
StyleGAN dia mamorona sary miaraka amin'ny endrika mifanitsy sy amin'ny habeny raikitra, izay tsy mankasitraka ireo endrika mavitrika amin'ny sary tena izy. Ny fanapahana tarehy sy ny fampifanarahana amin'ny horonan-tsary indraindray dia miteraka endrika ampahany sy fihetsika mahamenatra. Antsoin'ny mpikaroka hoe 'famerana ny vokatra raikitra' ity olana ity.
Ho an'ny endrika tsy mifanentana, StyleGAN3 no natolotra; na izany aza, dia tsy manohana afa-tsy ny napetraka ny haben'ny sary.
Fanampin'izay, ny fanadihadiana vao haingana dia nahatsikaritra fa sarotra kokoa noho ny tarehy mirindra ny fametahana endrika tsy mifanandrify. Mampidi-doza amin'ny fifindrana amin'ny endrika sary ny fandrafetana tarehy diso, ka miteraka olana toy ny fiovan'ny maha-izy azy sy ny singa tsy hita ao amin'ny frame namboarina sy novolavolaina.
Araka ny efa noresahina, ny teknika mahomby amin'ny fifindrana amin'ny endrika sary mihetsika dia tsy maintsy miatrika ireto olana manaraka ireto:
- Mba hitehirizana ny hetsika tena misy, ny fomba fiasa dia tsy maintsy mahazaka endrika tsy mifanaraka sy habe samihafa. Ny haben'ny horonan-tsary lehibe, na ny zoro malalaka, dia afaka maka fampahalalana bebe kokoa ary mitazona ny tarehy tsy hivoaka amin'ny frame.
- Mba hifaninana amin'ny gadget HD fampiasa ankehitriny dia ilaina ny horonan-tsary avo lenta.
- Ny fanaraha-maso fomba mora azo dia tokony atolotra ho an'ny mpampiasa mba hanovana sy hisafidy ny safidiny rehefa mamolavola rafitra fifandraisana amin'ny mpampiasa tena izy.
Ho an'izany tanjona izany, ny mpikaroka dia manolotra VToonify, rafitra hybrid vaovao ho an'ny toonification video. Mba handresena ny teritery amin'ny voly raikitra, ny mpikaroka dia nandinika voalohany ny fitovian'ny fandikan-teny ao amin'ny StyleGAN.
VToonify dia manambatra ny tombotsoan'ny maritrano miorina amin'ny StyleGAN sy ny rafitry ny fandikana sary mba hahatongavana amin'ny fifindrana amin'ny endrika horonan-tsary sariitatra avo lenta avo lenta.
Ireto manaraka ireto ny fandraisana anjara lehibe:
- Manadihady ny famerana ny vokatra raikitra an'i StyleGAN ny mpikaroka ary manolotra vahaolana mifototra amin'ny fitoviana amin'ny dikanteny.
- Ny mpikaroka dia manolotra rafitra VToonify tsy manam-paharoa tanteraka ho an'ny fifindrana amin'ny endrika sary sary mihetsika avo lenta izay manohana endrika tsy mifanandrify sy habe samihafa.
- Ny mpikaroka dia manorina VToonify eo amin'ny vozon'ny Toonify sy DualStyleGAN ary mamehy ny hazondamosina amin'ny resaka angon-drakitra sy ny maodely mba ahafahana mamindra endrika horonan-tsary mifototra amin'ny fanangonana sy ohatra.
Mampitaha ny Vtoonify amin'ny maodely manara-penitra hafa
Toonify
Izy io no fototry ny famindrana endrika mifototra amin'ny fanangonana amin'ny endrika mifanitsy amin'ny fampiasana StyleGAN. Raha te haka ny kaody fomba, ny mpikaroka dia tsy maintsy mampifanaraka ny endrika ary manapaka sary 256256 ho an'ny PSP. Toonify dia ampiasaina hamoronana vokatra mirindra miaraka amin'ny kaody fomba 1024*1024.
Farany, arindran'izy ireo amin'ny toerana niaviany indray ny vokatra ao amin'ilay horonan-tsary. Ny faritra tsy misy stylized dia napetraka ho mainty.
DualStyleGAN
Izy io dia taolan-damosina ho an'ny famindrana fomba mifototra amin'ny ohatra mifototra amin'ny StyleGAN. Mampiasa teknika fanodinana angon-drakitra mitovy amin'ny Toonify izy ireo mialoha sy aorian'ny fanodinana.
Pix2pixHD
Izy io dia maodely fandikana sary ho an'ny sary izay matetika ampiasaina mba hampitony ireo maodely efa voaofana ho an'ny fanitsiana avo lenta. Miofana amin'ny fampiasana angon-drakitra mampiaraka.
Mampiasa pix2pixHD ho toy ny fampidirana sarintany ohatra fanampiny ny mpikaroka satria mampiasa sari-tany fanairana nalaina.
Fihetseham-po voalohany
FOM dia maodely sary mihetsika mahazatra. Nampiofanina tamin'ny sary 256256 izy io ary tsy dia tsara loatra tamin'ny haben'ny sary hafa. Vokatr'izany, ny mpikaroka dia mametraka ny sary ho 256 * 256 voalohany ho an'ny FOM ho animation ary avy eo manova ny valiny amin'ny habeny voalohany.
Ho fampitahana ara-drariny, ny FOM dia mampiasa ny rafitra voalamina voalohany amin'ny fomba fiasany ho sarin'ny fomba fanondro.
Dagana
Izy io dia maodely sarimiaina endrika 3D. Mitovy amin'ny fomba fiomanana sy fanodinana angon-drakitra no ampiasain'izy ireo amin'ny FOM.
tombony
- Azo ampiasaina amin'ny zavakanto, avatar media sosialy, sarimihetsika, dokam-barotra fialamboly, sy ny sisa.
- Azo ampiasaina amin'ny metaverse ihany koa ny Vtoonify.
fetra
- Ity fomba fiasa ity dia mamoaka ny angon-drakitra sy ny maodely avy amin'ny taolam-paty mifototra amin'ny StyleGAN, ka miteraka fitongilanana angona sy modely.
- Ny ankamaroan'ny artifact dia vokatry ny fahasamihafan'ny haben'ny faritra misy endrika sy ny fizarana hafa.
- Ity paikady ity dia tsy dia mahomby rehefa miatrika zavatra ao amin'ny faritry ny tarehy.
Famaranana
Farany, VToonify dia rafitra ho an'ny toonification horonantsary avo lenta fehezin'ny style.
Ity rafitra ity dia mahavita fahombiazana lehibe amin'ny fikirakirana horonan-tsary ary ahafahan'ny fanaraha-maso midadasika amin'ny fomba ara-drafitra, ny loko ary ny mari-pahaizana amin'ny alàlan'ny fanamafisana ny maodely toonification sary mifototra amin'ny StyleGAN amin'ny lafiny roa amin'izy ireo. angona synthetic ary ny rafitra tambajotra.
Leave a Reply