E foliga mai ua na o le amataga o se suiga fou a AI.
Generative artificial intelligence e faasino i algorithms ma faʻataʻitaʻiga e mafai ona fatuina mea. O le gaosiga o ia faʻataʻitaʻiga e aofia ai tusitusiga, leo, ma ata e masani ona faʻaseseina o ni mea moni a le tagata.
Talosaga pei o Talanoa GPT ua fa'aalia ai ole generative AI e le na'o se mea fou. AI ua mafai nei ona mulimuli i faʻamatalaga auiliili ma foliga mai o loʻo i ai se malamalama loloto i le auala e galue ai le lalolagi.
Ae na faapefea ona tatou oo i lea tulaga? I totonu o lenei taʻiala, o le a tatou uia nisi o mea taua i suʻesuʻega AI ua saunia le ala mo lenei suiga fou ma le faʻafiafiaina AI.
Le tula'i mai o feso'ota'iga neural
E mafai ona e suʻeina le amataga o le AI faʻaonaponei i le suʻesuʻega i luga a'oa'oga loloto ma feso'ota'iga neura i 2012.
I lena tausaga, na mafai ai e Alex Krizhevsky ma lana 'au mai le Iunivesite o Toronto ona ausia se algorithm sili ona saʻo e mafai ona faʻavasega mea.
le feso'ota'iga neural fa'aonaponei, ua taʻua nei o AlexNet, na mafai ona faʻavasega mea i totonu o le ImageNet visual database faʻatasi ai ma se fua faʻaletonu sili atu nai lo le taʻavale.
Fesoʻotaʻiga neural o algorithms o loʻo faʻaogaina se fesoʻotaʻiga o galuega faʻa-matematika e aʻoaʻo ai se amio faʻapitoa e faʻavae i luga o nisi faʻamatalaga aʻoaʻoga. Mo se faʻataʻitaʻiga, e mafai ona e fafaga se faʻamatalaga faafomaʻi neural network ina ia mafai ai ona aʻoaʻoina le faʻataʻitaʻiga e faʻamaonia ai se faʻamaʻi e pei o le kanesa.
O le faʻamoemoe o le neural network e suʻe lemu mamanu i faʻamaumauga ma sili atu ona saʻo pe a tuʻuina atu faʻamatalaga fou.
AlexNet o se fa'aoga fa'atosina a fesuiaʻiga o neural network po'o CNNs. O le upu "convolutional" e faasino i le faʻaopoopoina o faʻasalalauga faʻatasi e faʻamamafa atili ai faʻamatalaga e vavalalata faʻatasi.
E ui o CNNs ua leva ona avea ma manatu i le 1980s, na amata ona latou maua le taʻutaʻua i le amataga o le 2010s ina ua tuleia e le tekonolosi GPU fou le tekonolosi i ni maualuga fou.
Le manuia o CNNs i le fanua o mataʻitusi komepiuta na mafua ai ona sili atu le fiafia i suʻesuʻega o fesoʻotaʻiga neural.
Tekinolosi tetele pei o Google ma Facebook na filifili e faʻasalalau a latou lava faʻavae AI i tagata lautele. API tulaga maualuga pei ole Keras na tu'uina atu i tagata fa'aoga se fa'aoga fa'aoga-tagata e fa'ata'ita'i ai feso'ota'iga neural loloto.
E lelei tele le CNN i le fa'ailoaina o ata ma au'ili'iliga ata ae sa iai fa'afitauli pe a o'o i le fo'ia o fa'afitauli fa'avae gagana. Ole tapula'a ole gagana fa'anatura e ono iai ona o ata ma tusitusiga e matua'i ese fa'afitauli.
Mo se faʻataʻitaʻiga, afai e iai sau faʻataʻitaʻiga e faʻavasegaina pe o iai se ata o loʻo i ai se moli, o le moli o loʻo fesiligia e mafai ona faʻaalia i soo se mea i le ata. Ae ui i lea, o lenei ituaiga o le faʻamalie e le aoga i le gagana. O le fuaiupu “Bob ai fish” ma le “Fish eat Bob” e matua eseese lava uiga e ui ina faaaoga upu tutusa.
Ua manino mai e mana'omia e le au su'esu'e se auala fou e foia ai faafitauli e aafia ai le gagana a tagata.
Transformers e suia mea uma
I le 2017, a pepa suesuega ua faaulutalaina “Attention Is All You Need” ua faatu mai ai se ituaiga fou o fesootaiga: le Transformer.
A'o galue le CNN e ala i le fa'amama fa'afia o vaega laiti o se ata, e fa'afeso'ota'i e tagata fa'aliliu mea uma i fa'amaumauga ma isi elemene uma. Ua taʻua e tagata suʻesuʻe lenei faiga o le "tagata lava ia".
Pe a taumafai e faʻavasega fuaiupu, CNNs ma transformers galue e matua ese lava. E ui o le CNN o le a taulaʻi i le fausia o fesoʻotaʻiga ma upu e latalata i le tasi ma le isi, o le transformer o le a fatuina fesoʻotaʻiga i le va o upu taʻitasi i se fuaiupu.
O le fa'agasologa o le fa'alogo a le tagata lava ia o se vaega taua o le malamalama i le gagana a le tagata. E ala i le fa'ailo i fafo ma va'ava'ai pe fa'afefea ona fetaui le fuaiupu atoa, e mafai e masini ona maua se malamalamaga manino i le fa'atulagaga o le fuaiupu.
O le taimi lava na faʻasalalau ai faʻataʻitaʻiga muamua o le transformer, e leʻi umi ae faʻaogaina e le au suʻesuʻe le fausaga fou e faʻaogaina ai le tele o faʻamaumauga o tusitusiga o loʻo maua i luga o le initaneti.
GPT-3 ma le Initaneti
I le 2020, OpenAI's GPT-3 fa'ata'ita'iga na fa'aalia ai le aoga o transformers. Na mafai e le GPT-3 ona tuʻuina atu tusitusiga e foliga mai e le mafai ona iloa mai se tagata. O se vaega o le mea na matua malosi ai le GPT-3 o le aofaʻi o faʻamatalaga aʻoaʻoga na faʻaaogaina. Ole tele ole fa'ata'ita'iga fa'ata'ita'iga a'o le'i a'oa'oina e sau mai se fa'amaumauga e ta'ua o Common Crawl lea e sau ma le silia ma le 400 piliona fa'ailoga.
A'o le mafaia e le GPT-3 ona fa'atupuina fa'amatalaga moni a le tagata na su'eina e ia lava, na maua e le au su'esu'e le auala e mafai ai e lea lava fa'ata'ita'iga ona fo'ia isi galuega.
Mo se faʻataʻitaʻiga, o le GPT-3 faʻataʻitaʻiga e mafai ona e faʻaogaina e faʻatupu ai se tweet e mafai foi ona fesoasoani ia te oe e tauaofai ai tusitusiga, toe tusi se parakalafa, ma faʻamaeʻa se tala. Gagana faʻatusa ua matua mamana ma ua avea nei ma mea faigaluega lautele e mulimuli i so'o se ituaiga o fa'atonuga.
GPT-3's natura fa'amoemoe lautele ua fa'atagaina mo talosaga fa'apea GitHub Copilot, lea e mafai ai e le au fai polokalame ona gaosia code galue mai le Igilisi manino.
Fa'ata'ita'iga Fa'asalalau: Mai Tusitusiga i Ata
O le alualu i luma na faia i transformers ma NLP ua saunia ai foi le auala mo le gaosiga AI i isi matata.
I le malo o le va'aiga komepiuta, ua uma ona matou fa'atalanoaina le loloto o le a'oa'oga na mafai ai e masini ona malamalama i ata. Ae ui i lea, matou te manaʻomia lava le sailia o se auala mo AI e faʻatupuina ai ata i latou lava nai lo le faʻavasegaina.
O fa'ata'ita'iga fa'atupu fa'atusa e pei o le DALL-E 2, Stable Diffusion, ma Midjourney ua lauiloa ona o le auala e mafai ai ona latou fa'aliliu tusitusiga i ata.
O nei faʻataʻitaʻiga ata e faʻalagolago i itu taua e lua: o se faʻataʻitaʻiga e malamalama i le va o ata ma tusitusiga ma se faʻataʻitaʻiga e mafai moni lava ona fatuina se ata maualuga faʻamalamalamaga e fetaui ma le faʻaoga.
OpenAI's KILI (Contrastive Language–Image Pre-training) o se faʻataʻitaʻiga faʻapitoa e faʻamoemoe e foia le itu muamua. Tuuina atu se ata, o le CLIP faʻataʻitaʻiga e mafai ona vavalo le faʻamatalaga sili ona talafeagai mo lena ata.
O le faʻataʻitaʻiga CLIP e galue e ala i le aʻoaʻoina pe faʻapefea ona faʻapipiʻi foliga taua o ata ma fatuina se faʻatusa faigofie o se ata.
Pe a tuʻuina atu e tagata faʻaoga se faʻataʻitaʻiga o tusitusiga i le DALL-E 2, o le faʻaoga e liua i se "faʻapipiʻi ata" e faʻaaoga ai le CLIP model. O le sini i le taimi nei o le sailia lea o se auala e gaosia ai se ata e fetaui ma le faʻapipiʻiina o ata.
Ole ata fou fa'atupuina AI fa'aoga a fa'ata'ita'iga fa'asalalau e fai le galuega o le faia moni o se ata. O faʻataʻitaʻiga faʻasalalau e faʻalagolago i fesoʻotaʻiga neural na muaʻi aʻoaʻoina e iloa ai le auala e aveese ai le pisa faaopoopo mai ata.
I le taimi o lenei faʻagasologa o aʻoaʻoga, e mafai e le neural network ona iu lava ina aʻoaʻoina pe faʻapefea ona fatuina se ata maualuga maualuga mai se ata faʻalavelave faʻafuaseʻi. Talu ai ua uma ona i ai sa matou faafanua o tusitusiga ma ata na saunia e CLIP, matou te mafaia toleni se fa'ata'ita'iga fa'asalalau i luga ole CLIP ata fa'apipi'i e fai ai se faiga e fa'atupu ai so'o se ata.
Generative AI Revolution: O le a le mea e sosoo ai?
Ua tatou i ai nei i se tulaga o loʻo tupu ai faʻalavelave i le generative AI i nai aso uma. Faatasi ai ma le faigofie ma faigofie ona gaosia ituaiga eseese o ala o faasalalauga e faʻaaoga ai AI, pe tatau ona tatou popole pe faʻafefea ona afaina ai lo tatou sosaiete?
E ui o popolega o masini e suitulaga i tagata faigaluega o loʻo i ai pea i le talanoaga talu mai le faʻavaeina o le afi afi, e foliga mai ua fai si ese o lenei taimi.
O le Generative AI ua avea ma meafaigaluega faʻapitoa e ono faʻalavelaveina ai pisinisi na manatu e saogalemu mai le faʻaaogaina e AI.
O le a tatou manaʻomia le au fai polokalame pe afai e mafai e AI ona amata tusia le tulafono faʻamaonia mai nai faʻatonuga autu? O le a fa'afaigaluegaina ea e tagata ni fatuga pe afai e mafai ona latou fa'aogaina se fa'ata'ita'iga fa'atupu fa'ata'ita'iga e maua ai le gaosiga latou te manana'o mo taugofie?
E faigata ona vaʻai le lumanaʻi o le suiga ole AI. Ae o lea ua tatalaina le pusa faʻatusa a Pandora, ou te faʻamoemoe o le a faʻatagaina e le tekonolosi ni faʻafouga sili atu fiafia e mafai ona tuʻuina atu ai se aafiaga lelei i le lalolagi.
Tuua se tali