Oye atọwọda n yi ọna ti a gbero ati ṣe agbejade akoonu. O tun kan bi eniyan ṣe ṣawari awọn ohun elo, lati ohun ti wọn wa lori Google si ohun ti wọn n wo binge-lori Netflix.
Ni pataki diẹ sii, fun awọn olutaja akoonu, o fun awọn ẹgbẹ laaye lati dagba nipasẹ adaṣe adaṣe diẹ ninu awọn iru iran akoonu ati itupalẹ ohun elo lọwọlọwọ lati mu ilọsiwaju ohun ti o n jiṣẹ ati pe o dara si ero alabara.
Nibẹ ni o wa ni ọpọlọpọ awọn gbigbe ege ni AI ati imudani ẹrọ awọn ilana. Njẹ o ti beere lọwọ oluranlọwọ ọlọgbọn kan (bii Siri tabi Alexa) ibeere kan bi?
Idahun naa ṣee ṣe “bẹẹni,” eyiti o daba pe o ti mọ tẹlẹ pẹlu sisẹ ede ẹda ni ipele kan (NLP).
Alan Turing jẹ orukọ ti gbogbo techie ti gbọ. Idanwo Turing ti a mọ daradara ni a kọkọ ṣe ni ọdun 1950 nipasẹ olokiki mathimatiki ati onimọ-jinlẹ kọnputa Alan Turing.
O sọ ninu iṣẹ rẹ Awọn ẹrọ iširo ati oye pé ẹ̀rọ náà jẹ́ olóye tó bá lè bá ènìyàn sọ̀rọ̀, kí ó sì tàn án láti rò pé òun ń bá ènìyàn sọ̀rọ̀.
Eyi ṣiṣẹ bi ipilẹ fun imọ-ẹrọ NLP. Eto NLP ti o munadoko yoo ni anfani lati loye ibeere ati agbegbe rẹ, ṣe itupalẹ rẹ, yan ipa ọna iṣe ti o dara julọ, ati dahun ni ede ti olumulo yoo loye.
Awọn iṣedede agbaye fun ipari awọn iṣẹ-ṣiṣe lori data pẹlu itetisi atọwọda ati awọn ilana ikẹkọ ẹrọ. Àmọ́, èdè èèyàn ńkọ́?
Awọn aaye ti iran ede adayeba (NLG), oye ede adayeba (NLU), ati sisẹ ede adayeba (NLP) gbogbo ti ni akiyesi pupọ ni awọn ọdun aipẹ.
Ṣugbọn nitori awọn mẹta ni awọn ojuse oriṣiriṣi, o ṣe pataki lati yago fun iporuru. Ọpọlọpọ gbagbọ pe wọn loye awọn ero wọnyi ni gbogbo wọn.
Níwọ̀n bó ti jẹ́ pé èdè àdánidá ti wà nínú àwọn orúkọ náà, gbogbo ohun tá a bá ń ṣe ni pé kí wọ́n ṣiṣẹ́, lóye, àti ṣíṣe é. A pinnu pe o le ṣe iranlọwọ lati lọ jinle diẹ, botilẹjẹpe, fun bi igbagbogbo a ṣe ba pade awọn gbolohun wọnyi ti a lo ni paarọ.
Nitoribẹẹ, jẹ ki a bẹrẹ nipa yiwo ni pẹkipẹki ni ọkọọkan wọn.
Kini Iṣeduro Eda Adaṣe?
Eyikeyi ede adayeba ni a gba pe o jẹ ọrọ fọọmu ọfẹ nipasẹ awọn kọnputa. O tẹle pe lakoko titẹ data, ko si awọn koko-ọrọ ti o wa titi ni awọn aaye ti o wa titi. Ni afikun si jijẹ ti ko ni eto, ede adayeba tun ni ọpọlọpọ awọn aṣayan ikosile. Gba awọn gbolohun mẹta wọnyi gẹgẹbi apejuwe:
- Oju ojo bawo ni loni?
- Ṣe loni ni eyikeyi anfani ti ojo?
- Ṣe loni beere pe ki n mu agboorun mi wa?
Gbogbo awọn alaye wọnyi n beere nipa asọtẹlẹ oju-ọjọ fun oni, eyiti o jẹ iyeida ti o wọpọ.
Gẹgẹbi eniyan, a le fẹrẹ rii lẹsẹkẹsẹ awọn asopọ ipilẹ wọnyi ati ṣiṣẹ ni deede.
Sibẹsibẹ, eyi jẹ a ipenija fun awọn kọmputa niwon gbogbo algorithm nilo titẹ sii lati tẹle ọna kika kan pato, ati pe gbogbo awọn alaye mẹta ni orisirisi awọn ẹya ati awọn ọna kika.
Ati pe awọn nkan yoo nira pupọ laipẹ ti a ba gbiyanju lati ṣajọ awọn ofin fun ọkọọkan ati gbogbo ọrọ akojọpọ ni gbogbo ede adayeba lati ṣe iranlọwọ fun kọnputa ni oye. Awọn igbesẹ NLP sinu aworan ni ipo yii.
Ṣiṣẹda ede Adayeba (NLP), eyiti o gbiyanju lati awoṣe eda eniyan ede data, pilẹṣẹ lati iširo linguistics.
Ni afikun, NLP dojukọ lori lilo ẹkọ ẹrọ ati awọn isunmọ ikẹkọ jinlẹ lakoko ṣiṣe iwọn pataki ti igbewọle eniyan. O ti wa ni nigbagbogbo oojọ ti ni imoye, linguistics, kọmputa Imọ, alaye awọn ọna šiše, ati awọn ibaraẹnisọrọ.
Awọn linguistics iṣiro, itupalẹ sintasi, idamọ ọrọ, itumọ ẹrọ, ati awọn aaye abẹlẹ miiran ti NLP jẹ diẹ nikan. Ṣiṣẹda ede adayeba ṣe iyipada ohun elo ti a ko ṣeto sinu ọna kika ti o yẹ tabi ọrọ ti a ṣeto lati le ṣiṣẹ.
Lati loye kini olumulo tumọ si nigbati wọn sọ ohunkohun, o kọ algorithm ati ṣe ikẹkọ awoṣe nipa lilo awọn iwọn data lọpọlọpọ.
O nṣiṣẹ nipa ṣiṣe akojọpọ awọn nkan ọtọtọ papọ fun idanimọ (ti a mọ si idanimọ nkan) ati nipa riri awọn ilana ọrọ. Lemmatization, tokenization, ati awọn imuposi stemming ni a lo lati wa awọn ilana ọrọ naa.
Iyọkuro alaye, idanimọ ohun, fifi aami si apakan-ọrọ, ati sisọ jẹ diẹ ninu awọn iṣẹ ti NLP ṣe.
Ni agbaye gidi, NLP ni a lo fun awọn iṣẹ ṣiṣe pẹlu agbeka ontology, awoṣe ede, igbekale ero, isediwon koko, idanimọ nkan ti a fun lorukọ, fifi aami si apakan-ọrọ, isediwon asopọ, itumọ ẹrọ, ati idahun ibeere adaṣe.
Kini Oye Ede Adayeba?
Apa kekere kan ti sisẹ ede adayeba jẹ oye ede adayeba. Lẹhin ti ede naa ti jẹ irọrun, sọfitiwia kọnputa gbọdọ ni oye, yọkuro itumọ, ati boya paapaa ṣe itupalẹ itara.
Ọrọ kanna le ni awọn itumọ pupọ, awọn gbolohun ọrọ pupọ le ni itumọ kanna, tabi itumọ le yipada da lori ipo naa.
Awọn algoridimu NLU lo awọn ọna iṣiro lati ṣe ilana ọrọ lati ọpọlọpọ awọn orisun lati le loye ọrọ titẹ sii, eyiti o le jẹ ipilẹ bi mimọ kini gbolohun ọrọ tumọ si tabi bi idiju bi itumọ ibaraẹnisọrọ laarin awọn ẹni-kọọkan meji.
Ọrọ rẹ ti yipada si ọna kika ẹrọ. Bi abajade, NLU nlo awọn imuposi iṣiro lati ṣe iyipada ọrọ ati ṣe abajade abajade.
NLU le ṣee lo ni awọn ipo oriṣiriṣi, gẹgẹbi oye ibaraẹnisọrọ laarin eniyan meji, ṣiṣe ipinnu bi ẹnikan ṣe lero nipa ipo kan, ati awọn ipo miiran ti iru iseda.
Ni pataki, awọn ipele ede mẹrin wa lati ni oye NLU:
- Sintasi: Eyi ni ilana ti ṣiṣe ipinnu boya girama ti wa ni lilo daradara ati bii awọn gbolohun ọrọ ṣe papọ. Fún àpẹrẹ, àyíká ọ̀rọ̀ àti gírámà gbólóhùn kan gbọ́dọ̀ gbé yẹ̀ wò láti lè mọ̀ bóyá ó bọ́gbọ́n mu.
- Atumọ: Nigba ti a ba ṣe ayẹwo ọrọ naa, itumọ ọrọ-ọrọ bii tenor ọrọ-ọrọ tabi yiyan ọrọ laarin eniyan meji wa nibẹ. Awọn alaye diẹ wọnyi le tun jẹ oojọ nipasẹ NLU algorithm lati pese awọn abajade lati oju iṣẹlẹ eyikeyi ninu eyiti ọrọ sisọ kanna le ṣee lo.
- Disambiguation ori ọrọ: O jẹ ilana ti sisọ ohun ti ọrọ kọọkan ninu gbolohun ọrọ tumọ si. Ti o da lori ọrọ-ọrọ, o fun ọrọ kan ni itumọ rẹ.
- Itupalẹ pragmatic: O ṣe iranlọwọ ni oye eto ati idi iṣẹ naa.
NLU ṣe pataki si data sayensi nitori, laisi rẹ, wọn ko ni agbara lati yọ itumọ jade lati awọn imọ-ẹrọ bii chatbots ati sọfitiwia idanimọ ọrọ.
Lẹhinna, awọn eniyan lo lati ni ibaraẹnisọrọ pẹlu bot ti o ni ọrọ-ọrọ; awọn kọmputa, ti a ba tun wo lo, ko ni yi igbadun ti Ease.
Ni afikun, NLU le ṣe idanimọ awọn ẹdun ati awọn abuku ni ọrọ kan ni deede bi o ṣe le. Eyi tumọ si pe awọn onimọ-jinlẹ data le ṣe iwulo lati ṣayẹwo ọpọlọpọ awọn ọna kika akoonu ati ṣe iyasọtọ ọrọ nipa lilo awọn agbara ti NLU.
NLG n ṣiṣẹ ni atako taara si oye ede abinibi, eyiti o ni ero lati ṣeto ati ṣe oye ti data ti a ko ṣeto lati le yi pada si data ti o ṣee lo. Nigbamii, jẹ ki a ṣalaye NLG ati ṣawari awọn ọna ti awọn onimọ-jinlẹ data lo ni awọn ọran lilo iṣe.
Kini Iran Ede Adayeba?
Ṣiṣẹda ede adayeba tun pẹlu iṣelọpọ ede adayeba. Awọn kọnputa le kọ nipa lilo iṣelọpọ ede ti ara, ṣugbọn oye ede abinibi fojusi lori oye kika.
Nipa lilo igbewọle data kan, NLG ṣẹda idahun kikọ ni ede eniyan. Awọn iṣẹ ọrọ-si-ọrọ tun le ṣee lo lati yi ọrọ pada si ọrọ.
Nigbati awọn onimọ-jinlẹ data pese eto NLG pẹlu data, eto naa ṣe itupalẹ data lati gbejade awọn itan-akọọlẹ ti o le loye nipasẹ ijiroro.
Ni pataki, NLG ṣe iyipada awọn eto data sinu ede ti a loye mejeeji, ti a pe ni ede adayeba. Ki o le pese iṣelọpọ ti a ṣe iwadi ni pẹkipẹki ati pe o peye si iwọn ti o pọju ti o ṣeeṣe, NLG ni ẹbun pẹlu iriri ti eniyan gidi-aye.
Ọna yii, eyiti o le ṣe itopase pada si diẹ ninu awọn iwe-kikọ Alan Turing ti a ti jiroro tẹlẹ, ṣe pataki lati ni idaniloju eniyan pe kọnputa n ba wọn sọrọ ni ọna ti o ṣeeṣe ati ti ara, laibikita koko-ọrọ ti o wa ni ọwọ.
NLG le ṣee lo nipasẹ awọn ajo lati gbejade awọn itan-ọrọ ibaraẹnisọrọ ti gbogbo eniyan le lo ninu ile-iṣẹ naa.
NLG, eyiti a lo nigbagbogbo fun awọn dasibodu itetisi iṣowo, iṣelọpọ akoonu adaṣe, ati itupalẹ data ti o munadoko diẹ sii, le jẹ iranlọwọ nla si awọn akosemose ti n ṣiṣẹ ni awọn ipin bii titaja, awọn orisun eniyan, tita, ati imọ-ẹrọ alaye.
Kini ipa NLU ati NGL ṣe ni NLP?
NLP le ṣee lo nipasẹ awọn onimọ-jinlẹ data ati oye atọwọda awọn alamọdaju lati ṣe iyipada awọn eto data ti a ko ṣeto sinu awọn fọọmu ti awọn kọnputa le tumọ si ọrọ ati ọrọ - wọn le paapaa kọ awọn idahun ti o baamu ni ibamu si ibeere ti o beere lọwọ wọn (ronu lẹẹkansi si awọn oluranlọwọ foju bii Siri ati Alexa).
Ṣugbọn nibo ni NLU ati NLG baamu si NLP?
Bi o tilẹ jẹ pe gbogbo wọn ni ipa oriṣiriṣi, gbogbo awọn ipele mẹta wọnyi ni ohun kan ni wọpọ: gbogbo wọn ṣe pẹlu ede adayeba. Nitorina, kini iyatọ laarin awọn mẹta?
Wo ni ọna yii: lakoko ti NLU ṣe ifọkansi lati loye ede ti eniyan lo, NLP ṣe idanimọ data pataki julọ ati ṣeto rẹ sinu awọn nkan bii ọrọ ati awọn nọmba.
O le paapaa ṣe iranlọwọ pẹlu awọn ibaraẹnisọrọ ti paroko. NLG, ni ida keji, nlo awọn akojọpọ ti data ti a ko ṣeto lati gbejade awọn itan ti a le ṣe itumọ bi itumọ.
Ọjọ iwaju ti NLP
Botilẹjẹpe NLP ni ọpọlọpọ awọn lilo iṣowo lọwọlọwọ, ọpọlọpọ awọn iṣowo ti rii pe o nira lati gba ni gbooro.
Eyi jẹ pupọ julọ nitori awọn ọran wọnyi: Ọrọ kan ti o kan awọn ẹgbẹ nigbagbogbo ni apọju alaye, eyiti o jẹ ki o nira fun wọn lati ṣe idanimọ iru awọn eto data jẹ pataki larin okun ti o dabi ẹnipe ailopin data diẹ sii.
Ni afikun, lati le lo NLP ni imunadoko, awọn ajo nigbagbogbo nilo awọn ọna ati ohun elo kan ti o jẹ ki wọn yọ alaye to niyelori jade lati data.
Ni ikẹhin ṣugbọn kii kere ju, NLP tumọ si pe awọn ile-iṣẹ nilo ẹrọ gige-eti ti wọn ba fẹ lati mu ati idaduro awọn ikojọpọ data lati oriṣiriṣi awọn orisun data ni lilo NLP.
Laibikita awọn idiwọ ti o tọju ọpọlọpọ awọn ile-iṣẹ lati gba NLP, o dabi ẹni pe awọn ajo kanna yoo gba NLP, NLU, ati NLG nikẹhin lati jẹ ki awọn roboti wọn lati ṣetọju ojulowo, awọn ibaraẹnisọrọ bi eniyan ati awọn ijiroro.
Semantics ati sintasi jẹ awọn aaye abẹlẹ NLP meji ti iwadii ti o ngba akiyesi pupọ.
ipari
Gbigba ohun ti a ti jiroro ni bayi sinu ero: Pipin itumo si ohun ati kikọ, NLU ka ati loye ede adayeba, ati NLG ndagba ati gbejade ede tuntun pẹlu iranlọwọ ti awọn ẹrọ.
Ede ni NLU lo lati yọ awọn ododo jade, lakoko ti NLG nlo awọn oye ti NLU gba lati ṣe agbejade ede abinibi.
Ṣọra fun awọn oṣere pataki ni ile-iṣẹ IT bii Apple, Google, ati Amazon lati tẹsiwaju idoko-owo ni NLP ki wọn le se agbekale awọn ọna šiše ti o fara wé eniyan ihuwasi.
Fi a Reply