Ka e were ya na ị na-agbalị ịkụziri robọt ka esi aga ije. N'adịghị ka ịkụziri kọmpụta otu esi ebu amụma ọnụ ahịa ngwaahịa ma ọ bụ wepụta onyonyo, anyị enweghị nnukwu dataset nke anyị nwere ike iji zụọ roboti anyị.
Ọ bụ ezie na ọ nwere ike ịbịara gị ndammana, ije ije bụ n'ezie ihe dị mgbagwoju anya. Ije nzọụkwụ na-agụnye ọtụtụ akwara dị iche iche na-arụkọ ọrụ ọnụ. Mgbalị na usoro a na-eji isi n’otu ebe gaa n’ọzọ na-adaberekwa n’ụdị dị iche iche, gụnyere ma ị̀ na-ebu ihe ma ọ bụkwanụ ma e nwere ihe mgbochi ma ọ bụ ihe mgbochi ndị ọzọ.
N'ọnọdụ dị ka ndị a, anyị nwere ike iji usoro a maara dị ka mmụta nkwado ma ọ bụ RL. Site na RL, ị nwere ike ịkọwa otu ebumnuche ịchọrọ ka ihe nlereanya gị dozie wee jiri nwayọọ nwayọọ mee ka ihe nlereanya ahụ mụta n'onwe ya ka ọ ga-esi mezuo ya.
N'ime edemede a, anyị ga-enyocha ihe ndabere nke mmụta nkwado yana otu anyị nwere ike isi tinye usoro RL na nsogbu dị iche iche dị n'ụwa n'ezie.
Kedu ihe bụ mmụta nkwado?
Nmụta nkwado na-ezo aka n'otu mpaghara nke ngwa igwe nke na-elekwasị anya n'ịchọta ihe ngwọta site n'ịkwụghachi omume ndị a chọrọ na ịta ahụhụ omume ndị na-achọghị.
N'adịghị ka mmụta a na-ahụ maka ya, usoro mmụta nkwado anaghị enwe usoro ọzụzụ na-enye nsonaazụ ziri ezi maka ntinye enyere. Na enweghị data ọzụzụ, algọridim ga-achọta ngwọta site na ikpe na njehie. Algọridim, nke anyị na-ezokarị aka dị ka ihe gị n'ụlọnga, ga-achọta azịza ya n'onwe ya site na ịmekọrịta ihe gburugburu ebe obibi.
Ndị nchọpụta na-ekpebi ihe ga-esi na ya pụta ụgwọ ọrụ na ihe algọridim nwere ike ime. Nke ọ bụla edinam algọridim na-ewe ga-enweta ụfọdụ ụdị nzaghachi nke na-egosi etu algọridim si arụ ọrụ nke ọma. N'oge usoro ọzụzụ, algọridim ga-emecha chọta ngwọta kachasị mma iji dozie nsogbu ụfọdụ.
Ọmụmaatụ Dị Mfe: 4×4 Grid
Ka anyị leba anya n'ihe atụ dị mfe nke nsogbu anyị nwere ike idozi site na mmụta nkwado.
Ka e were ya na anyị nwere grid 4 × 4 dị ka gburugburu anyị. A na-edobe onye nnọchi anya anyị na-enweghị usoro n'otu ogige yana ihe mgbochi ole na ole. Ngwa ahụ ga-enwe ihe mgbochi atọ "olulu" nke a ga-ezere na otu ụgwọ ọrụ "diamond" nke onye ọrụ ahụ ga-achọta. A maara nkọwa zuru oke nke gburugburu ebe obibi anyị dị ka gburugburu ebe obibi ala.
Na ụdị RL anyị, onye ọrụ anyị nwere ike ịkwaga n'akụkụ ọ bụla dị n'akụkụ ma ọ bụrụhaala na enweghị ihe mgbochi na-egbochi ha. A na-akpọ usoro omume niile dị mma na mpaghara enyere dị ka ndị oghere ime ihe. Ebumnuche nke onye nnọchi anya anyị bụ ịchọta ụzọ kacha nso maka ụgwọ ọrụ ahụ.
Onye nnọchi anya anyị ga-eji usoro mmụta nkwado iji chọta ụzọ ga-ada diamond nke chọrọ obere usoro. Nzọụkwụ ọ bụla ziri ezi ga-enye robot ụgwọ ọrụ na nzọụkwụ ọ bụla na-ezighị ezi ga-ewepụ ụgwọ ọrụ nke robot. Ihe nlereanya ahụ na-agbakọ ngụkọta ụgwọ ọrụ ozugbo onye ọrụ ahụ ruru diamond.
Ugbu a anyị kọwapụtala ndị nnọchite anya na gburugburu ebe obibi, anyị ga-akọwarịrị iwu anyị ga-eji wee chọpụta ihe ọzọ onye ọrụ ahụ ga-eme n'ihi ọnọdụ ya ugbu a na gburugburu ebe obibi ya.
Atumatu na ụgwọ ọrụ
N'ụdị mmụta nkwado, a iwu na-ezo aka na atụmatụ nke onye nnọchi anya na-eji mezuo ebumnuche ha. Amụma onye nnọchite anya bụ ihe na-ekpebi ihe onye nnọchi anya ga-eme ọzọ n'ihi ọnọdụ onye nnọchite anya ugbu a yana gburugburu ya.
Onye nnọchi anya ahụ ga-enyocharịrị amụma niile enwere ike ịhụ nke kacha mma.
N'ihe atụ anyị dị mfe, ịdakwasị na oghere efu ga-eweghachi uru nke -1. Mgbe onye ọrụ ahụ rutere na oghere na ụgwọ ọrụ diamond, ha ga-enweta uru nke 10. N'iji ụkpụrụ ndị a, anyị nwere ike iji ụkpụrụ dị iche iche tụnyere usoro a. ọrụ ịba uru U.
Ka anyị tulee uru nke amụma abụọ a hụrụ n'elu:
U(A) = -1 - 1 -1 + 10 = 7
U(B) = -1 – 1 – 1 – 1 – 1 + 10 = 5
Nsonaazụ gosiri na amụma A bụ ụzọ kacha mma ịchọta ụgwọ ọrụ. Yabụ, onye nnọchi anya ahụ ga-eji ụzọ A karịa amụma B.
Nchọgharị vs. nrigbu
Ihe nchọgharị vs. nsogbu ahia-apụ na nrigbu na mmụta nkwado bụ nsogbu onye ọrụ ga-eche ihu n'oge usoro mkpebi.
Ndị ọrụ kwesịrị ilekwasị anya n'ịchọgharị ụzọ ma ọ bụ nhọrọ ọhụrụ ma ọ bụ ka ha ga-aga n'ihu na-erigbu nhọrọ ndị ha maralarị?
Ọ bụrụ na onye ọrụ ahụ ahọrọ inyocha, enwere ike onye ọrụ ahụ ịchọta nhọrọ ka mma, mana ọ nwekwara ike imebi oge na akụrụngwa. N'aka nke ọzọ, ọ bụrụ na onye ọrụ ahụ ahọrọ iji ngwọta ọ maralarị, ọ nwere ike ịhapụ nhọrọ ka mma.
Ngwa Ngwa
Lee ụzọ ụfọdụ Ndị nyocha AI etinyela usoro mmụta nkwado nkwado iji dozie nsogbu ụwa n'ezie:
Nkwalite mmụta n'ime ụgbọ ala na-anya onwe ya
E tinyela mmụta nkwado na ụgbọ ala ndị na-anya onwe ha ka ha wee kwalite ikike ịnya ụgbọ ala n'enweghị nsogbu na nke ọma. Teknụzụ ahụ na-enyere ụgbọ ala ndị kwụụrụ onwe ha aka ịmụta site na mmejọ ha ma na-agbanwekwa omume ha mgbe niile iji kwalite ọrụ ha.
Dịka ọmụmaatụ, ụlọ ọrụ AI nke dabeere na London Wayve etinyela usoro mmụta nkwado miri emi nke ọma maka ịnya ụgbọ ala kwụụrụ onwe ya. N'ime nnwale ha, ha jiri ọrụ ụgwọ ọrụ na-ebuli oge ụgbọ ala na-agba na-enweghị onye ọkwọ ụgbọ ala na-enye ntinye.
Ụdị RL na-enyekwara ụgbọ ala aka ime mkpebi dabere na gburugburu ebe obibi, dị ka izere ihe mgbochi ma ọ bụ ịbanye na okporo ụzọ. Ụdị ndị a aghaghị ịchọta ụzọ iji gbanwee gburugburu mgbagwoju anya gbara ụgbọ ala ahụ ka ọ bụrụ oghere steeti nnọchiteanya nke ihe nlereanya ahụ nwere ike ịghọta.
Nkwalite mmụta na Robotics
Ndị na-eme nchọpụta na-ejikwa mmụta nkwado na-emepụta rọbọt ndị nwere ike ịmụta ọrụ dị mgbagwoju anya. Site na ụdị RL ndị a, robots na-enwe ike ịhụ gburugburu ha ma mee mkpebi dabere na nlebanya ha.
Dịka ọmụmaatụ, emela nyocha maka iji ụdị mmụta mmụta nkwado iji mee ka robots bipedal mụta ka esi eme ya na-eje ije na aka ha.
Ndị na-eme nchọpụta na-ewere RL ka ọ bụrụ ụzọ dị mkpa n'ọhịa nke robotik. Nmụta mkwado na-enye ndị ọrụ rọbọt usoro iji mụta omume ọkaibe nke nwere ike isiri ike injinia.
Nkwalite mmụta n'ịgba chaa chaa
Ejikwa ụdị RL mụta ka e si egwu egwuregwu vidiyo. Enwere ike ịhazi ndị nnọchi anya ka ha mụta ihe site na mmejọ ha ma na-aga n'ihu na-emeziwanye arụmọrụ ha na egwuregwu ahụ.
Ndị nchọpụta ewepụtala ndị ọrụ nwere ike igwu egwuregwu dịka chess, Go, na poker. N'afọ 2013, DeepMind ji Deep Reinforcement Learning kwe ka ihe nlereanya mụta ka esi egwu egwuregwu Atari site na ọkọ.
Ọtụtụ egwuregwu bọọlụ na egwuregwu vidiyo nwere ohere ime ihe nwere oke yana ebumnuche akọwapụtara nke ọma. Àgwà ndị a na-arụ ọrụ maka ihe nlereanya RL. Ụzọ RL nwere ike ime ngwa ngwa karịa nde egwuregwu simulated iji mụta usoro kachasị mma iji nweta mmeri.
mmechi
Ma ọ bụ ịmụta otú e si eje ije ma ọ bụ ịmụta otú e si egwu egwuregwu vidio, ụdị RL egosila na ọ bụ ụkpụrụ AI bara uru maka idozi nsogbu ndị chọrọ mkpebi siri ike.
Ka teknụzụ na-aga n'ihu na-agbanwe, ma ndị nchọpụta na ndị mmepe ga-aga n'ihu na-achọta ngwa ọhụrụ na-erite uru nke ikike nkuzi onwe onye ihe nlereanya.
Kedu ngwa bara uru ị chere na mmụta nkwado nwere ike inye aka na?
Nkume a-aza