Table of Contents[Hide][Show]
Cia peb xav txog tias koj tab tom sim qhia tus neeg hlau li cas taug kev. Tsis zoo li kev qhia lub khoos phis tawj yuav ua li cas los kwv yees tus nqi Tshuag lossis faib cov duab, peb tsis tshua muaj cov ntaub ntawv loj uas peb tuaj yeem siv los qhia peb cov neeg hlau.
Txawm hais tias nws tuaj yeem tuaj rau koj, kev taug kev yog qhov ua haujlwm nyuaj heev. Taug kev ib kauj ruam feem ntau muaj ntau ntau cov leeg sib txawv ua haujlwm ua ke. Kev siv zog thiab cov tswv yim siv los taug kev los ntawm ib qho chaw mus rau lwm qhov kuj yog nyob ntawm ntau yam, suav nrog seb koj tab tom nqa ib yam dab tsi lossis seb puas muaj qhov incline lossis lwm yam teeb meem.
Hauv cov xwm txheej zoo li no, peb tuaj yeem siv txoj hauv kev hu ua kev txhawb nqa kev kawm lossis RL. Nrog RL, koj tuaj yeem txhais lub hom phiaj tshwj xeeb uas koj xav kom koj tus qauv daws teeb meem thiab maj mam cia tus qauv kawm ntawm nws tus kheej yuav ua li cas ua kom tiav.
Hauv tsab xov xwm no, peb yuav tshawb txog cov hauv paus ntawm kev txhawb nqa kev kawm thiab yuav ua li cas peb tuaj yeem siv RL lub hauv paus rau ntau yam teeb meem sib txawv hauv ntiaj teb tiag.
Kev kawm txhawb ntxiv yog dab tsi?
Kev kawm txhawb zog yog hais txog ib qho kev kawm tshwj xeeb tshuab kev kawm uas tsom mus nrhiav kev daws teeb meem los ntawm kev muab nqi zog rau tus cwj pwm xav tau thiab rau txim rau tus cwj pwm tsis xav tau.
Tsis zoo li kev saib xyuas kev kawm, txoj kev kawm txhawb nqa feem ntau tsis muaj cov ntaub ntawv qhia kev qhia uas muab cov txiaj ntsig zoo rau cov lus muab. Thaum tsis muaj kev cob qhia cov ntaub ntawv, lub algorithm yuav tsum nrhiav kev daws los ntawm kev sim thiab ua yuam kev. Lub algorithm, uas peb feem ntau xa mus ua ib qho neeg sawv cev, yuav tsum nrhiav kev daws los ntawm nws tus kheej los ntawm kev cuam tshuam nrog cov ib puag ncig.
Cov kws tshawb fawb txiav txim siab txog qhov txiaj ntsig tshwj xeeb rau nqi zog thiab dab tsi lub algorithm muaj peev xwm ua. Txhua txiav txim lub algorithm siv yuav tau txais ib co kev tawm tswv yim uas tau qhab nia zoo npaum li cas algorithm ua. Thaum lub sijhawm kev cob qhia, cov algorithm thaum kawg yuav pom qhov kev pom zoo los daws qhov teeb meem.
Ib qho piv txwv yooj yim: 4 × 4 Daim phiaj
Cia peb saib ib qho piv txwv yooj yim ntawm ib qho teeb meem uas peb tuaj yeem daws tau nrog kev txhawb nqa kev kawm.
Piv txwv tias peb muaj 4 × 4 daim phiaj raws li peb ib puag ncig. Peb tus neeg sawv cev tau muab tso rau hauv ib qho ntawm cov squares nrog rau ob peb yam teeb meem. Daim phiaj yuav tsum muaj peb qhov "qhov" teeb meem uas yuav tsum tau zam thiab ib qho khoom plig "pob zeb diamond" uas tus neeg sawv cev yuav tsum nrhiav. Cov lus piav qhia tag nrho ntawm peb ib puag ncig yog hu ua ib puag ncig lub xeev.
Hauv peb cov qauv RL, peb tus neeg sawv cev tuaj yeem txav mus rau txhua qhov chaw nyob ib sab yog tias tsis muaj kev cuam tshuam los thaiv lawv. Cov txheej txheem ntawm tag nrho cov kev ua tau zoo nyob rau hauv ib puag ncig muab yog hu ua chaw ua haujlwm. Lub hom phiaj ntawm peb tus neeg sawv cev yog nrhiav txoj hauv kev luv tshaj plaws rau qhov khoom plig.
Peb tus neeg sawv cev yuav siv txoj kev kawm ntxiv los nrhiav txoj hauv kev mus rau lub pob zeb diamond uas yuav tsum muaj cov kauj ruam tsawg kawg nkaus. Txhua kauj ruam txoj cai yuav muab nqi zog rau tus neeg hlau thiab txhua kauj ruam tsis ncaj ncees lawm yuav rho tawm cov nqi zog ntawm tus neeg hlau. Tus qauv suav tag nrho cov nqi zog thaum tus neeg sawv cev mus txog lub pob zeb diamond.
Tam sim no peb tau txiav txim siab tus neeg sawv cev thiab ib puag ncig, peb kuj yuav tsum tau txhais cov cai siv los txiav txim siab txog qhov kev txiav txim tom ntej tus neeg sawv cev yuav ua rau nws lub xeev tam sim no thiab ib puag ncig.
Txoj cai thiab khoom plig
Nyob rau hauv tus qauv kev kawm txhawb ntxiv, a txoj cai hais txog lub tswv yim siv los ntawm tus neeg sawv cev kom ua tiav lawv cov hom phiaj. Tus neeg sawv cev txoj cai yog qhov txiav txim siab seb tus neeg sawv cev yuav tsum ua li cas ntxiv rau lub xeev tam sim no ntawm tus neeg sawv cev thiab nws ib puag ncig.
Tus neeg sawv cev yuav tsum soj ntsuam tag nrho cov cai uas ua tau kom pom tias txoj cai twg yog qhov zoo.
Hauv peb qhov piv txwv yooj yim, tsaws ntawm qhov chaw khoob yuav rov qab tus nqi ntawm -1. Thaum tus neeg sawv cev tsaws rau ntawm qhov chaw nrog cov khoom plig pob zeb diamond, lawv yuav tau txais tus nqi ntawm 10. Siv cov txiaj ntsig no, peb tuaj yeem sib piv cov kev cai sib txawv uas siv lub kev siv hluav taws xob ua haujlwm U.
Tam sim no cia peb sib piv cov txiaj ntsig ntawm ob txoj cai uas pom saum toj no:
U(A) = -1 - 1 -1 + 10 = 7
U(B) = -1 – 1 – 1 – 1 – 1 + 10 = 5
Cov txiaj ntsig tau pom tias Txoj Cai A yog txoj hauv kev zoo dua los nrhiav qhov khoom plig. Yog li, tus neeg sawv cev yuav siv Path A dhau Txoj Cai B.
Kev Tshawb Fawb vs. Kev Tshawb Fawb
Qhov kev tshawb nrhiav thiab kev siv cov teeb meem kev lag luam tawm hauv kev txhawb nqa kev kawm yog qhov teeb meem uas tus neeg sawv cev yuav tsum tau ntsib thaum lub sijhawm txiav txim siab.
Cov neeg ua haujlwm puas yuav tsom mus rau kev tshawb nrhiav txoj hauv kev tshiab lossis cov kev xaiv lossis lawv puas yuav tsum tau siv cov kev xaiv uas lawv twb paub lawm?
Yog tias tus neeg sawv cev xaiv los tshawb nrhiav, nws muaj peev xwm ua rau tus neeg sawv cev nrhiav kev xaiv zoo dua, tab sis nws kuj tseem yuav ua rau lub sijhawm thiab cov peev txheej. Ntawm qhov tod tes, yog tias tus neeg sawv cev xaiv los siv cov tshuaj uas nws twb paub lawm, nws yuav plam qhov kev xaiv zoo dua.
Kev siv tswv yim
Nov yog qee txoj hauv kev Cov kws tshawb fawb AI tau siv cov qauv kev kawm ntxiv los daws cov teeb meem tiag tiag hauv ntiaj teb:
Kev Txhim Kho Kev Kawm Hauv Kev Tsav Tsheb Tus Kheej
Kev kawm txhawb zog tau siv rau cov tsheb tsav tus kheej txhawm rau txhim kho lawv lub peev xwm tsav tsheb kom nyab xeeb thiab ua tau zoo. Cov thev naus laus zis ua rau lub tsheb tsis muaj zog los kawm los ntawm lawv qhov kev ua yuam kev thiab txuas ntxiv kho lawv tus cwj pwm txhawm rau txhim kho lawv cov kev ua tau zoo.
Piv txwv li, London-based AI tuam txhab Txoj kev tau ua tiav cov qauv kev kawm sib sib zog nqus rau kev tsav tsheb. Hauv lawv qhov kev sim, lawv tau siv qhov khoom plig uas ua rau lub sijhawm lub tsheb khiav tsis muaj tus neeg tsav tsheb hauv lub nkoj muab tswv yim.
RL qauv kuj tseem pab cov tsheb txiav txim siab raws li ib puag ncig, xws li tsis txhob muaj kev cuam tshuam lossis kev sib koom ua ke hauv kev tsheb. Cov qauv no yuav tsum nrhiav txoj hauv kev los hloov qhov chaw nyob ib puag ncig ntawm lub tsheb mus rau hauv ib qho chaw sawv cev hauv lub xeev uas tus qauv tuaj yeem nkag siab.
Kev txhawb zog kawm hauv Robotics
Cov kws tshawb fawb kuj tau siv cov kev kawm ntxiv los tsim cov neeg hlau uas tuaj yeem kawm cov haujlwm nyuaj. Los ntawm cov qauv RL no, cov neeg hlau tuaj yeem soj ntsuam lawv ib puag ncig thiab txiav txim siab raws li lawv cov kev soj ntsuam.
Piv txwv li, kev tshawb fawb tau tsim los ntawm kev siv cov qauv kev kawm ntxiv kom tso cai rau cov neeg hlau bipedal kawm yuav ua li cas taug kev lawv tus kheej.
Cov kws tshawb fawb suav tias RL yog ib txoj hauv kev tseem ceeb hauv kev ua haujlwm ntawm cov neeg hlau. Kev kawm txhawb zog muab cov neeg ua haujlwm neeg hlau ua lub hauv paus los kawm cov kev ua haujlwm zoo uas tej zaum yuav nyuaj rau kev tsim kho.
Kev txhawb zog kawm hauv kev ua si
RL qauv kuj tau siv los kawm ua si video games. Cov neeg sawv cev tuaj yeem raug teeb tsa los kawm los ntawm lawv qhov yuam kev thiab txuas ntxiv txhim kho lawv qhov kev ua tau zoo hauv qhov kev ua si.
Cov kws tshawb fawb twb tau tsim cov neeg sawv cev uas tuaj yeem ua si xws li chess, Mus, thiab poker. Hauv xyoo 2013, DeepMind siv Deep Reinforcement Learning tso cai rau tus qauv kawm paub ua si Atari ua si los ntawm kos.
Ntau qhov kev ua si hauv pawg thawj coj saib thiab cov yeeb yaj kiab ua si muaj qhov txwv tsis pub ua thiab lub hom phiaj ua tiav zoo. Cov cwj pwm no ua haujlwm rau RL qauv qhov kom zoo dua. RL txoj hauv kev tuaj yeem nrawm dua ntau lab ntawm kev ua si simulated los kawm txog cov tswv yim zoo kom ua tiav kev yeej.
xaus
Txawm hais tias nws tab tom kawm taug kev los yog kawm ua si video games, RL qauv tau raug pov thawj tias yog qhov tseem ceeb AI lub hauv paus rau kev daws teeb meem uas yuav tsum muaj kev txiav txim siab nyuaj.
Raws li kev siv thev naus laus zis txuas ntxiv mus, cov kws tshawb fawb thiab cov neeg tsim khoom yuav txuas ntxiv mus nrhiav cov ntawv thov tshiab uas coj kom zoo dua ntawm tus qauv kev qhia tus kheej.
Koj xav tias kev txhawb nqa kev kawm twg tuaj yeem pab tau?
Sau ntawv cia Ncua