မာတိကာ[ဖျောက်][ရှိုး]
GPT-3၊ ယခုခေတ်၏ကြီးမားသောအာရုံကြောကွန်ရက်ကို 2020 ခုနှစ် မေလတွင် ထုတ်ဝေခဲ့သည်။ OpenAIElon Musk နှင့် Sam Altman တို့ ပူးပေါင်းတည်ထောင်ခဲ့သော AI startup ဖြစ်သည်။ GPT-3 သည် ၎င်း၏ယခင် GPT-175 တွင် ပါရာမီတာ 1,5 ဘီလီယံနှင့် နှိုင်းယှဉ်ပါက ကန့်သတ်ဘောင်ပေါင်း 2 ဘီလီယံရှိသော နောက်ဆုံးပေါ်ဘာသာစကားမော်ဒယ်တစ်ခုဖြစ်သည်။
GPT-3 သည် Microsoft ၏ NLG Turing မော်ဒယ် (Turing Natural Language Generation) ကို ကျော်လွန်ပြီး ကန့်သတ်ချက်များ 17 ဘီလီယံဖြင့် အကြီးမားဆုံး အာရုံကြောကွန်ရက်အတွက် စံချိန်တင်ခဲ့ဖူးသည်။
ဘာသာစကားပုံစံကို ချီးမွမ်းခြင်း၊ ဝေဖန်ခြင်း၊ ဆန်းစစ်ခြင်းများ ပြုလုပ်ခဲ့သည်။ ၎င်းသည် ဆန်းကြယ်ပြီး ဆန်းကြယ်သော အသုံးပြုမှုများကိုလည်း ဖန်တီးပေးခဲ့သည်။ ယခုတွင် OpenAI ၏နောက်ထပ်ထုတ်ဝေမှု GPT-4 ဟူသောသတင်းများရှိသည်။ ဘာသာစကားပုံစံမကြာမီလာမည် အမှန်ပင်။
GPT-4 အကြောင်းပိုမိုလေ့လာလိုပါက သင်သည် မှန်ကန်သောဆိုက်သို့ ရောက်ရှိသွားပါပြီ။ ၎င်း၏ ကန့်သတ်ချက်များ၊ အခြားမော်ဒယ်များနှင့် နှိုင်းယှဉ်ပုံနှင့် အခြားအရာများကို ခြုံငုံပြီး ဤဆောင်းပါးတွင် GPT-4 ကို နက်နက်နဲနဲ ကြည့်ပါမည်။
ဒါဆို GPT-4 ဆိုတာဘာလဲ။
GPT-4 ၏ နယ်ပယ်ကို နားလည်ရန်၊ ၎င်း၏ ရှေ့ပြေးဖြစ်သော GPT-3 ကို ဦးစွာ နားလည်ရပါမည်။ GPT-3 (Generative Pre-trained Transformer၊ တတိယမျိုးဆက်) သည် ကိုယ်ပိုင်အုပ်ချုပ်ခွင့်ရအကြောင်းအရာထုတ်ပေးသည့်ကိရိယာတစ်ခုဖြစ်သည်။
အသုံးပြုသူများသည် ဒေတာတစ်ခုထဲသို့ ထည့်သည်။ စက်သင်ယူမှု OpenAI ၏အဆိုအရ၊ နောက်ပိုင်းတွင်သက်ဆိုင်ရာစာရေးသားမှုပမာဏအမြောက်အမြားထုတ်လုပ်နိုင်သည့်မော်ဒယ်၊ GPT-4 သည် အမျိုးအစားတစ်ခုဖြစ်သည့် အနည်းငယ်သောအခြေအနေများတွင် လုပ်ဆောင်စရာများစွာကို လုပ်ဆောင်ရာတွင် သိသိသာသာ ပိုမိုကောင်းမွန်ပါသည်။ စက်သင်ယူမှု - ရလဒ်များကို လူသားများနှင့် ပို၍နီးစပ်စေပါသည်။
GPT-3 ကို တည်ဆောက်ရန် ပေါင်သန်းရာနှင့်ချီ ကုန်ကျသော်လည်း GPT-4 သည် အဆငါးရာ ပိုကြီးသောကြောင့် သိသိသာသာ ပိုကုန်ကျမည်ဟု ခန့်မှန်းရသည်။ ဒါကို ရှုထောင့်အနေနဲ့ ထည့်ပြောဖို့၊
GPT-4 သည် ဦးနှောက်အတွင်းရှိ synapses များကဲ့သို့ လက္ခဏာများစွာရှိနိုင်သည်။ GPT-4 သည် GPT-3 ကဲ့သို့တူညီသောနည်းလမ်းများကို အဓိကအားဖြင့်အသုံးပြုမည်ဖြစ်ပြီး၊ ထို့ကြောင့် ပါရာဒိုင်းခုန်ခြင်းမဟုတ်ဘဲ၊ GPT-4 သည် လက်ရှိလုပ်ဆောင်နေသော GPT-3 ကို ချဲ့ထွင်လိမ့်မည် — သို့သော် သိသိသာသာပိုကြီးသောအနုမာနစွမ်းရည်ဖြင့်။
GPT-3 သည် အသုံးပြုသူများအား လက်တွေ့ကျသော ရည်ရွယ်ချက်များအတွက် သဘာဝဘာသာစကားကို ထည့်သွင်းနိုင်စေသော်လည်း ရလဒ်ကောင်းများထွက်ပေါ်စေမည့် အချက်ပြတစ်ခုကို ဒီဇိုင်းထုတ်ရန်အတွက် ကျွမ်းကျင်မှုအချို့ လိုအပ်နေသေးသည်။ GPT-4 သည် သုံးစွဲသူများ၏ ရည်ရွယ်ချက်များကို ခန့်မှန်းရာတွင် သိသိသာသာ ပိုမိုကောင်းမွန်လာမည်ဖြစ်သည်။
GPT-4 ဘောင်များသည် အဘယ်နည်း။
အကျယ်ပြန့်ဆုံး စောင့်မျှော်နေသော AI တိုးတက်မှုများထဲမှ တစ်ခုဖြစ်သော်လည်း GPT-4 နှင့်ပတ်သက်ပြီး မည်သည့်အရာက မည်သို့မည်ပုံမည်ပုံ၊ မည်သို့သောလက္ခဏာများ ပါရှိမည်၊ မည်သည့် စွမ်းအားများ ရှိမည်ကို မသိနိုင်ပါ။
ပြီးခဲ့သောနှစ်တွင် Altman သည် အမေးအဖြေလုပ်ခဲ့ပြီး GPT-4 အတွက် OpenAI ၏ရည်မှန်းချက်များအကြောင်းအသေးစိတ်အချက်အနည်းငယ်ကိုဖော်ပြခဲ့သည်။ Altman အဆိုအရ ၎င်းသည် GPT-3 ထက် ကြီးမားမည်မဟုတ်ပေ။ GPT-4 သည် အသုံးအများဆုံးဖြစ်ဖွယ်မရှိပါ။ ဘာသာစကားပုံစံ. မော်ဒယ်သည် ယခင်မျိုးဆက်များနှင့် နှိုင်းယှဉ်လျှင် ကြီးမားမည်ဖြစ်သည်။ အာရုံကြောကွန်ရက်များ၊ ၎င်း၏အရွယ်အစားသည်၎င်း၏ထူးခြားသောဝိသေသဖြစ်လိမ့်မည်မဟုတ်ပါ။ GPT-3 နှင့် Gopher တို့သည် ယုံကြည်ဖွယ်အကောင်းဆုံး ကိုယ်စားလှယ်လောင်းများ (175B-280B) ဖြစ်သည်။
Nvidia နှင့် Microsoft ၏ Megatron-Turing NLG တို့သည် အဆိုပါ စံချိန်ကို ထိန်းထားနိုင်ခဲ့သည်။ အသိပ်သည်းဆုံး အာရုံကြောကွန်ရက် Google ၏ PaLM က 530B ဖြင့် မကြာသေးမီကမှ ရယူခဲ့သည့်တိုင်အောင် 3B - GPT-540 ထက် သုံးဆဖြစ်သည်။ အံ့အားသင့်စရာမှာ၊ သေးငယ်သောမော်ဒယ်အချို့သည် MT-NLG ထက်သာလွန်သည်။
ပါဝါဥပဒေ ချိတ်ဆက်မှုအရ OpenAI ၏ Jared Kaplan နှင့် လုပ်ဖော်ကိုင်ဖက်များသည် ကန့်သတ်အရေအတွက်များကို တိုးမြှင့်ရာတွင် လုပ်ဆောင်ရာတွင် ဘတ်ဂျက်တိုးလာသောအခါတွင် စွမ်းဆောင်ရည်သည် အကြီးကျယ်ဆုံးဖြစ်ကြောင်း 2020 ခုနှစ်တွင် ဆုံးဖြတ်ခဲ့သည်။ Google၊ Nvidia၊ Microsoft၊ OpenAI၊ DeepMind နှင့် အခြားဘာသာစကားပုံစံထုတ်လုပ်သည့်ကုမ္ပဏီများသည် စည်းမျဉ်းများကို နာခံမှုရှိစွာ လိုက်နာခဲ့သည်။
Altman က ၎င်းတို့သည် ကြီးမားသော မော်ဒယ်များကို တည်ဆောက်ရာတွင် အာရုံမစိုက်တော့ဘဲ သေးငယ်သော မော်ဒယ်များ၏ စွမ်းဆောင်ရည်ကို အမြင့်ဆုံးသို့ မြှင့်တင်ရန်သာဖြစ်ကြောင်း ညွှန်ပြခဲ့သည်။
OpenAI သုတေသီများသည် အတိုင်းအတာချဲ့ထွင်ခြင်းဆိုင်ရာ အယူအဆကို အစောပိုင်းတွင် ထောက်ခံခဲ့ကြသော်လည်း၊ ယခင်က မရှာဖွေတွေ့ရှိခဲ့သော နောက်ထပ်လမ်းကြောင်းများသည် သာလွန်ကောင်းမွန်သော မော်ဒယ်များဆီသို့ ဦးတည်သွားနိုင်သည်ကို ၎င်းတို့ ရှာဖွေတွေ့ရှိခဲ့ကြသည်။ ဤအကြောင်းများကြောင့် GPT-4 သည် GPT-3 ထက် သိသိသာသာကြီးမည်မဟုတ်ပါ။
OpenAI သည် သိသာထင်ရှားသောအကျိုးကျေးဇူးများကိုပိုမိုလျင်မြန်စွာထုတ်ပေးနိုင်သည့်အလားအလာရှိသည့် data၊ algorithms၊ parameterization နှင့် alignment ကဲ့သို့သောအခြားရှုထောင့်များအပေါ်ပိုမိုအာရုံစိုက်လိမ့်မည်။ 100T ပါရာမီတာများပါသည့် မော်ဒယ်သည် မည်သို့လုပ်ဆောင်နိုင်သည်ကို စောင့်ဆိုင်းရမည်ဖြစ်ပါသည်။
အဓိကအချက်များ:
- မော်ဒယ်၏အရွယ်အစား- GPT-4 သည် GPT-3 ထက် ပိုကြီးလိမ့်မည်၊ သို့သော် (MT-NLG 530B နှင့် PaLM 540B) သည် များစွာမဟုတ်ပါ။ မော်ဒယ်၏ အရွယ်အစားသည် ထူးထူးခြားခြား ဖြစ်လိမ့်မည်။
- အကောင်းဆုံးဖြစ်အောင်: GPT-4 သည် GPT-3 ထက် အရင်းအမြစ်များကို ပိုမိုအသုံးပြုပါမည်။ ၎င်းသည် parameterization (အကောင်းမွန်ဆုံး hyperparameters) နှင့် scaling method (လေ့ကျင့်ရေးတိုကင်နံပါတ်များသည် မော်ဒယ်အရွယ်အစားကဲ့သို့ အရေးကြီးသည်) အတွက် အကောင်းဆုံးထိုးထွင်းသိမြင်မှုအသစ်များကို အကောင်အထည်ဖော်ပေးမည်ဖြစ်ပါသည်။
- ဘက်စုံ− GPT-4 သည် စာသားမက်ဆေ့ခ်ျများကိုသာ ပို့နိုင်လက်ခံနိုင်သည် (ဘက်စုံသုံးမဟုတ်)။ OpenAI သည် multimodal မော်ဒယ်များကိုမကူးပြောင်းမီ ဘာသာစကားမော်ဒယ်များကို ၎င်းတို့၏ကန့်သတ်ချက်များသို့ တွန်းပို့ရန်ကြိုးစားသည်။ DALLE ၂နောက်ဆုံးတွင် unimodal စနစ်များကို ကျော်လွန်သွားလိမ့်မည်ဟု ၎င်းတို့က ခန့်မှန်းထားသည်။
- ပျော့ပျောင်း: GPT-4 သည် ၎င်း၏ရှေ့ဆက်ဖြစ်သော GPT-2 နှင့် GPT-3 ကဲ့သို့ အလွန်သိပ်သည်းသော မော်ဒယ်ဖြစ်လိမ့်မည် (ပေးထားသည့် ထည့်သွင်းမှုမှန်သမျှကို လုပ်ဆောင်ရန် ဘောင်အားလုံးကို အသုံးပြုပါမည်)။ အနာဂတ်မှာ ပါးနပ်မှုက ပိုအရေးကြီးလာမယ်။
- alignment: GPT-4 သည် GPT-3 ထက် ကျွန်ုပ်တို့ကို ပိုမိုနီးကပ်စွာ ချဉ်းကပ်လာလိမ့်မည်။ ၎င်းသည် လူသားထည့်သွင်းမှုဖြင့် ဖန်တီးထားသည့် InstructGPT မှ သင်ယူခဲ့ရာများကို ထည့်သွင်းပေးမည်ဖြစ်သည်။ သို့တိုင်၊ AI ပေါင်းစည်းမှုသည် ဝေးကွာနေပြီး ကြိုးပမ်းမှုများကို ပုံကြီးချဲ့ခြင်းထက် ဂရုတစိုက်အကဲဖြတ်သင့်သည်။
ကောက်ချက်
အထွေထွေဥာဏ်ရည်တု. ၎င်းသည် ကြီးမားသောရည်မှန်းချက်တစ်ခုဖြစ်သော်လည်း OpenAI developer များသည် ၎င်းကိုအောင်မြင်ရန်လုပ်ဆောင်နေပါသည်။ AGI ၏ ပန်းတိုင်မှာ လူတစ်ဦး တတ်နိုင်သမျှ နားလည်ပြီး လုပ်ဆောင်နိုင်သည့် မော်ဒယ် သို့မဟုတ် "အေးဂျင့်" ကို ဖန်တီးရန် ဖြစ်သည်။
GPT-4 သည် ဤရည်မှန်းချက်ကို အကောင်အထည်ဖော်ရန် နောက်တစ်ဆင့် ဖြစ်နိုင်ပြီး ၎င်းသည် သိပ္ပံစိတ်ကူးယဉ်ရုပ်ရှင်ထဲမှ တစ်ခုခုဖြစ်ပုံရသည်။ AGI ကိုရရှိရန်မည်မျှလက်တွေ့ကျသည်ကိုသင်အံ့သြနိုင်သည်။
Google ၏ အင်ဂျင်နီယာ ဒါရိုက်တာ Ray Kurzweil ၏ အဆိုအရ 2029 ခုနှစ်တွင် ဤမှတ်တိုင်ကို အရောက်လှမ်းနိုင်မည်ဖြစ်ပါသည်။ ဤအချက်ကို စိတ်ထဲစွဲမှတ်ထားပြီး၊ ကျွန်ုပ်တို့သည် AGI (Artificial General Intelligence) နှင့် ပိုမိုနီးကပ်လာသည်နှင့်အမျှ GPT-4 နှင့် ဤမော်ဒယ်၏ အကျိုးသက်ရောက်မှုများကို ပိုမိုနက်ရှိုင်းစွာ ကြည့်ကြပါစို့။
တစ်ဦးစာပြန်ရန် Leave