Dhammaan ereyada

Moodel Luqad Waaweyn (LLM)

Transformer lagu tababaray xoghayaha qoraalka aad u weyn si loo saadaaliyo lana abuuro luqadda — matoorka ka dambeeya wakiillada nooca ChatGPT.

Moodellada Luqadda Waaweyn2 daqiiqo akhris

Qeexid

Moodel Luqad Waaweyn (LLM) waa shabakad neerfeed — badanaa Transformer — oo lagu tababaray xoghaye qoraal aad u weyn si loo qaabeeyo itimaalka (probability) token-ka xiga marka la eego tokens-ka hore.

Marka la fulinayo (inference), LLM-yadu waxay abuuraan qoraal token-token. Waxay ka jawaabi karaan su'aalo, waxay soo koobi karaan, tarjumi karaan, qori karaan koodh, oo raaci karaan tilmaamo marka lala habeeyo (aligned) jawaab-celinta bini'aadamka ama farsamooyinka prompt-ka.

Si fudud

LLM waxay la mid tahay matoor autocomplete oo akhriyay maktabadda internetka oo dhan. Ma 'ogtahay' xaqiiqooyinka sida qofku u yaqaan — waxay saadaaliyaan sii-wadidda qoraalka ee ugu macquulsan iyadoo lagu salaynayo qaababka la bartay inta lagu jiray tababarka.

Halka aad ka aragto

  • ChatGPT, Claude, iyo Gemini waa alaabooyin LLM oo loogu talagalay macaamiisha.
  • GitHub Copilot wuxuu isticmaalaa LLM-yada si uu koodhka u dhammeeyo.
  • Kaaliyeyaasha macaamiisha ayaa qoraya jawaabo iyagoo ka soo qaadanaya aqoonta shirkadda.
  • Cilmi-baarayaashu waxay isticmaalaan LLM-yada si ay u falanqeeyaan qoraalka Soomaaliga ah oo ay u dhisaan qalab NLP oo loogu talagalay luqadaha ilaha-yaraatay.

Sida ay u shaqeyso

  1. 1.Tababarka hore (pre-training)

    Moodelku wuxuu barataa qaababka luqadda guud isagoo saadaalinaya tokens-ka la qariyay ama kuwa xiga oo ka mid ah bilyoono kelmadood oo qoraal ah.

  2. 2.Token-eyn (tokenization)

    Qoraalka la soo geliyay waxaa loo kala qaybiyaa subword tokens; token kastaa wuxuu u dhiganayaa vector uu moodelku falanqeeyo.

  3. 3.Abuuridda autoregressive

    Moodelku wuxuu soo saaraa hal token, wuxuu ku daraa context-ka, kadibna wuu ku celceliyaa ilaa xaalad joojin (stop condition) la gaaro.

  4. 4.Habayn ikhtiyaari ah (alignment)

    Hagaajinta gaarka ah (fine-tuning) ama RLHF waxay u jihaysaa wax-soo-saarka si uu u noqdo mid caawiya, ammaan ah, oo raaca tilmaamaha.

Si degdeg ah

Maxay muhiim u tahay

  • LLM-yadu waa bilowga ugu fudud ee AI casriga ah, ha ahaadeen horumariyeyaal ama aan ahayn.
  • Waxay awood siiyaan retrieval, wakiillada (agents), qalabka koodhka, iyo tarjumaadda — laakiin kaliya marka aad fahamto xadaha ay leeyihiin.

Inta badan la khaldo

  • LLM-yadu waxay u fikiraan sida bini'aadamka.

    LLM-yadu waxay saadaaliyaan token-ka xiga iyadoo lagu salaynayo qaababka istaatistikada ee la bartay — ma laha aaminaad, xusuus, ama miyir.

  • LLM-yadu had iyo jeer waxay sheegaan runta.

    Waxay 'hallucinate' garayn karaan bayaanno la moodo inay macquul yihiin laakiin qalad ah, gaar ahaan xaqiiqooyinka gaarka ah ama kuwa dhawaan dhacay.