Qeexid
Qiimeyntu waxay isbarbardhigtaa saadaasha iyo xaqiiqda ama xukunka aadanaha iyadoo la isticmaalayo cabbiro (F1, BLEU, perplexity, win rate). LLM-yada, halbeegyada tooska ah iyo eval-yada aadanaha/LLM-as-judge ayaa caan ah.
Qiimeyn wanaagsan waxay la mid tahay halista badeecadu; dhibic saxnaan oo fudud kuma filan hawlaha halista badbaadada leh.
Si fudud
Imtixaanno, tijaabooyin wadada, iyo faallooyin macaamiil — siyaabo kala duwan oo lagu hubinayo diyaargaroow ka hor inta aad nidaamka ku kalsoonaanta dunida dhabta ah.
Halka aad ka aragto
- Halbeegyada aqoonta nooca MMLU ee LLM-yada.
- F1 khadka toosan ka baxsan oo lagu qiimeeyo dataset tijaabo NER Soomaali.
- Tijaabooyinka A/B ee ku saabsan qanacsanaanta isticmaalayaasha nool.
Sida ay u shaqeyso
1.Qeex guusha
Dooro cabbiro la xiriira hadafka dhabta ah.
2.Dhis dataset tijaabo
Nadiif ah, matale ah, aan lumin macluumaad ku jirin.
3.Cabbi oo ku celceli
Isbarbardhig moodellada; ilaali dib u dhac.
Maxay muhiim u tahay
- Iyada oo aan qiimeyn la sameyn, ma kala sooci kartid horumar iyo rajo aan hoosta wax ku jirin.
Inta badan la khaldo
Derejada liiska hormarka waa isku mid tayada badeecada.
Halbeegyada guud waa la khiyaano karaa ama uma habboonaan karaan isticmaalayaashaada iyo luuqaddaada.