нейрондық желілер
- Мақалалар
Ауқымды тілді модельдер үшін шешу табылған математикалық қиындық
Жасанды интеллект саласындағы үлкен жетістіктердің бірі – ауқымды тілді модельдердің (АТМ) дамуы. Бұл технология табиғи тілмен жұмыс істеп, мәтіндерді талдауда,…
- Мақалалар
Параметрлерді үнемдеудің танымал әдісі LoRA-дан тыс: қайсысы тиімдірек?
Жасанды интеллект саласында модельдерді икемдеу – олардың нақты міндеттерге сай болуын қамтамасыз ететін маңызды әдіс. Бұл мақсатта параметрлерді тиімді пайдалану…
- Мақалалар
Profiling әдісі арқылы PyTorch-та nn.Linear-ден біріктірілген нейрондық желіге өту
Жасанды интеллекттің дамуы барысында нейрондық желілердің тиімділігін арттыру талабы арта түсуде. PyTorch сияқты танымал машиналық оқыту кітапханалары өз өнімділігін арттыру…
- Мақалалар
Mixture of Experts (MoEs) трансформерлерде
Кіріспе Соңғы жылдары ірі көлемді тілдік модельдерді кеңейту бағытындағы зерттеулер көп жетістіктерге жетті. Бұған дейін параметрлері миллиондаған және миллиардтаған болатын…

