Розробка середовищ навчання з підкріпленням для пост-тренування великих мовних моделей

Simple item page
dc.contributor.advisorГлибовець, Миколаuk_UA
dc.contributor.authorПушкарьов, Максим uk_UA
dc.date.accessioned2026-08-27T09:12:05Z
dc.date.available2026-08-27T09:12:05Z
dc.date.issued2026
dc.description.abstractДипломна (магістерська) робота присвячена розробці PTL (Post-Training Language) — фреймворку для декларативного опису та виконання пайплайнів пост-тренування великих мовних моделей. Запропоновано предметноорієнтовану мову із PEG-граматикою, що описує багатоетапні пайплайни як спрямовані ациклічні графи з типізованими залежностями та вбудованою підтримкою функцій винагороди й верифікаторів. Розроблено пошарову систему середовищ навчання з підкріпленням, яка формалізує три рівні складності; у рамках прототипу реалізовано перший і другий рівні (вбудовані функції винагороди та модулі верифікації). Спроєктовано архітектуру оркестрації, незалежну від бекенду пост-тренування: контрактний інтерфейс TrainingBackend реалізовано двома адаптерами — TRL та Axolotl — із автоматизованим тестом перехресної семантичної парності згенерованих артефактів. Коректність і практичну придатність фреймворку підтверджено наскрізним пайплайном SFT → GRPO на моделі Llama-3.2-3B та корпусі GSM8K у межах фіксованого обчислювального бюджету. Доведено побайтну стабільність кодогенерації та семантичну еквівалентність артефактів між двома незалежно реалізованими бекендами.uk_UA
dc.identifier.urihttps://ekmair.ukma.edu.ua/handle/123456789/40994
dc.language.isoukuk_UA
dc.statusfirst publisheduk_UA
dc.subjectвеликі мовні моделіuk_UA
dc.subjectпост-тренуванняuk_UA
dc.subjectнавчання з підкріпленнямuk_UA
dc.subjectпредметно-орієнтована моваuk_UA
dc.subjectкодогенераціяuk_UA
dc.subjectбекенд-агностична оркестраціяuk_UA
dc.subjectнавчальні середовищаuk_UA
dc.subjectверифіковані винагородиuk_UA
dc.subjectмагістерська роботаuk_UA
dc.titleРозробка середовищ навчання з підкріпленням для пост-тренування великих мовних моделейuk_UA
dc.typeOtheruk_UA
Files
Original bundle
Now showing 1 - 2 of 2
Thumbnail Image
Name:
Pushkarov_Mahisterska_robota.pdf
Size:
569.97 KB
Format:
Adobe Portable Document Format
Download
Thumbnail Image
Name:
Pushkarov_Mahisterska_robota_1.pdf
Size:
237.75 KB
Format:
Adobe Portable Document Format
Download
License bundle
Now showing 1 - 1 of 1
No Thumbnail Available
Name:
license.txt
Size:
1.71 KB
Format:
Item-specific license agreed upon to submission
Description:
Download
Collections
F3 Комп'ютерні науки