Розробка системи для автоматичного оцінювання тестів з відкритими питаннями

Метою дослідження є створення системи для автоматичного оцінювання тестів з відкритими питаннями з можливостями ведення обліку робіт студентів, призначених завдань, управління курсами.
Розроблено систему автоматичного оцінювання відповідей Sigma School, яка дозволяє проводити тестування, а також вести облік робіт студентів та завдань.
Описано проблему оцінювання відкритих питань та можливості використання засобів штучного інтелекту для її розвʼязання, проведено аналіз існуючих методів для аналізу тексту, впроваджено систему, яка інтегрується з GPT для отримання автоматичного оцінювання й порівняно її з існуючими конкурентами згідно функціоналу, який вони вміщують.
На момент розробки система Sigma School готова до використання в реальному навчальному процесі і містить в собі функціонал для ведення обліку студентів, їх робіт й завдань.
Даний сервіс вміщує достатню кількість характеристик, які відрізняють його від існуючих конкурентів і привнесуть неоціненну користь в освітній процес.
Автоматичне оцінювання пришвидшить процес перевірки й оптимізує навчальний час, що дозволить виділити його на більш критичні й важливі аспекти.
Зʼясовано, що точність оцінювання напряму залежить від моделі, що використовується. Модель GPT-4, що була використана в реалізованій системі, суттєво відрізняється від свого попередника GPT-3 якістю роботи та кількістю доступних параметрів. З розвитком технологій ШІ вона може бути легко замінена іншою версією GPT, що покращить якість аналізу відповідей.
Зроблено висновки, що деякі можливості можуть бути додані в систему для більш зручного та універсального використання. Потенційні доповнення були описані в ході порівняння з конкуруючими системами і можуть бути розглянуті при подальшому розвитку системи. Одне з основних нововведень полягає у проведенні тестувань з математичних дисциплін, які включають формули і символи.

Ключові слова : аналіз тексту, база даних, клієнт-серверна архітектура, курс, оцінювання відкритих відповідей, предмет, розпізнавання мовлення, штучний інтелект.

Грищенко К. Розробка системи для автоматичного оцінювання тестів з відкритими питаннями : кваліфікаційна робота … бакалавра : 122 Комп’ютерні науки / Грищенко Ксенія. – Київ, 2023. – 59 с.