Feedback improvement in automatic program evaluation systems

LTAutomatinio vertinimo sistemos yra populiarus įrankis studentų ir mokinių parašytų programų vertinimui. Šis vertinimo metodas naudojamas vrtualiose mokymo terpėse, egzaminų vertinimui, programavimo varžybose. Tačiau taikant šias sistemas iškyla problemų – mokiniams nebūna aišku, kodėl jie prarado taškus, taip pat iškyla problemų ieškant galimų klaidų. Autorius siūlo nesunkiai diegiamą patobulinimą, tinkamą daugeliui sistemų, besiremiančių juodosios dėžės principu. Šis patobulinimas turėtų palengvinti užduočių parengimą automatinei vertinimo sistemai. Taip pat tai gali padėti mokiniams suprasti jų padarytas klaidas.

ENAutomatic program evaluation is a way to assess source program files. These techniques are used in learning management environments, programming exams and contest systems. However, use of automated program evaluation encounters problems: some evaluations are not clear for the students and the system messages do not show reasons for lost points. The author proposes several ideas for possible improvements in black box testing, which can lead into better service for the users of automatic evaluation systems.