Аннотация
В статье рассмотрено использование метода анализа иерархий для оценки согласованности в работе членов предметных комиссий ОГЭ и ЕГЭ в процессе проверки результатов выполнения заданий с развернутыми ответами. Данный метод является математическим инструментом системного подхода к сложным проблемам принятия решений. Он применяется во многих областях — от управления на межгосударственном уровне до решения отраслевых и частных проблем в бизнесе, промышленности, здравоохранении и образовании. Его использование для оценки согласованности в работе членов предметных комиссий ОГЭ и ЕГЭ в процессе проверки результатов выполнения заданий с развернутыми ответами обусловлено необходимостью разработки такого инструмента, который позволит максимально уменьшить субъективность как в формировании комиссий, так и в присвоении внутри них определенного статуса тем или иным экспертам. И в этом заключается его ключевая особенность, поскольку в преобладающем большинстве случаев подходы, направленные на решение аналогичных задач, опираются на результаты третьих проверок экзаменационных работ, выполненных старшими и ведущими экспертами, как на эталонные. Предложенный подход позволяет оценить работу каждого конкретного эксперта в пределах всей комиссии даже при условии, что эксперт осуществлял перекрестную проверку только лишь с некоторыми из ее членов. При этом значимым для оценки эффективности эксперта является не его статус, а присутствие или отсутствие расхождений в баллах, выставленных им за выполнение того или иного задания участником экзамена, с другими членами комиссии. В свою очередь, качество работы последних также индивидуально оценивается аналогичным образом уже при анализе их перекрестных проверок с другими группами экспертов. Предложенный способ применения метода анализа иерархий позволяет использовать результаты работы предметной комиссии ОГЭ или ЕГЭ в текущем году для модификации состава комиссии в следующем году с целью увеличения согласованности проверки экзаменационных работ экспертами.