Рассмотрены проблемы оценки качества результатов обучения при аттестации студентов в контексте компетентностного подхода. Изложены ключевые положения теории педагогических измерений. Раскрыты основные подходы к разработке измерителей. Проанализированы процессы разработки и сертификации аттестационных тестов. Представлены формы тестовых заданий. Освещены классический и современный подходы к анализу качества тестовых заданий и тестов. Дан словарь терминов.
Для студентов высших учебных заведений, обучающихся по специальности «Менеджмент организации». Может использоваться при подготовке кадров по широкому кругу педагогических специальностей, а также при повышении квалификации и переподготовке кадров образования. Представляет интерес для исследователей и специалистов в области тестирования.
Список сокращений
ЕГЭ – единый государственный экзамен
ИСО 9001 – международные стандарты
КИМ – контрольно-измерительные материалы
ППС – профессорско-преподавательский состав
ПТМ – педагогические тестовые материалы
Введение
В настоящем учебном пособии рассматриваются корректные подходы к оценке качества результатов образования в рамках компетентностного подхода. Оно содержит краткие теоретические и методические сведения о компетентностном подходе и измерениях в образовании, методики разработки аттестационных тестов, обзор возможностей инновационных измерителей и требования к их характеристикам, методики обработки и анализа данных тестирования.
В интересах краткости и доступности изложения в книге опущены темы, посвященные разработке междисциплинарных тестов, многомерному шкалированию, факторному анализу, современной теории тестов (Item Response Theory) и некоторые другие. Иными словами, в настоящем пособии не нашли отражения наиболее сложные методики аппарата педагогических измерений, которые используются профессионалами и необходимы для полноценной реализации компетентностного подхода к оценке качества результатов обучения. Поэтому изучение представленного в книге учебного материала можно и нужно рассматривать как важный, но лишь первый шаг в деле освоения практических умений оценивания компетенций студентов при их аттестации и внедрении компетентностного подхода в сферу высшего образования.
На содержание этой книги повлияли два обстоятельства, послужившие побудительным мотивом к ее появлению. Первое из них – это введение в высшей школе нового поколения федеральных государственных образовательных стандартов. А второе – отсутствие в нашей стране необходимого опыта педагогических измерений. И хотя статистическая теория обоснования качества тестовых оценок хорошо развита за рубежом, а в России вышло несколько учебных пособий на эту тему, создание тестов у нас по-прежнему обычно ведется интуитивно, без опоры на научные методы теории измерений.
Преподаватели посвящают немалое время разработке многочисленных контрольных заданий, имитирующих по форме тесты. Фактически же эти задания остаются обычными вопросами, поскольку их основные характеристики не опираются на доказательные количественные оценки. В первую очередь речь идет о количественных оценках валидности задания, числа оцениваемых переменных (размерности задания) и вклада ошибочного компонента по отдельным заданиям в общую ошибку измерения. Именно этим характеристикам и их оценкам на основе развернутого статического анализа данных измерений в настоящем учебном пособии уделяется большое внимание.
Разработка любого аттестационного теста требует обязательного обоснования релевантности его содержания переменной или переменным измерения, использования математико-статистических методов для проверки соответствия теста определенным критериям качества и анализа точности обеспечиваемых им оценок. Необходимость такого обоснования резко возрастает в связи с введением федеральных государственных образовательных стандартов третьего поколения, где требования к качеству результатов образования формулируются в виде набора общекультурных и профессиональных компетенций.
