Сертификация педагогических тестовых материалов

Центр сертификации качества педагогических тестовых материалов

Общие сведения
Федеральный реестр сертифицированных ПТМ
Сертификационные уровни и цели разработки ПТМ
Порядок проведения работ по сертификации
Требования к качеству ПТМ
Что необходимо для сертификации ПТМ?

Общие сведения

Приказом Министерства образования Российской Федерации № 1122 от 17.04.2000 "О сертификации качества педагогических тестовых материалов" была образована система добровольной сертификации педагогических тестовых материалов на базе Исследовательского центра проблем качества подготовки специалистов Московского института стали и сплавов (технологического университета). По окончанию работ по разработке и апробации методического и технологического обеспечения процедуры сертификации Система добровольной сертификации педагогических тестовых материалов была зарегистрирована в реестре Федерального агентства по техническому регулированию и метрологии (регистрационный № РОСС RU.B154.04TM00).

Объектами сертификации являются:

• совокупности тестовых заданий, объединенные в варианты тестов и используемые для оценки знаний обучающихся;
• компьютеризованные банки тестовых заданий;
• совокупности тестовых методик, объединенные в технологии;
• программно-инструментальные средства для генерации и предъявления традиционных и адаптивных тестов;
• программные средства для математико-статистической обработки данных тестирования;
• сопроводительные материалы, включающие спецификацию теста для бланковой или компьютерной формы представления, описание метода генерации варианта традиционного или адаптивного теста из банка данных, описание системы оценивания, включающее ключи правильных ответов, критерии или нормы оценивания, шкалы, описание процедур предъявления теста, проверки результатов тестирования и сообщения результатов испытуемым, а также другая продукция, относящаяся к категории педагогических тестовых материалов.

Система добровольной сертификации функционирует в рамках Центра сертификации качества педагогических тестовых материалов, который оказывает услуги по сертификации качества ПТМ, а также о внесении информации в реестр сертифицированных ПТМ, с целью предоставления заинтересованным лицам соответствующей информации об авторах и характеристиках ПТМ.

В работе Центра сертификации используются наиболее современные методики, основанные на международном опыте оценки качества педагогических тестовых материалов, в том числе, таких как стандарты IMS QTI и нормативные документы национальных систем тестирования, вроде ETS.

Таким образом, разработчики ПТМ получают возможность подтверждения качества своих материалов и используемых технологий сертификатом качества ПТМ, который обеспечивается опытом специалистов Центра сертификации. При этом, широкий круг потребителей, таких как учебные заведения и тренинговые компании, имеют возможность получить информацию о существовании ПТМ по интересующей их тематике и об авторах данных ПТМ из Федерального реестра сертифицированных ПТМ.

Федеральный реестр сертифицированных ПТМ

Реестр сертифицированных педагогических тестовых материалов представляет собой специализированную базу знаний, содержащую информацию о сертифицированных ПТМ, такую как характер оценочных материалов (например, наименование и количество тестовых заданий), и контактную информацию о разработчиках данных ПТМ. При этом обеспечивается сохранение авторских прав на сами педагогические тестовые материалы, поскольку реестр содержит материалы только информационного характера, согласованные с разработчиками ПТМ.

Ни при каких обстоятельствах сторонние пользователи не могут получить информацию о содержании сертифицированных ПТМ (такую как тексты заданий) и рабочие материалы экспертизы. В исключительных случаях, разработчики ПТМ могут просить руководство Центра сертификации разместить в реестре заключение экспертной комиссии по результатам сертификации ПТМ исключительно с рекламными целями. В таком случае, Центр сертификации принимает решение о целесообразности размещения подобной информации и снимает с себя ответственность за эффективность подобной рекламной акции.

Сертификационные уровни и цели разработки ПТМ

В зависимости от планируемой области применения, может быть определен класс требований, на соответствие которым проверяются разработанные ПТМ. С повышением сертификационного уровня повышается жесткость требований к качеству, предъявляемых к представленным материалам, а также дополняется список информации, необходимой для проведения работ по сертификации.

Так, например, для педагогических тестов в бланковой форме определены четыре области применения. Это входной, текущий, итоговый рубежный и итоговый аттестационный виды контроля. В зависимости от этого, а также от потребностей Заказчика в обеспечении базового либо повышенного уровня качества тестовых материалов, может выполняться экспертиза содержания, форм и статистических характеристик по соответствующим критериям. Если для какого либо сертификационного уровня не требуется предоставления специальной информации, например, статистических данных с результатами апробации, то данная информация может не включаться в комплект материалов, предоставляемых Заказчиком.

Подробнее перечень необходимой документации уточняется при согласовании объема работ при заключении договора на проведение работ по сертификации.

Порядок проведения работ по сертификации

Процедура сертификации ПТМ состоит из трех этапов:

На первом, подготовительном этапе, Заказчик (разработчик ПТМ) и Центр сертификации согласовывают все условия, необходимые для проведения работ по сертификации. Данный этап начинается с заполнения и высылки в адрес Исследовательского центра заявки на сертификацию и информационной карты сертифицируемых ПТМ. В рамках предварительного этапа производится согласование объема и стоимости работ, а также дополнительных условий. Первый этап завершается подписанием договора на проведение работ по сертификации, предоставлением Заказчиком необходимых материалов для сертификации и оплатой работ по сертификации.

Второй этап включает в себя работу экспертной комиссии и подготовку заключения по результатам экспертизы. По результатам экспертизы качества ПТМ Центром сертификации выносится решение о выдаче сертификата качества ПТМ, либо о выдаче свидетельства о несоответствии ПТМ требованиям к качеству ПТМ. По согласованию с Заказчиком, в рамках дополнительного соглашения, могут быть подготовлены содержательные рекомендации по доведению характеристик ПТМ на необходимый уровень.

Третий этап является заключительным, на котором Центр сертификации качества ПТМ выдает сертификат качества ПТМ или свидетельство о несоответствии ПТМ требованиям к качеству ПТМ. В случае положительного решения, по согласованию с Заказчиком, информация о сертифицированных ПТМ вносится в Федеральный реестр сертифицированных ПТМ.

Требования к качеству ПТМ

В соответствии с международными нормами и подходами к разработке и оценке педагогических тестовых материалов, были сформулированы требования к качеству ПТМ. Помимо критериев соответствия сертифицируемых материалов нормативным документам Министерства образования и науки (таким как государственные образовательные стандарты), требования к качеству ПТМ, в частности, содержат "требования к качеству содержания", "требования к формам заданий", "требования стандартизации процедуры проверки выполнения заданий со свободно конструируемыми ответами", "требования к статистическим характеристикам тестовых заданий", "требования к статистическим характеристикам ПТМ (теста в целом)", "требования к характеристикам заданий компьютерного банка ПТМ, структуре банка и технологии компьютерной генерации вариантов ПТМ" и другие.

Что необходимо для сертификации ПТМ?

Для инициации процедуры сертификации разработчику ПТМ необходимо оформить и выслать в адрес Исследовательского центра проблем качества подготовки специалистов заявку на сертификацию и информационную карту сертифицируемых ПТМ. Указанные документы высылаются на адрес: 105318, Москва, Измайловское шоссе, д.4, ИЦПКПС. Для ускорения процедуры, копии документов могут быть высланы по факсу (095) 369 58 13 или электронной почте cs@rc.edu.ru. В заявке должна обязательно присутствовать контактная информация о заявителе, для осуществления обратной связи. После получения документов сотрудник Центра сертификации свяжется с Вами для согласования объема работ и обсуждения перечня необходимых для процедуры сертификации материалов. Более подробно порядок проведения работ по сертификации описан в соответствующем разделе.