Педагогические науки/4. Стратегические направления реформирования системы образования

Леонов Н.Н., Мезенцева А.С., Жуанышева С.М.

Северо-Казахстанский государственный университет им. М.Козыбаева, Казахстан

К ВОПРОСУ О ПРОЦЕДУРЕ СОЗДАНИЯ ТЕСТОВЫХ ЗАДАНИЙ ДЛЯ ОЦЕНИВАНИЯ УРОВНЯ КОМПЕТЕНЦИЙ СТУДЕНТОВ

На сегодняшний день казахстанская модель образования сводится к переходу на компетентностный подход, где главным атрибутом является понятие «компетенция». Под компетенцией выпускника высшего учебного заведения понимается способность применять знания, умения и личностные качества студентом для успешной деятельности (выполнения определенного класса социальных и профессиональных задач) [1].

Приоритетная ориентация компетентностного подхода опирается на следующие цели:

• обучаемость,

• самоопределение (самодетерминация),

• самоактуализация,

• социализация и развитие индивидуальности.

Использование принципа развития компетенций в образовательных программах, основанных на компетентностно-ориентированном подходе, позволит высшим учебным заведениям подготавливать высокопрофессиональные кадры и объективно оценивать результаты обучения: те или иные компетентностные способности студентов.

Проблема оценивания уровня компетентности студентов должным образом не стандартизирована. Не выработаны методы и модели такого оценивания, а это, несомненно, является очень важным аспектом для определения количественного уровня освоения студентами тех или иных компетенций.

В связи с этим возникает потребность в разработке эффективного инструментария для оценивания уровня полученных студентами компетенций в ходе изучения различных дисциплин. Целью такой разработки является определение числовых характеристик, показывающих уровень развития у студента тех или иных компетенций в зависимости от требований работодателей и требований к результатам освоения образовательных программ Республики Казахстан.

Оценка качества освоения государственных образовательных программ должна включать текущий контроль знаний, промежуточную аттестацию обучающихся и государственную (итоговую) аттестацию выпускников. Для аттестации обучающихся на соответствие их персональных достижений поэтапным требованиям соответствующей образовательной программы, для текущей и промежуточной аттестации создаются средства оценивания, позволяющие измерить уровень знаний, умений и освоенных компетенций.

На сегодняшний день широко развито использование в образовательных технологиях психодиагностического и педагогического тестирований.

Психологический тест – система тестовых заданий, позволяющих измерить уровень развития определенного психологического качества личности. Психологическое тестирование – метод психологической диагностики, использующий стандартизированные тесты, имеющие определенную шкалу значений.

Педагогическое тестирование – это специально разработанная научно оптимизированная аттестационная процедура, позволяющая максимально объективно оценивать уровень достижений человека и выражать эти возможности количественно [2].

Экспертное оценивание, еще один метод измерения компетенций. Применение экспертного оценивания позволяет получить наиболее полную информацию о тех компетенциях, для оценки которых невозможно использовать количественные показатели.

Стандартные алгоритмы теории экспертного оценивания включают определение показателя обобщенного мнения и степени согласованности мнений экспертов по каждому вопросу, а также выявление экспертов, высказавших оригинальные суждения.

Алгоритм экспертного оценивания можно описать следующим образом:

1. ранжирование тестовых заданий;

2. определение степени согласованности экспертов;

3. вычисление экспертных оценок;

4. реализация экспертных оценок в системе.

В рамках научного исследования на кафедре «Информационные системы» Северо-Казахстанского государственного университета имени Манаша Козыбаева разрабатывается проект по созданию системы оценивания уровня компетенций студентов при работе в реально-виртуальной лаборатории «Компьютерные сети», начавшей свое функционирование в феврале 2010 года.

Реально-виртуальная лаборатория «Компьютерные сети», которая включает в себя два комплекта оборудования: «Сетевая безопасность» и «Глобальные компьютерные сети», предоставляет студентам IT-специальностей уже сейчас получить навыки работы с реальным оборудованием. Оценить полученные при работе с учебными комплексами компетенции станет возможным при создании системы оценивания, включающей в себя непосредственно методику и программную оболочку для нее.

В процессе разработки методики оценивания уровня компетенций основным методом измерения полученных студентами компетенций стало педагогическое тестирование с использованием экспертной оценки и были использованы следующие подходы:

• преподаватели кафедры «Информационные системы» выступают в качестве экспертов при ранжировании тестовых вопросов;

• среди ответов на вопросы теста отсутствуют неправильные, каждый ответ обладает какой-то степенью правильности;

• для обработки результатов теста используется экспертное оценивание и статистические методы.

Ранжирование тестовых заданий осуществляется по трем уровням: низкий, средний и высокий. Эксперты в ходе анализа тестовой базы определяй к какой категории сложности относится тот или иной вопрос.

Признаками качественной оценки уровня компетенций являются [3]:

1. обоснованность – средства оценки должны оценивать именно ту деятельность или компетенцию, которая является целью обучения. Всем лицам, проводящим оценку, следует руководствоваться одинаковыми критериями;

2. достоверность – необходимо создавать одинаковые условия для оценки всем обучающимся: студентам надо обеспечить доступ к справочным источникам и информационным системам, а лица, проводящие оценку должны убедиться, что результат достигнут именно данным студентом, а не другим. Достоверность также означает проверку не механической памяти, а умений использовать знания в конкретных ситуациях трудовой деятельности;

3. применимость – соответствие методов оценки имеющимся ресурсам;

4. гибкость – оценка проводится по мере подготовленности обучающегося, когда он готов продемонстрировать освоенные компетенции.

В рамках системы качества образовательного учреждения результаты контроля должны анализироваться и использоваться для коррекции образовательных траекторий студентов и управления образовательным процессом в целом. Но при этом необходимо помнить о необходимости использовать качественный инструментарий и соблюдать основные требования к организации процедур контроля.

Анализ качества тестовых заданий для оценивания уровня компетенций студентов состоит из следующих этапов:

1. экспертиза содержательной части тестовых заданий;

2. определение статистических показателей качества заданий и вариантов теста в целом;

3. проведение пробного тестирования с описанием результатов.

Первый этап анализа качества тестовых заданий можно описать следующим образом. Каждый эксперт должен проконтролировать технологическое соответствие материалов требованиям к составлению тестовых заданий в различных формах, наличие четких инструкций по выполнению заданий и порядку выбора ответа.

Следующим этапом оценки качества теста является определение статистических показателей качества заданий и вариантов теста в целом. На этом этапе определяются трудности всех заданий, дифференцирование заданий, оценивается надежность измерений и другие характеристики в рамках классической или современной теорий тестирования. Только статистические исследования в комплексе с содержательным анализом позволяют определить качество вариантов и их параллельность по трудности.

После проведения статистики можно провести пробное тестирование с целью выявления ошибок и недочетов в тестовых заданиях, корректности предлагаемых вопросов и способности оценить реальный уровень знаний студентов.

Проведенные процедуры оценки качества тестовых материалов позволяют выявить несоответствующие заявленным содержательным и статистическим критериям задания и своевременно скорректировать их либо удалить из вариантов тестов.

Проблема оценки качества теста является комплексной, чем более полные исследования будут проводиться, тем более точными результатами оценки качества подготовки студентов будет располагать образовательное учреждение. А чем более объективными будут результаты оценивания студентов, тем точнее станут управленческие решения в рамках системы качества образовательного учреждения и, как следствие, – тем выше качество подготовки специалистов.

В результате реализации данной методики оценивание будет выполнять следующие расширенные функции:

• диагностическую;

• организационно-коррекционную;

• мотивационно-презентативную (классифицирующую);

• рефлексивно-оценочную (воспитывающую);

• аналитическую;

• прогнозирующую;

• агрегирующую;

• опережающую.

Внедрение модели оценивания профессиональных компетенций позволит осуществить объективное, валидное, ценностное, уровневое представление результатов профессиональной подготовки выпускников, т.е. уровня полученных компетенций, в соответствии с компетентностно-ориентированным подходом.

Литература

1. Пирская А.С. Методика планирования и оценивания сформированности пакета компетенций при итоговой государственной аттестации студентов. Санкт-Петербург, 2011. – 3 с.;

2. Берестнева, О. Г. Алгоритмическое и программное обеспечение информационной системы оценки компетентности студентов технического вуза. Томск, 2006. – 240–245 с.;

3. Полежаева М.В. Проблемы оценки общих и профессиональных компетенций в контексте перехода на федеральные государственные образовательные стандарты. Федеральный институт развития образования, Калуга, 2007. – 8 с.