Доктор пед. наук, профессор Симонов Валентин Петрович

Московский государственный областной университет (МГОУ), Россия

О ПРОБЛЕМЕ ДОСТОВЕРНОСТИ ТЕСТИРОВАНИЯ

В ОБРАЗОВАТЕЛЬНЫХ СИСТЕМАХ

Широчайшее распространение, которое получило за последние десяти-летия, в связи с введением ЕГЭ и ГИА в образование России тестирование, ак-туализировало проблему достоверности его результатов. Цель всякого тестиро-вания – осуществлять текущий или итоговый контроль хода и результатов об-разовательного процесса и вносить в него изменения, способствующие повы-шению качества общеобразовательной или специальной подготовки личности, т.е. – максимально достоверная оценка уровня и качества сформированных у неё знаний, умений и навыков (образовательных компетенций) в конкретной области, необходимых либо для дальнейшего обучения, либо для осуществле-ния какой-либо профессиональной деятельности. Анализ практики последних лет показывает, что чаще всего наблюдаются следующие недостатки при подготовке и проведении тестирования:

Во-вторых, большинство тестов с выборочным ответом «работают» на уровне «различения», «распознавания» (уровень «знакомства» по нашей кон-

цепции), что не позволяет говорить об обученности человека более чем на 4% от возможного, или такие тесты, когда надо, например, указать одну правиль-ную дату среди четырех-пяти предъявленных, ибо в этом случае проверяется лишь чисто механическое «запоминание» (обученность, в идеале, до 16%).

В-третьих, при предъявлении подобных тестов нарушается важнейший принцип проверки и оценки знаний – это принцип научности, суть которого заключается в том, что нельзя предъявлять для «запоминания» (а такое вполне может случиться особенно при текущем тестировании) неверные, антинаучные сведения. Ниже мы, не нарушая принцип научности при проверке и оценке степени обученности, приводим пример теста на нахождение одного непра-вильного среди других четырех правильных ответов, а также тест на соот-ветствие, который позволяет оценивать не «различение» и «распознавание», а «понимание» сути изученной теории, что и является вершиной такого понятия, как «знания». Вначале рассмотрим существующую классификацию тестовых заданий по их основным видам:

1. Тестовые задания открытого типа, где не используются готовые варианты ответов и которые формулируются в форме вопросов или выска-зывания, а тестируемым предлагается продолжить или вставить недостающую часть утверждения. Например, «Раздел педагогики занимающийся проб-лемами обучения называется …» (здесь надо дописать слово «дидактика»).

Достоинства данного вида тестирования в том, что здесь нет готового ответа, который тем самым лишает проверяемых возможности угадать пра-вильный ответ (думают сами). В этом случае проверяются такие показатели обученности как «ЗАПОМИНАНИЕ» или «ПОНИМАНИЕ» (максимальная оценка до «4» или «6» баллов соответственно, по 10-и балльной шкале). К не-достаткам здесь можно отнести краткие формулировки, которые трудно совместить с требуемой однозначностью системы «вопрос - ответ».

Задания этого типа проверяют умение самостоятельно сформулировать краткий ответ, который необходимо выразить соответствующей записью в ви-де слова (как в приведенном примере); или словосочетания (например, дис-танционное обучение); набора букв или цифр (например, 1380 – дата Ку-ликовской битвы). Их можно разделить на задания с кратким ответом (про-веряется «ЗАПОМИНАНИЕ», максимальная оценка до 4-х баллов) и с развер-нутым ответом, вторые являются заданиями более высокого уровня сложности (в этом случае проверяется уровень «ПОНИМАНИЕ» - максимальная оценка до 6 баллов по десятибалльной шкале). Включение таких заданий в тест повы-шает защищенность экзамена от возможности подсказок и угадывания.

Задания с развернутым ответом включают в себя:

- задания на перечисление признаков какого-либо явления, объектов одного класса и т.д. Например, «понятие «знания» включает в себя следующие составляющие…». (Надо дописать: различение (узнавание), запоминание и понимание). В этом случае проверяется показатель «ЗАПОМИНАНИЕ» (мак-симальная оценка до 4-х баллов, по 10-и балльной шкале);

- задания, требующие раскрытия какого-либо теоретического поло-жения (понятия) на конкретном примере. Например, «Дайте определение поня-тию «воспитание» в широком его толковании». Ответ: «Воспитание в широком значении подразумевает передачу опыта старших поколений подрастающему». Здесь проверяется такой показатель обученности как «ПОНИМАНИЕ», макси-мальная оценка в этом случае до «6» баллов по десятибалльной шкале;

- задания-задачи, содержащие условие в виде предписания: Решить уравнение 4х²=1. При таком виде задания проверяется, помимо «понимания» и уровень «элементарные умения и навыки». Или другой пример – «Вставьте недостающие буквы в слово «инт_лл_генция». В обоих случаях максимальная оценка до 8 баллов.

2. Тестовые задания закрытого типа, состоящие из основного текста, (может быть дополнен чертежами, графиками, рисунками и т.п.), и различных вариантов ответов. Это задания с выбором одного или нескольких ответов. По типу формулировки высказывательные или повелительные, они легко форму-лируются, а также легко понимаются испытуемыми. Основной недостаток – возможность угадывания ответа, к тому же в этом случае проверяется макси-мально только уровень «ЗАПОМИНАНИЕ» (оценка до «4-х» баллов), а чаще всего лишь «РАЗЛИЧЕНИЕ, РАСПОЗНАВАНИЕ» - т.е. уровень «ЗНАКОМ-СТВА», максимальная оценка до «2-х» баллов по 10-и балльной шкале.

Например: Какой из нижеуказанных способов привлечения внима-ния обучающихся в ходе занятий К.Д. Ушинский НЕ РАССМАТРИВАЛ?

а) усиление впечатления; б) прямое требование внимания;

в) наказание за невнимательность; г) занимательность преподавания;

д) меры против рассеянности. (Правильный ответ - позиция «в»).

Такое задание предпочтительнее, т.к. здесь не предъявляется для усвое-ния неправильное, т.е. – не нарушается принцип научности обучения (проверка знаний входит в понятие «обучение»).

3. Задания на установление соответствия (элементы одного множес-тва требуется поставить в соответствие элементам другого множества). Эти за-дания активизируют самостоятельную работу испытуемых, а также исключают

условия для списывания и позволяют проверить такой важный показатель обученности как «ПОНИМАНИЕ», т.е. осознанность имеющихся у обучаемого знаний – максимальная оценка до «6» баллов. Пример: Покажите соответ-ствие эффективности обучения применяемым методам и приемам:

а) до 20%; 1) наглядные методы обучения;

б) до 50% 2) практические методы обучения;

в) до 70%; 3) словесные методы обучения;

г) до 90%; 4) дискуссионность в ходе занятия.

(Ответы: а3, б1, в4, г2). Данное тестовое задание также носит обучающий характер и не нарушает принцип научности.

4. Задания на установление правильной последовательности (цель – формирование логического мышления, а также проверка степени сформиро-ванности осознанных знаний, т.е. «ПОНИМАНИЯ»). Пример: Определите последовательность этапов формирования знаний, умений и навыков.

1-й этап а) «запоминание»;

2-й этап б) «элементарные умения и навыки»;

3-й этап в) «понимание»;

4-й этап г) «перенос» (творческий уровень);

5-й этап д) «различение» (уровень знакомства).

Ответы: 1-й этап – д, 2-й этап – в, 3-й этап – а, 4-й этап – б, 5-й этап – г.

Рассмотрим важный Критерий качества содержания тестовых зада-ний, который подразумевает определенность педагогического измерения, т.е. тестовое задание должно быть четко направлено:

- на контроль степени усвоения теоретических знаний - «ЗАПОМИ-НАНИЯ» или «ПОНИМАНИЯ» - высшая характеристика понятия «знания»;

- на выявление степени готовности к практическим действиям («ЭЛЕ-МЕНТАРНЫЕ УМЕНИЯ И НАВЫКИ») – т.е. к реальному применению теории на практике в простейших (алгоритмизированных) ситуациях.

Творческий уровень (ПЕРЕНОС) с помощью тестирования, как показы-вает практика, проверить не удается, что ограничивает область применения и степень доверия к тестам. Выход здесь один – применять дополнительно традиционные проверочные работы: диктанты (в том числе математические, физические и пр.), изложения, сочинения, контрольные и устные собесе-дования в их традиционном виде и т.п.

Общая цель проверки определяет и содержание теста. Если, например, цель тестирования – отобрать определенное количество учащихся (студентов) на олимпиаду, то ясно, что необходимо составить тестовые задания повышен-

ной трудности, так как только с помощью подобных заданий можно отобрать лучших. Если стоит цель – оценить обучающихся во всем диапазоне знаний, то в тест включаются задания на проверку показателя «знания» и задания на проверку показателя «умения и навыки», т.е. - на уровне «запоминания», «понимания» и «элементарных умений и навыков» соответственно (примерное соотношение 20%-40%-40%). В основу данных рекомендаций положена наша пятиуровневая модель обученности личности и десятибалльная шкала оценки качества обучения в целом.

Шаблоны для обработки данных (а ещё лучше соответствующая компь-ютерная программа) и ключ к опроснику, позволяют произвести быструю об-работку результатов тестирования. Эту работу выполняют проверяющие, ПК или в определенных случаях – сами испытуемые (как элемент быстрой теку-щей проверки степени обученности в ходе занятий).

Главной целью при разработке тестирования по конкретной дисциплине является создание единой технологии, процедур и инструментария для более объективной и достоверной оценки учебных достижений обучающихся. Отсю-да следует, что необходима отработка по технологии тестирования, обеспечи-вающая его точность и надежность при наличии разных ограничений: времен-ных, социальных, организационных, технологических и т.п. Однако, самое главное – это определиться со шкалами измерения (порядковые и ранговые шкалы должны быть категорически исключены).

Многолетний опыт и практика показали, что можно также использовать наши «Критерии количественного подхода к оценке результатов тестирования на основе полностью положительной 10-и балльной шкалы», только при усло-вии отсутствия в тестах заданий (вопросов) на различение (распознавание):

1 балл - за 1-3% правильных ответов;

2 балла - за 4-8% правильных ответов;

3 балла - за 9-15% правильных ответов;

4 балла - за 16-24% правильных ответов;

5 баллов - за 25-35% правильных ответов;

6 баллов - за 36-48% правильных ответов;

7 баллов - за 49-63% правильных ответов;

8 баллов - за 64-80% правильных ответов;

9 баллов - за 81-99% правильных ответов;

10 баллов - за 100% правильных ответов.