Делегеоз Е.Г.,

канд. истор. наук,

доцент кафедры «Правоведение», ИрГУПС

Педагогическое тестирование в процессе обучения

Тестирование - целенаправленное, одинаковое для всех испытуемых обследование, проводимое в строго контролируемых условиях, позволяющее объективно измерять изучаемые характеристики педагогического процесса. От других способов обследования тестирование отличается точностью, простотой, доступностью, возможностью автоматизации.

Обычно тестирование как метод исследования сливается с практическим тестированием текущей успеваемости, выявлением уровня обученности, контролем качества усвоения учебного материала.

Широкому распространению, развитию и совершенствованию тестов способствует целый ряд преимуществ, которые дает этот метод. Тесты позволяют дать оценку студента в соответствии с поставленной целью исследования; обеспечивают возможность получения количественной оценки на основе квантификации качественных параметров личности и удобства математической обработки; являются относительно оперативным способом оценки большого числа лиц; способствуют объективности оценок, не зависящих от субъективных установок лица, проводящего исследование; обеспечивают сопоставимость информации, полученной разными исследователями на разных испытуемых.

Тесты классифицируются по разным признакам.

По виду свойств личности они делятся на тесты достижений (тесты интеллекта, школьной успеваемости, тесты на творчество, тесты на способности) и личностные (тесты на установки, на интересы, на темперамент, характерологические тесты, мотивационные тесты). По виду инструкции и способу применения различаются индивидуальные и групповые тесты. По формальной структуре различаются тесты простые, т.е. элементарные, результатом которых может быть единственный ответ, и тесты сложные, состоящие из отдельных подтестов, по каждому из которых должна быть дана оценка. При этом могут высчитываться и общие оценки.

Тесты обученности — это одна из разновидностей психологических и педагогических испытаний для диагностирования различных сторон развития и формирования личности. Если в основу классификации тестов положить различные аспекты (компоненты) развития и формирования человеческих качеств, то она будет выглядеть следующим образом:

1. Тесты общих умственных способностей, умственного развития.

2. Тесты специальных способностей в различных областях деятельности.

3. Тесты обученности, успеваемости, академических достижений.

4. Тесты для определения отдельных качеств (черт) личности (памяти, мышления, характера и др.).

5. Тесты для определения уровня воспитанности (сформированное™ общечеловеческих, нравственных, социальных и других качеств).

В последнее время все большее распространение получают критериально-ориентированные тесты, позволяющие оценивать испытуемого не в сопоставлении со среднестатистическими данными группы (потока), а по отношению к заранее заданной норме. Критерием оценки в таких тестах является степень приближения результата тестирования студента к так называемой «идеальной норме».

Применение тех или иных тестов будет наиболее эффективным и обеспечит надежные выводы лишь при условии правильного их сочетания со всеми другими группами тестов. Поэтому тестовые испытания всегда имеют комплексный характер. Делать общие выводы, например, об уровне развития обучаемых на основе применения лишь тестов обученности было бы непростительной ошибкой. Когда ставится задача диагностирования обученности в связи с достижениями и развитием личности, нужно применять соответствующие виды тестовых заданий и предписанные им методики измерения, не забывая о локальном характере диагностирования.

Тестирование может осуществляться на всех этапах образовательного процесса. С его помощью эффективно обеспечивается предварительный, текущий, тематический и итоговый контроль знаний, умений, учет успеваемости, академических достижений.

Предварительный контроль. Успех изучения любой темы (раздела или курса) зависит от степени усвоения тех понятий, терминов, положений и т.д., которые изучались на предшествующих этапах обучения. Если информации об этом у педагога нет, то он лишен возможности проектирования и управления в учебном процессе, выбора оптимального его варианта. Необходимую информацию педагог получает, применяя пропедевтическое диагностирование, более известное педагогам как предварительный контроль (учет) знаний. Последний необходим еще и для того, чтобы зафиксировать (сделать срез) исходный уровень обученности. Сравнение исходного начального уровня обученности с конечным (достигнутым) позволяет измерять «прирост» знаний, степень сформированности умений и навыков, анализировать динамику и эффективность дидактического процесса, а также сделать объективные выводы о «вкладе» педагога в обученность студентов, эффективности педагогического труда, оценить мастерство (профессионализм) педагога. Если известны входные и выходные характеристики системы, проблемы ее оптимизации считаются во многом решенными.

Текущий контроль необходим для диагностирования хода учебно-воспитательного процесса, выявления динамики последнего, сопоставления реально достигнутых на отдельных этапах результатов с запроектированными. Кроме собственно прогностической функции текущий контроль и учет знаний, умений стимулирует учебный труд студентов, способствует своевременному определению пробелов в усвоении материала, повышению общей продуктивности учебного труда. После завершения работы обязательно анализируются допущенные обучаемыми ошибки. Для ускорения анализа используются образцовые тесты с правильными ответами, очень важно достичь при этом осознания каждым обучаемым причины возникновения ошибок. Если текущий контроль осуществляется с помощью автоматизированных устройств (ЭВМ, тренажеров, перфокарт и т.д.), то необходимо обратить внимание на предотвращение возможности запоминания неправильных ответов.

Тематический контроль. Составление тематического тестового задания требует кропотливого и тщательного труда. Ведь речь идет не просто о проверке усвоения отдельных элементов, а о понимании системы, объединяющей эти элементы. Значительную роль при этом играют синтетические, комплексные задания, объединяющие вопросы об отдельных понятиях темы, направленные на выявление информационных связей между ними.

Итоговый контроль осуществляется во время заключительного повторения в конце семестра и учебного года, а также в процессе экзаменов (зачетов). Именно на этом этапе образовательного процесса систематизируется и обобщается учебный материал. С высокой эффективностью могут быть применены соответствующим образом составленные тесты обученности. Главное требование к итоговым тестовым заданиям одно — они должны соответствовать уровню национального стандарта образования. Все большее распространение получают технологии итогового тестирования с применением компьютеров и специализированных программ.

Каждый тест, кроме набора заданий, включает в себя следующие компоненты:

1) стандартная инструкция для испытуемого о цели и правилах выполнения заданий,

2) ключ шкалирования - соотнесение пунктов заданий со шкалами измеряемых качеств, указывающее, какой пункт заданий к какой шкале относится,

3) кодировочный ключ, позволяющий подсчитать, сколько баллов вносит в шкалу тот или иной вариант ответа,

4) ключ интерпретации полученного индекса, представляющий собой данные нормы, с которыми соотносится полученный результат.

Традиционно нормой в тестологии являлись среднестатистические данные, полученные в результате предварительного тестирования на определенной группе лиц. Здесь необходимо учитывать, что переносить интерпретацию полученных результатов можно только на те группы студентов, которые по своим основным социокультурным и демографическим признакам аналогичны базовой.

В ходе разработки и внедрения тестов необходимо соблюдать следующие требования:

- строгая формализация всех этапов тестирования,

- стандартизация заданий и условий их выполнения,

- квантификация полученных результатов и их структурирование по заданной программе,

- интерпретации результатов на основе предварительно полученного распределения по изучаемому признаку.

Разработка теста состоит из четырех этапов:

- первый этап: развивается исходная концепция с формулировкой основных пунктов испытания или основных вопросов, носящих предварительный характер;

- второй этап: производится отбор предварительных пунктов испытания с из последующей селекцией и приведением к окончательному виду, осуществляется одновременно оценка по качественным критериям надежности и валидности;

- третий этап: тест проверяется повторно на той же самой группе (потоке) студентов;

- четвертый этап: подбирается по отношению к возрасту, уровню образования и другим признакам обучаемого контингента.

При разработке тестов важно, насколько они соответствуют запроектированным целям обучения, образования, развития обучаемых. Важнейшими критериями педагогических тестов являются действенность (валидность, показательность), надежность (вероятность, правильность), дифференцированность (различимость).

Действенность теста по своему содержанию близка к требованию полноты, всесторонности проверки, пропорционального представления всех элементов изучаемых знаний, умений. Термин «действенность» имеет, как минимум, два синонима — валидность (от англ. valid — имеющий значение, ценный) и показательность, представительность, трактуемые так же, как репрезентативность. Всегда имеется в виду, что составитель теста обязан тщательно изучить все разделы учебной программы, учебные книги, хорошо знать цель и конкретные задачи обучения. Лишь тогда он сможет составить тесты, которые будут действенными для определенной категории обучаемых.

Четкая и ясная постановка вопроса в пределах освоенных знаний — неотъемлемое условие действенности теста. Если тест выходит за пределы освоенного содержания или же не достигает этих пределов, превышает запроектированный уровень обучения, то он не будет действенным для тех обучаемых, которым он адресован. Усвоение гражданского права в юридических вузах нельзя диагностировать с помощью тех тестов, которые предназначены для технических вузов.

Действенность теста определяется статистическими методами. Величина 0,7—0,9 свидетельствует о высокой действенности педагогических тестов. Если же коэффициент корреляции достигает 0,45—0,55, то действенность теста считается удовлетворительной, при более низких значениях она считается неудовлетворительной.

Степень надежности характеризуется стабильностью, устойчивостью показателей при повторных измерениях с помощью того же теста или его равноценного заменителя. Количественно этот показатель характеризуется вероятностью достижения запроектированных результатов (правильностью значений). Грамотно составленные и апробированные педагогические тесты позволяют достичь коэффициента надежности 0,9. Установлено, что надежность теста повышается при увеличении количества тестовых заданий. Установлено также, что чем выше тематическое, содержательное разнообразие тестовых заданий, тем ниже надежность теста. Это следует понимать так: тест, нацеленный на проверку усвоения конкретной темы, всегда будет более надежным, чем тест, направленный на проверку всего раздела (курса), охватывающий значительное количество материала — закономерностей, концепций, фактов. Происходит это именно потому, что содержательное разнообразие последнего выше.

Надежность педагогических тестов зависит от трудности их выполнения. Трудность определяется по соотношению правильных и неправильных ответов на тестовые вопросы. Включение в состав тестов таких заданий, на которые все обучаемые отвечают правильно или же, наоборот, неправильно, резко снижает надежность теста в целом. Наибольшую практическую ценность имеют задания, на которые правильно отвечают 45—80% обучаемых.

Характеристика дифференцированности (различимости) связана с использованием таких тестов, где нужно выбирать правильный ответ из нескольких возможных альтернатив. Если, скажем, все студенты безошибочно находят правильный ответ на один вопрос и также дружно не могут ответить на другой, то это сигнал для совершенствования теста в целом. Его необходимо дифференцировать, сделать различимым. Иначе подобные задания не помогут отделить тех, кто усвоил материал на необходимом уровне, от тех, кто заданного уровня не достиг. Практически дифференцируют тесты по результатам статистического анализа, сравнивая результаты выполнения теста в целом с результатами выполнения отдельных заданий. Если коэффициент корреляции между ответами на конкретные задания и на тест в целом больше 0,5, то это свидетельствует о достаточной дифференцированности теста.

Показатель эффективности теста предполагает, что тест, обеспечивающий при прочих равных условиях большее количество ответов за единицу времени, считается более эффективным. Например, за 10 минут тестирования от студентов можно получить и 5, и 8, и 10 ответов при использовании различных методик составления тестовых заданий.

При подготовке материалов для тестового контроля необходимо придерживаться таких основных правил:

1. Нельзя включать ответы, неправильность которых на момент тестирования не может быть обоснована учащимися;

2. Неправильные ответы должны конструироваться на основе типичных ошибок и должны быть правдоподобными;

3. Правильные ответы среди всех предлагаемых ответов должны размещаться в случайном порядке;

4. Вопросы не должны повторять формулировок учебника;

5. Ответы на одни вопросы не должны быть подсказками для ответов на другие;

6. Вопросы не должны содержать «ловушек».

Однако педагогические тесты не лишены ряда недостатков. Одним из недостатков тестового метода контроля знаний студентов является то, что создание тестов, их унификация и анализ - это сложная, объемная и кропотливая работа. Чтобы довести тест до полной готовности к применению необходимо несколько лет собирать статистические данные, хотя бы с потоком студентов 100-120 человек.

Довольно часто встречается значительный субъективизм в формировании содержания самих тестов, в отборе и формулировке тестовых вопросов, многое также зависит от конкретной тестовой системы, от того, сколько времени отводится на контроль знаний, от структуры включенных в тестовое задание вопросов и т.д.

Но указанные недостатки педагогического тестирования не снижают целесообразности использования такой технологии в учебно-воспитательном процессе.

К достоинствам можно отнести следующее: большая объективность и, как следствие, большее позитивное стимулирующее воздействие на познавательную деятельность студента; исключается воздействие негативного влияния на результаты тестирования таких факторов как настроение, уровень квалификации и др. характеристики конкретного преподавателя; ориентированность на современные технические средства на использование в среде компьютерных (автоматизированных) обучающих систем; универсальность, охват всех стадий процесса обучения.

Кроме того, тестированный опрос многофункционален. Он позволяет быстрее понять, как дальше работать с данным студентом, а также помогает лектору скорректировать курс.

В итоге следует отметить, что использование с 1 курса тестирования студентов поможет объективно провести аттестацию вуза, которая проводится с целью установления соответствия содержания, уровня и качества подготовки выпускников требованиям государственных образовательных стандартов.

Систематическое проведение контрольных мероприятий с помощью составленных на высшем уровне инструментов тестового контроля позволяет ВУЗам формировать высококлассных специалистов в различных областях знаний, готовых применять накопленный багаж знаний в любую минуту.

Именно в таких специалистах и в настоящее время, и в будущем нуждается наша страна, чтобы с их помощью провести быстрое оздоровление экономики.

Список использованных источников

1. Айнштейн В.Г., Гольцова И.Г. Об адекватности экзаменационных оценок // Высшее образование в России. - №3. - 1993. - С. 40-42.

2. Аллахвердиева Д.Т. Опыт применения тестов для дидактической экспертизы обучения // Высшее образование в России. - №2. - 1993. - С. 102-104.

3. Антипенко Н.Ф. Информатика в инженерно-технических ВУЗах // Повышение эффективности учебно-воспитательного процесса: Новые идеи, формы, методы: Материалы научно-методической конференции. Омск, 23-27 марта 1998 г. - Омск: Изд-во СибАДИ, 1998. - 156 с.

4. Кирилкин А. Можно ли бороться со «шпаргализацией» // Высшее образование в России. - №2. - 1995. - С. 126-128.

5. Куклин В.Ж., Мешалкин В.И., Наводнов В.Г., Савельев Б.А. О компьютерной технологии оценки качества знаний // Высшее образование в России. - №3. - 1993. - С. 146-153.

6. Рогинский В.М. Азбука педагогического труда (Пособие для начинающего преподавателя технического вуза). - М.: Высш.шк., 1990. - 112 с.

7. Садовничий В.А. Компьютерная система проверки знаний студентов // Высшее образование в России. - №3. - 1994. - С. 20-26.

8. Смирнов С.Д. Педагогика и психология высшего образования: От деятельности к личности: Уч. пособие. - М.; 1995. - 271 с.

9. Тихомиров В., Рубин Ю., Самойлов В., Шевченко К. Информационные технологии для будущих экономистов // Высшее образование в России. №1. - 1999. - С. 113-116.

10. Тыркова Н.П. Методика преподавания теории вероятностей и математической статистики с использованием персональных компьютеров // Повышение эффективности учебно-воспитательного процесса: Новые идеи, формы, методы: Материалы научно-методической конференции. Омск, 23-27 марта 1998 г. - Омск: Изд-во СибАДИ, 1998. - 156 с.

11. Хубаев Г. О построении шкалы оценок в системах тестирования // Высшее образование в России. №1. - 1996. - С. 122-125.

12. Щапов А., Тихомирова Н., Ершиков С., Лобова Т. Тестовый контроль в системе рейтинга // Высшее образование в России. №3. - 1995. - С. 100-102.