Технология тестирования

Вид материалаДокументы

Содержание


Указатель на учебные материалы.
Свободные ответы.
Общая оценка.
Подобный материал:
Технология тестирования


Специфика педагогической технологии состоит в том, что в ней учебный процесс должен гарантировать достижение поставленных целей. Основой гарантии результата обучения является оперативная обратная связь, которая охватывает весь учебный процесс. В ходе изучения учебного материала необходима оценка текущих результатов и коррекция обучения, направленная на достижение поставленных целей. При этом цели обучения формулируются через результаты обучения, выраженные в действиях учащихся, причем таких, которые преподаватель, тьютор или какой-либо другой эксперт (в том числе и компьютерная программа) могут надежно опознать. А для этого, в свою очередь, необходим анализ содержательной информации, предлагаемой обучающимся для усвоения, то есть количественное измерение и качественное описание содержания учебного материала. Эта проблема решается двумя основными путями: 
    • построением четкой системы целей, внутри которой выделены их категории и последовательные уровни (иерархия);- такие системы получили название педагогических таксономий (от греческого taxis - расположение по порядку и nomos - закон)
    • созданием максимально ясного, конкретного языка для описания целей обучения, на который преподаватель может перевести недостаточно ясные формулировки.

Тестовый контроль отличается от других методов контроля (устные и письменные экзамены, зачеты, контрольные работы и т.п.) тем, что он представляет собой специально подготовленный контрольный набор заданий, позволяющий надежно и адекватно количественно оценить знания обучающихся посредством статистических методов. Все вышеуказанные преимущества тестового контроля могут быть достигнуты лишь при использовании теории педагогических тестов, которая сложилась на стыке педагогики, психологии и математической статистики. Основными достоинствами применения тестового контроля являются: 
    • объективность результатов проверки, так как наличие заранее определенного эталона ответа (ответов) каждый раз приводит к одному и тому же результату
    • повышение эффективности контролирующей деятельности со стороны преподавателя за счет увеличения её частоты и регулярности
    • возможность автоматизации проверки знаний учащихся, в том числе с использованием компьютеров
    • возможность использования в системах дистанционного образования.

Тест – инструмент, состоящий из системы тестовых заданий с описанными системами обработки и оценки результата, стандартной процедуры проведения и процедуры для измерения качеств и свойств личности, изменение которых возможно в процессе систематического обучения. При использовании объектно-ориентированного подхода любой объект изучения может быть описан определенной совокупностью знаний о нем. Эти знания отражают непосредственные факты, связи между объектами, законы, теории или включают методологические или оценочные знания (свойства, методы, события и состояния объектов). В зависимости от целей обучения и начального уровня подготовки одни и те же знания могут изучаться с различной полнотой, глубиной, обобщенностью, осознанностью и т. д. Эти качества знаний могут служить целями обучения. Преподаватель, анализируя задачи занятия, специфику своей дисциплины, конкретную тему, ставит определенную цель, формирует те или иные качества знаний. В одних случаях обучающемуся необходимо получить полные и глубокие знания о предмете, явлении, в другом - планируется лишь знакомство его с определёнными фактами. Часто студенту требуется освоить лишь небольшой объем информации, но уметь применять свои знания на практике. Руководством к выбору целей обучения является раскрытие содержания качеств знания.Для того чтобы тесты могли выявлять достижение учащимися одного из уровней усвоения в процессе обучения, сами тесты должны быть разработаны с учетом названных исходных положений и отвечать определенным требованиям: 
    • соответствие теста содержанию и объему полученной обучающимся информации
    • соответствие теста контролируемому уровню усвоения
    • определенность теста
    • простота теста
    • однозначность теста
    • надежность теста.

Последовательность подготовки заданий для тестового контроля включает в себя следующие этапы:

1. Составление графа и спецификации учебных элементов по выбранной дисциплине или теме.

2. Определение объектов контроля и выделение учебных элементов, по которым будут составлены тесты.

3. Составление тестов в первом (рабочем) варианте. 

4. Экспертно-редакционная проверка и корректировка тестов.

5. Экспериментальная проверка. 

6. Анализ результатов экспериментальной проверки и корректировка заданий и эталонов. 

Можно выделить две основные цели использования тестирования в процессе обучения:

- оценка успехов обучаемого;

- помощь в обучении.

Кроме этого есть и вспомогательные цели:

- оценка эффективности обучения;

- стимулирование преподавателя к размышлениям над процессом обучения и учебным материалом:

- обучаемые провоцируются к размышлениям и действиям;

- поощрение обучаемых к тому, чтобы задавать вопросы по теме обучения;

- создание дополнительной мотивации для обучению.

Преимущества использования онлайновых систем тестирования:

- экономия времени: система тестов на основе web-технологий легко тиражируется, результаты тестирования легко доступны;

- сокращение времени реализации обратной связи: обработка результатов простых форм тестирования может быть выполнена компьютером много быстрее, чем преподавателем-человеком, а средства компьютерной коммуникации позволяют обучаемому быстро получить готовые результаты, то есть обратная связь реализуется практически в режиме "реального времени";

- уменьшение требуемых ресурсов: основной критичный ресурс в преподавании - время, затрачиваемое преподавателем, - резко сокращается при использовании компьютеризованной системы проверки тестов;

- упрощение ведения протокола тестирования: использование компьютера позволяет хранить больше протоколов тестирования, находить нужные много быстрее и осуществлять поиск по гораздо более сложным критериям, чем при работе с "бумажными" аналогами;

- большее удобство в доступе: учащиеся могут получить доступ к системе тестирования в любое удобное для них время и (при необходимости) любое количество раз;

Форму тестирования можно также использовать:
  • в качестве пропускного механизма;
  • в качестве указателя на учебные ресурсы;
  • для тренировки.

Пропускной механизм.

Тест используется для того, чтобы убедиться, что обучаемый достиг определенного уровня знаний перед тем, как перейти к изучению следующей части курса. Такой вариант использования теста иногда называют "привратником". Опасности, которые сопровождают использования теста-"привратника":

- ситуация может восприниматься обучаемым как игра, чья единственная цель - получить "ключ";

- обучаемые могут передавать "ключ" друг другу.

Чтобы избежать этого, необходимо тщательно разъяснять обучаемым "философию" использования "привратников"

Указатель на учебные материалы.

Обучаемый, давший неправильные ответы, может быть направлен на соответствующую часть учебных материалов, используемую в качестве подсказки.

При всех удобствах такой формы обучения, как компьютерные тесты, необходимо сознавать ее ограниченность - с ее помощью можно формировать только простейшие навыки, основанные на запоминании некоторого набора фактов, для формирования навыков творческого использования полученных знаний необходимо применять другие формы обучения.

Опасности, связанные с интенсивным использованием компьютеризированных тестов:

- формирование ложных целей: чрезмерное использование компьютеризированных тестов без использования в качестве противовеса традиционных методов проверки (например с произвольным ответом, проверяемым преподавателем) может поощрять обучаемых к слишком поверхностному изучению материала и может создать у обучаемого впечатление, что простое запоминание ("зубрежка") - это все, что требуется при обучении.

- безличность: обучаемый может начать чувствовать себя слишком изолированно и ощущать себя "покинутым", слишком долго общаясь только с компьютером. Один из методов решения этой проблемы - включать в каждый тест имя и координаты человека, с которым он может пообщаться в случае возникших трудностей.

- чрезмерное тестирование: использование слишком большого числа тестов может привести к тому, что обучаемые будут избегать системы самотестирования, считая ее значимость слишком низкой.

- формирование ложной самоуверенности: если требования для успешного прохождения тестов сильно занижены, это может создавать у обучаемых ложную самоуверенность. Кроме того при самостоятельном прохождении автоматизированных тестов всегда есть возможность заглянуть в учебный материал или попытаться получить правильные ответы "наугад".

- поощрения "угадывания", что в итоге также ведет к формированию ложной самоуверенности.

- способ задавать вопросы и получать ответы может быть ограничен программным обеспечением: скажем оно может позволять только "выбор из варианта" или "ответ в одно слово", что в итоге может создать перекосы в стиле обучения.

Можно обозначить три основных метода оценки знаний: "викторина" (ответы в краткой форме), свободные ответы (развернутые ответы в относительно произвольной форме) и общая оценка.

"Викторина"

Короткое задание, реализованное в форме, позволяющей обучаемому дать короткий однозначный ответ - в виде выбора одного из предложенных вариантов или написания одного-нескольких слов. Как правило реализуется в виде некоей формы (скажем "формы" в смысле html, показываемой в окне браузера) с вопросами и местами, где обучаемый может разместить свои ответы. Заполнив форму, обучаемый нажимает кнопку, подтверждая, что ответы в заполненной форме он считает правильными. После этого обучаемому демонстрируются результаты теста. Важной особенностью этой формы тестирования является возможность "автоматической" проверки ответов, выполняемой компьютерной программой (либо на машине пользователя, либо на отдельном сервере).

Этот тест предоставляет простой и быстрый механизм для проверки знаний обучаемого. Это важно не только для преподавателя, но и для обучаемого, который может получить представление о своих способностях и продвижении в изучении материала.

Дополнительные преимущества этой формы тестирования:

- практически мгновенная обратная связь для обучаемого;

- попытки могут повторятся многократно, особенно если учесть предыдущий пункт;

- форма, реализующая тест, может содержать подсказки, предназначенные помочь обучаемому определить проблемные области.

Форма подачи вопросов может быть следующей:

- по одному;

- все на одной странице;

- в виде карт изображений.

Конкретные формы, которые может принимать «викторина»:
  • выбор одного варианта из нескольких;
  • выбор нескольких правильных вариантов из нескольких (выбор любого правильного ответа считается правильным ответом);
  • выбор нескольких правильных вариантов из нескольких (правильным ответом считается выбор всех правильных вариантов);
  • свободный ответ;
  • матричный тест (тест соответствия).

Обратная связь является очень важным фактором при использовании компьютеризированных тестов. Есть несколько способов обеспечить обратную связь после проверки теста:

- проверяющая программа может показать, были ли ответы обучаемого правильными или нет. Такой способ может быть дополнен подсказками в случае неправильного ответа, причем для каждого варианта своей. В качестве подсказки можно даже просто показать правильный ответ ;

- можно дать "слепую" оценку, скажем количество правильных ответов, или процент правильных ответов от общего числа вопросов. Это позволяет избежать ответы "методом исключения" или "наугад";

- можно показать обучаемому правильный ответ, если он назвал неправильный. Это позволяет избежать фрустрации в случае, если попался слишком сложный ответ.

Приемы и факторы, способствующие удачному применению тестов:

- важно выбрать правильный уровень сложности теста - слишком легкий способствует созданию чувства ложной самоуверенности, слишком сложный будет формировать чувство фрустрации, что может подавить интерес к дальнейшему обучению

- в тест нужно добавлять ссылки на учебные ресурсы, соответствующие вопросам теста;

- обучаемый должен быть обеспечен контактной информацией о преподавателе, чтобы была возможность задать вопрос живому человеку;

- вопросы теста должны быть увязаны с целями занятия (каждое занятие обычно имеет конкретные частные цели, достижение которых обеспечивает продвижение к цели всего курса);

- необходимо обеспечить интересность, стимулирование и мотивацию;

- тесты должны быть легкими в использовании, учащиеся должны понимать, как пользоваться тестом;

- тестирование нужно проводить достаточно часто, чтобы учащиеся "не теряли форму"

Свободные ответы.

Эта форма тестирования позволяет обучаемым продемонстрировать степень владения темой и ее приложениями, способности решать связанные с ней задачи, оригинальность мышления, тогда как простые тесты в общем случае удобны только для оценки ограниченного набора учебных достижений, таких как владение некоторым набором фактов и не позволяют определить, связан неправильный ответ учащегося с простым незнанием (и в результате этого - ответом наугад) или с ошибками в рассуждении.

Основой проблем, возникающих при использовании этой формы проверки знаний являются трудности с формализацией процедуры проверки, что приводит к большой ее трудоемкости (проверять должен человек). Отсюда - необходимость ограничивать область проверки отдельными частями курса.

Формы использования:

Составляется из вопросов, которые требуют от обучаемых решения одной или нескольких из следующих задач:

- написать обобщающие заметки;

- написать список;

- выбрать соответствия из списка;

- рассортировать предметы по категориям;

- создать или интерпретировать диаграмму.

Общая оценка.

Можно использовать следующие методы оценки:

- оценку соучеников;

- самооценку;

- наблюдение за поведением (во время дискуссий или других форм активности);

- оценка по итогам общения "один-на-один" (используя возможности онлайновой коммуникации);

- оценка активности доступа к онлайновым материалам (по протоколам сервера);

- оценка по уровню вовлеченности в обсуждения;

- оценка уровня помощи, оказываемой соученикам.

Из этих трех форм наиболее удобной для использования в компьютеризированном обучении является первая («викторина»), что и объясняет ее распространенность. Собственно, то, что в русском языке обозначается словом "тестирование", как раз и подразумевают эту форму оценки знаний.