Центра Федерации Интернет-образования Морев И. А. М 79 Образовательные информационные технологии. Часть Педагогические измерения: учебное пособие
| Вид материала | Учебное пособие |
- Центра Федерации Интернет-образования Боровкова Т. И., Морев И. А. М 79 Мониторинг, 2998.84kb.
- Центра Федерации Интернет-образования Боровкова Т. И., Морев И. А. М 79 Мониторинг, 2598.77kb.
- Учебное пособие для учащихся педагогических специальностей вузов и слушателей курсов, 2543.24kb.
- М. Н. Машкин Информационные технологии Учебное пособие, 2701.91kb.
- В. П. Дьяконов, А. Н. Черничин Новые информационные технологии Часть Основы и аппаратное, 2695.36kb.
- Учебное пособие Санкт-Петербург 2007 удк алексеева С. Ф., Большаков В. И. Информационные, 1372.56kb.
- О. В. Шатунова информационные технологии учебное пособие, 1418.45kb.
- Учебный мультимедийный комплекс «Основы физической культуры в вузе» (Электронное учебное, 5127.54kb.
- Сейчас почти ни у кого не возникает вопрос: "Зачем нам нужны информационные технологии?", 164.15kb.
- Информационные технологии управления, 3933.39kb.
ОИТ и менеджмент качества. Принцип непрерывного улучшения
Прогресс человечества пришел к необходимости систем менеджмента качества. Таких систем создано много. Описание такой системы представляет собой много томов, содержащих схемы предприятий, схемы руководства, перечни принципов, примерные инструкции и перечни обязанностей и пр. Это такой образец, что если, следуя ему устроить производство продукции, можно с большой вероятностью добиться успеха. Среди общепризнанных систем – ISO-9000. Один из принципов ISO-9000 – принцип непрерывного улучшения, согласно которому система менеджмента качества считается хорошей, если качество продукции растет.
В большинстве сфер человеческой деятельности с понятием качества и измерением качества проблем нет. Иное дело в образовании. Как показано в предыдущем разделе (Динамика результатов педагогических измерений), в педагогических измерениях нет места «надежности» в традиционном техническом понимании. Результаты тестирования не повторяются так, как это хотелось бы, например, инженеру, работающему с механизмами.
Результаты тестирования ЗУН, с той или иной степенью определенности, отражают состояние качества образования претендентов. Рост результатов тестирования ЗУН, если процесс тестирования не осложнен негативными артефактами, свидетельствуют о росте уровня качества.
Изменения результатов тестирований, проведенных с одним и тем же (возможно, вариативным) тестом, можно подразделить как общие и локальные. Под локальными изменениями можно понимать те, которые происходят при многократных тестированиях одной группы претендентов в рамках одной темы учебной дисциплины. Под общими изменениями можно понимать те, которые происходят при тестированиях разных групп претендентов, либо одной группы, но по разным темам. Локальные изменения характеризуют, скорее, личностные характеристики претендентов, а общие – учебный процесс. Положительные общие изменения свидетельствуют о росте качества учебного процесса.
Как показано в предыдущем разделе, стремление к «надежности» теста, редко приводит к результату, а «надежность», как численная характеристика теста, реально не используется в тестологических расчетах. Логично вместо «надежности» ввести в научный обиход характеристику, отражающую степень локальных изменений результатов тестирования. Поскольку рост образовательных результатов – это дидактическая цель, эту характеристику можно назвать «релевантность», понимая под этим названием степень соответствия дидактической цели.
В отличие от «надежности», измерить «релевантность» несложно. Например, как разность усредненных результатов последовательных сеансов тестирования одной и той же группы претендентов по двум вариантам одного теста в рамках одной технологии.
Положительная релевантность означает рост результатов, отсюда – связь с принципом непрерывного улучшения системы ISO-9000: тест, технология тестирования хороши в случае их положительной релевантности. Принцип «положительной релевантности» лучше характеризует тест и технологию тестирования, чем принцип «надежности».
Целесообразно применить термин «релевантность» не только к тесту, но и к технологии тестирования, и к технологии компьютерного обучения. Подробное рассмотрение возможности применения термина «релевантность» к технологии обучения (и тестирования) приведено в томе I настоящего пособия.
-
Каким быть компьютерному комплексу для обучения и контроля ЗУН?
Хотелось бы, чтобы не только хотелось...
Борис КРУТИЕР
Какими должны быть образовательные компьютерные комплексы, чтобы быть востребованными и удобными в пользовании для учителя, учащегося, управленца? Как сделать так, чтобы прохождение сеанса компьютерного тестирования вызывало у учащихся рост интереса к обучению и повышению качества своих знаний? Как «скрыть» от учащегося саму процедуру тестирования, снять атмосферу напряжения и волнения, сконцентрировав его на раскрытии творческих качеств и реализации знаний? Как устранить или свести до минимума возможности подлога, «списывания»?
Деловая компьютерная игра многими воспринимается как своеобразная панацея. Вероятно, что именно в этой области нужно искать пути построения сценариев компьютерного обучения и контроля ЗУН – привлекательных и вызывающих желание исследовать, учиться. Удачные попытки построения таких сценариев существуют. Можно привести в качестве примера известный сценарий и игру Сида Мейера «Цивилизация». Однако следует заметить, что такие игры обычно содержат довольно мало по-настоящему учебной информации и могут быть рассматриваемы лишь как основа для дальнейшей методической и сценарной работы.
К негативным последствиям таких игр можно отнести вероятную неправильную ориентацию игроков в реальных сочетаниях величин в реальной жизни: сколько должно быть тех или иных ресурсов, чтобы производство других развивалось таким-то образом.
Создание профессиональных компьютерных игр-тренажеров – вполне разработанная и освоенная специалистами область. Существуют прекрасные тренажеры и средства для их создания – конструкторские программные комплексы, банки реализаций. Вызывает сожаление, что это относится исключительно к специальным тренажерам – для летчиков, танкистов, судоводителей, автогонщиков. Рынок же тренажеров для учащихся общеобразовательных учебных заведений – компьютерных лабораторных работ и учебных практикумов – пока заполнен изделиями несравненно низшего качества. Они малоинформативны, однотипны, не вызывают интереса к обучению.
Если отладка – процесс удаления ошибок,
то программирование должно быть процессом их внесения.
Э. ДЕЙКСТРА (Артур Блох. Законы Мэрфи)
Разработкой и изготовлением компьютерных тестирующих комплексов в России занимаются, в основном, коллективы, базирующиеся при вузах. Среди таких вузов следует назвать МГУ, СПбГУ, НГУ, МФТИ, МИФИ, МЭСИ, ТГУ, ДВГУ и др. Как правило, коллективы состоят из физиков, математиков, инженеров-компьютерщиков. Педагоги либо психологи к сценарным работам практически не привлекаются.
Одним из счастливых исключений здесь является МГУ, где в таких разработках принимают активное участие преподаватели и студенты психологического факультета. Созданная ими система «Телетестинг» завоевала в 1997-2002 гг. в России огромную популярность. Скажем, в Приморском крае в 2000-2002 гг. любое компьютерное тестирование (какая бы организация его не проводила) родителями и учащимися однообразно нарекалось «телетестингом».
В качестве другого примера, приведем опыт разработчиков ДВГУ. Здесь с 1994 года ведутся научные и экспериментальные работы в области разработки компьютерных обучающих и тестирующих средств. В научных семинарах и работах здесь принимают участие сотрудники, студенты и преподаватели – физики, химики, математики, историки, юристы, педагоги, географы, экологи, филологи, экономисты. Создан ряд разновидностей компьютерных тестирующих комплексов, реализующих известные педагогические идеи, восходящие к Платону и Сократу.
Созданные в ДВГУ игровые тестирующие комплексы популярны в школах Приморского края. На их основе ежегодно проводится около пятидесяти Приморских краевых образовательных олимпиад, выпускные и переводные экзамены в школах, вступительные экзамены для абитуриентов ДВГУ. Созданный в ДВГУ в 1998 году компьютерный комплекс – деловая игра «Дидактор» является удачной попыткой реализации игровой концепции обучения и контроля. Работа с ним не утомительна, интерфейсы учащегося и преподавателя просты и понятны. Идея «Дидактора», заключающаяся в предложении не отвечать на вопросы, а оценивать ответы виртуальных учеников, привлекательна для учащихся. «Дидактор» предлагает учащемуся шпаргалки (развернутые ответы и пояснения) – в этом его обучающая функция. «Дидактор» умеет работать и на компакт-диске, и в Интернет.
Составлять учебные материалы для наполнения «Дидактора» проще, чем для многих известных комплексов. Для этого не нужно пользоваться дополнительными средствами. Файлы с наборами тестовых заданий полностью изготавливаются в формате RTF. Тестовые задания «Дидактора» – мультимедийные – это позволяет значительно расширить возможности обучения и тестирования. Все компоненты заданий могут содержать изображения, формулы, звуковые и видеофайлы. Комплект «Дидактор» содержит блок конвертации составленных так тестовых заданий в необходимую для использования форму.
В серии изготовленных в ДВГУ тренажеров – «Кроссворд», «Фракон» (конструктор фраз), «Файндер» (найди ошибку), «Диктант», «Вордик» (узнай слово), «Ковер-самолет», «Толмач» – использованы оригинальные, известные и переработанные сценарии. Тренажер–игра «Диалог» основан на идее вовлечения ученика в разговор между анимированными виртуальными персонажами. Контроль ЗУН и обучение происходят завуалировано, в процессе диалога. Интерес представляет процесс обучения на основе виртуальных диалогов представителей разных культур и времен (диалоги культур).
Широк круг дисциплин, материал которых послужил наполнением для вышеописанных изготовленных тренажеров – десятки школьных и более двухсот вузовских дисциплин.
Студенты ДВГУ с 1999 освоили компьютерное обучение и часто предпочитают проходить процесс обучения и контроля на компьютере, контактируя с преподавателем только на консультациях либо по электронной почте – это удобно, ведь многие учащиеся работают, многие одновременно получают два и три образования.
Некоторые студенты, рассматривающие качество обучения как особую ценность, высказали мнение, что избранная Открытым университетом форма контроля знаний (тренажер Дидактор) – лучшая из виденных ими, поскольку
- игра позволяет продлить период внимательной работы;
- демонстрация только одного варианта выполнения задания на экране делает невозможным пользование простым логическим сравнением для отгадывания;
- необходимость оценивания вариантов выполнения не по двузначной, а по четырехзначной шкале, заставляет глубже задуматься над учебным материалом.
Такого же мнения придерживаются и многие школьники и учителя.
Глава 03. Тестовые испытания и управление образовательными результатами
«В современных условиях – говорил на XXVI съезде КПСС товарищ Л. И. Брежнев, – многократно возрастает значение дисциплины, значение личной ответственности»
Материалы XXVI съезда КПСС, М.: 1981, с. 50.
Одна и та же группа учащихся, проходящая одну и ту же процедуру тестирования, может в разное время показать разные результаты. Это может быть связано и с постепенным привыканием учащихся к технологии, и с экологическими условиями, и с другими факторами, такими, например, как усиление или снижение мотивации под влиянием общения с педагогами или неконтролируемого общения со сверстниками.
Именно эта разность результатов часто не позволяет считать тот или иной комплекс надежным (согласно определению), не смотря на все его видимые достоинства. Это серьезное противоречие заставляет исследователей искать иные, нежели традиционно понимаемая надежность, критерии качества тестового комплекса.
Экологические и погодные условия вполне поддаются контролю. Поэтому их влияние на результаты тестирования может быть экспериментально измерено. Без особых усилий можно исключить влияние эффекта привыкания, проведя предварительно тренировки достаточной длительности.
Совсем другое дело с мотивацией. Мотивированные люди совершают невероятные действия, совершают подвиги, сдвигают горы. Люди, умеющие мотивировать себе подобных и знающие, как это делается, становятся известными и знаменитыми – организаторами производства, педагогами, миллионерами, тренерами команд, преступниками.
Результаты тестирования учащихся, не имеющих выраженной мотивации к повышению своего рейтинга, не выйдут за пределы области «наиболее вероятного» результата. Результаты тех же учащихся, но стремящихся получить приз, очевидно, улучшатся.
Мотивация может быть случайной. Мотивация может быть не только позитивной, но и негативной, например, она может быть связана с потребностью «выделиться» любым путем – скажем, получив по итогам тестирования наименьший в группе рейтинг.
Исключить влияние негативной и случайной мотивации можно только одним путем: дать учащимся новую, мощную, общую для всех мотивацию, которая способна «перебить» своим влиянием все остальные. Это не только исключит досадные случайности, но и приведет к достоверному получению самых «высших» результатов, на которые способны учащиеся.