Секция 4 Качество образования и методы его измерения
| Вид материала | Документы |
- Секция 5 Качество образования и методы его измерения, 4057.3kb.
- Лекция Экспериментальные методы измерения равновесной адсорбции, 296.24kb.
- Секция: Химия, 115.98kb.
- Доклад «Мониторинг учебной деятельности», 68.13kb.
- Методы измерения пэмин: cравнительный анализ, 113.37kb.
- Правила записи результатов измерений. Оценка погрешностей косвенных измерений, 33.24kb.
- Системный подход как основа качества профессионального образования, 59.36kb.
- Xix всероссийская конференция, 249.97kb.
- Гост 24846-81 "Грунты. Методы измерения деформаций оснований зданий и сооружений", 380.07kb.
- Государственный стандарт СССР гост 26824-86 "Здания и сооружения. Методы измерения, 205.34kb.
Grabovsky (agrabovs@ttk.ru)
Moskow
Abstract
With development of process of expansion on the modern external market of the Russian companies, including educational institutions, even more often there is a question on conformity to the international standards both production, produced by them, and companies itself.
The work considers main terms of ISO 9001-2000 international standard and some aspects of their application for Russian companies.
НЕКОТОРЫЕ ВОПРОСЫ ВНЕДРЕНИЯ СИСТЕМ МЕНЕДЖМЕНТА КАЧЕСТВА В СООТВЕТСТВИИ ТРЕБОВАНИЯМИ СТАНДАРТА ISO 9001-2000
Грабовский А.Е. (agrabovs@ttk.ru)
МЭСИ, г. Москва
С развитием процесса выхода на современный внешний рынок российских компаний, в том числе учебных заведений, все чаще встает вопрос о соответствии международным стандартам как выпускаемой ими продукции, так и самих компаний. В России нет традиции оценки систем менеджмента компаний-поставщиков или компаний-партнеров и зачастую требования иностранных инвесторов оказываются совершенно новыми для руководителей наших предприятий. Основным критерием оценки системы менеджмента предприятия можно считать стандарт TQM – Total Quality Management, но на практике чаще встречается условие соответствия компании требованиям стандарта ISO 9001:2000.
Стандарты ISO серии 9000 это в первую очередь перечни критериев для оценки поставщиков. ISO 9001:2000 предъявляет ряд требований к системе менеджмента качества предприятия и соответствие системы качества этим требованиям является основным признаком способности предприятия успешно оценивать и контролировать качество своей продукции. В России аналогами этих стандартов являются ГОСТ Р ИСО (в частности для ISO 9001:2000 – ГОСТ Р ИСО 9000-2001).
Внедрение системы менеджмента качества – стратегическое решение организации. Такая система – главный инструмент влияния на качество выпускаемой продукции, ее наличие и соответствие требованиям стандарта позволяет руководству быть уверенным в том, что качество управляемо.
Качество рассматривается как степень соответствия свойств продукции или услуги требованиям потребителя (как явно сформулированным, так и неосознанным). Качество определяет потребитель. Качество представляет собой относительное понятие, которое в большей степени определяется конкуренцией на рынке. Качество продукции или услуги может со временем значительно ухудшаться, если на рынок будет выпущена альтернативная продукция с лучшими характеристиками.
Ориентация на потребителя – еще одно из требований стандарта. Она подразумевает установление его желаний и нужд. Причем стандарт требует применения активных методов мониторинга удовлетворенности потребителя качеством продукции. Также требуется, чтобы велась работа по удовлетворению установленных требований и ожиданий потребителя. Ориентация на потребителя не означает что потребитель всегда прав. Тем не менее, предприятия должны слушать мнение потребителя и должны понять, почему он имеет такие ожидания и такие потребности.
Кроме того, жизненно важна для предприятия категория внутреннего потребителя. Деятельность предприятия должна рассматриваться как набор взаимосвязанных процессов. Каждый работник представляет внутри компании часть последовательности поставщик - потребитель. Кроме удовлетворения возможностей внешнего потребителя, необходимо удовлетворить также потребности и внутреннего.
Контроль качества при корректном управлении процессов должен осуществляться не только на стадии окончательной готовности, но и на выходе каждого из процессов предприятия. Попытки достигнуть высокого внешнего качества при низком внутреннем (плохая организация, потери, задержки, отсутствие у руководства достоверной информации, низкая мотивация сотрудников) не могут привести к положительным результатам в долгосрочной перспективе.
Предприятие должно, в соответствии с требованиями стандарта, определить для каждого процесса критерии и методы, гарантирующие их результативность. Процессы, для которых не установлены критерии результативности или методы ее достижения неуправляемы с точки зрения качества продукции и, как следствие, могут привести к неконтролируемым потерям в качестве.
Помимо этого стандартом ISO 9001:2000 предъявляются требования к документации (включая руководство по качеству и политику в области качества и ряд обязательных процедур), планированию, управлению персоналом и ресурсами, процессу выпуска продукта, измерениям и анализу информации. Существенно новым для российской практики требованием является требование к непрерывной работе по улучшению системы качества, а также по постоянному проведению мероприятий по улучшению качества продукции.
В докладе рассматриваются вопросы внедрения системы менеджмента качества, соответствующей требованиям стандарта качества ISO 9001:2000.
МЕТОДИКА ТЕСТИРОВАНИЯ, ПОДГОТОВКА ТЕСТОВ И ОПРЕДЕЛЕНИЕ ОБЩЕГО КОЭФФИЦИЕНТА УСВОЕНИЯ ЗНАНИЙ, УМЕНИЙ И НАВЫКОВ
Ерофеева Е.А., Мураева В.А. (erofeeva@avtograd.ru)
Тольяттинский Государственный Университет
Тестирование позволяет объективно оценить степень обученности каждого студента. Тест состоит из задания на деятельность данного уровня и эталона. Предлагаемая методика тестирования основана на подходах к определению обученности студентов В.П.Беспалько и В.П.Симонова.
Тесты должны быть разработаны по пяти уровням усвоения знаний на основании следующих требований:
1. Тест по содержанию должен соответствовать стандарту.
2. Задание теста должно соответствовать выявленному уровню усвоения.
3. Тест должен быть простым: в нём должно содержаться только одна задача данного уровня.
4. Задание теста должно быть сформулировано определённо, чтобы его решение было однозначным.
На каждый уровень усвоения составляется по пять вопросов с эталонами ответов на них. Тесты на каждом уровне должны содержать число операций. Число операций служит для точного определения коэффициента усвоения, который характеризует степень усвоения материала на определенном уровне обучения. Определение усвоения знаний, умений и навыков с помощью тестов, наряду с объективностью их оценки, позволяет оценивать их по коэффициенту усвоения знаний. Это позволит применить для обработки результатов исследования шкалу отношений.
Для экспериментальных целей, когда возникает потребность в корректной и адекватной оценке эффективности новой программы, методики, важна относительность оценок, не зависящая от балловой оценки, но позволяющая объективно оценить или сравнить предлагаемое новое средство обучения. На наш взгляд такую задачу позволит выявить предлагаемая методика оценки знаний, умений и навыков при проведении экспериментальных исследований. Цель этой методики – использовать шкалу отношений при обработке результатов эксперимента.
Каждый показатель обученности имеет свои границы. Первый уровень составляет 4 % от полной обученности, второй – 16 %, третий – 36 %, четвертый – 64 % и пятый (полный) – 100 % обученности. Тогда максимальный показатель степени обученности будет составлять на: первом уровне – 4%, втором –12%, третьем –20%, четвертом – 28%, пятом – 36%. Если максимальный показатель степени обученности в пределах каждого уровня обозначить буквой ui, то коэффициент Кui усвоения знаний на i-том уровне обученности можно определить по формуле
где i – порядковый номер уровня обученности, изменяющийся от 1 до 5. Внутри каждого интервала показатель обученности зависит от числа верных ответов. Сравнение ответа студента с эталоном по числу правильно выполненных им операций «m» теста из всех необходимых “p” даёт возможность определить коэффициент усвоения 
.Коэффициент усвоения знаний
на i-том уровне можно определить по формуле 
где pi – число операций на i-том уровне; mi – число правильных ответов на i-том уровне обученности. Значение Kui изменяется в пределах i-того уровня, который в свою очередь зависит от максимального показателя степени обученности ui. Для первого (низшего) он равен 0,04, для второго – 0,12, для третьего – 0,20, для четвертого – 0,28, для пятого – 0,36. Если учащийся ответил на все тесты первого уровня, то коэффициент усвоения его знаний равен 1, т.е. 
, но знания на первом уровне составляют от полной обученности только 4% (с коэффициентом 
). Поэтому 
Аналогично, при полном ответе на тесты второго уровня коэффициент усвоения знаний учащегося 
Таким образом, общий коэффициент усвоения знаний, умений и навыков учащихся при верных ответах на тесты всех пяти уровнях определиться по формуле 
Очевидно, что при полной степени обученности коэффициент
равен единице. А при полном отсутствии знаний, умений и навыков он будет равен нулю. Таким образом, коэффициент усвоения знаний, умений и навыков обучаемого находится в пределах [0;1], или 
. А если это так, то вполне очевидно, что экспериментатор будет иметь возможность работать с непрерывной шкалой отношений.Литература
1. Беспалько В.П. Педагогика и прогрессивные технологии обучения. М.: Изд-во Института профессионального образования Министерства образования России, 1995. – 336 с.
2. Симонов В.П. Педагогический менеджмент: 50 НОУ-ХАУ в области управления образовательным процессом. Учебное пособие. 2-е изд., испр. и дополненное. – М., Роспедагентство, 1997 г., 264 с.
TECHNOLOGY CONTINUOUS REENGINEERING OF EDUCATIONAL INFLUENCE ON SPECIALISTS
Kainen L.L. (kainen@mail.ru)
Kurgan state university
Abstract
The article is devoted to questions of necessity continuous reengineering systems of educational influence on specialists in conformity to requirements of an environment of their professional work. It is offered to use a complex of the models defining competence of concrete experts and professional groups, dynamics of parameters of professional competence in a basis of mechanisms of adaptation.
ТЕХНОЛОГИЯ НЕПРЕРЫВНОГО ПЕРЕПРОЕКТИРОВАНИЯ ОБРАЗОВАТЕЛЬНОГО ВОЗДЕЙСТВИЯ НА СПЕЦИАЛИСТОВ
Кайнина Л.Л. (kainen@mail.ru)
Курганский государственный университет
Образовательное воздействие на специалиста представляет собой целенаправленное систематическое интегрированное обучающее, воспитывающее и управленческое воздействие на индивида, позволяющее ему приобрести, уточнить или обновить знания, освоить систему операций и способов преобразования транслируемых сведений и достижения определенных результатов, способствующее его развитию и успешной профессиональной деятельности. Высокая изменчивость информационно-технологической среды профессиональной деятельности специалистов требует от сферы дополнительного профессионального образования модернизации образовательных услуг, «опережающей» изменение запросов потребителя.
В связи с этим, важность компонента системы обучения взрослых, обеспечивающего ее высокую адаптивность, возрастает. Существует множество подходов к решению этой проблемы. Одним из решений может быть использование комплекса из семантического, компетентностного и синергетического подходов (схема 1).
Концепция непрерывного перепроектирования образовательного воздействия на специалистов состоит в том, что:
• изменение требований среды профессиональной деятельности к профессиональной компетентности (ПрофК) групп специалистов отражается в эталонных профилях ПрофК;
• индивидуальные профили ПрофК в процессе текущей аттестации (самоаттестации) специалистов проверяются на рассогласование с эталонными профилями;
• на основе исследований динамики значений и связей параметров ПрофК для различных профессиональных групп строятся прогнозы изменения профилей ПрофК;
• профили ПрофК посредством правил продукции проецируются на образовательное поле и позволяют отобрать актуальное содержание обучения и построить маршруты (траектории) обучения;
• прогнозы динамики эталонов ПрофК позволяют, опережая изменения среды профессиональной деятельности специалистов и запросов потребителей, модернизировать на основе семантических сетей образовательное поле и разработать оптимальные маршруты обучения.
Чтобы оценить эффективность предлагаемого подхода будем рассматривать адаптивность системы обучения (СО) как показатель, отражающий отношение финансовых затрат на ее перепроектирование ко времени, которое было затрачено на достижение ею заданного состояния (готовности СО к представлению определенной образовательной услуги с должным качеством) с момента поступления запроса потребителя. Тогда приращение адаптивности системы обучения взрослых вычислим по формуле:
∆Adpt=S1/t1-S2/t2,
где S1, S2 [рубль]– финансовые затраты на перепроектирование в сравниваемых 1-й и 2-й системах обучения, а t1 и t2 [час]– время, затраченное с момента формирования запроса на услугу до момента готовности соответственно 1-й и 2-й систем обучения к предоставлению этой услуги.
Эффективность системы обучения взрослых определим как показатель, отражающий отношение приращения результатов образовательного воздействия (например, рейтинга информационно-технологической компетентности специалиста), измеряемого в баллах, к приращению капиталовложений, затраченных на реализацию процесса обучения измеряемому в рублях. Тогда, вычислим по формуле:
эффективность обучения –
Эффективность = ∆IПрофК / С,
где ∆IПрофК [балл] - приращение интегрального показателя профессиональной компетентности, С [рубль] - стоимость обучения;
приращение эффективности обучения –
∆Эффективность = ∆IПрофК * |V2-V1| / V2 / V1 / S1,
где Vi[час] – объемы сравниваемых 1-го и 2-го учебных курсов, приводящих к одному и тому же результату обучения и измеряемых в академических часах, Si[рубль] - себестоимость одного часа учебного курса соответственно для 1-го и 2-го учебных курсов.
Литература
1. Кайнина Л.Л. Адаптивная виртуальная среда управления образованием //Компьютерные учебные программы и инновации.- 2003. - № 2(33). – М.: Изд-во ИНИНФО. – С.13-36.
2. Кайнина Л.Л. Развитие системы управления образованием в адаптивном информационном пространстве //Педагогическая информатика. - 2003. - №4. – C.75-84.
3. Кайнина Л.Л. Формирование информационного пространства территориальной системы управления образованием //Интеграция образования. - 2004.- №1. – С.103-105.
4. Кайнина Л.Л. Синхронизация изменений информационно-технологических условий профессиональной деятельности и системы обучения информатике специалистов //Наука и школа.- 2004. - №1. – С.43-45.
МЕТОДИКА КОНТРОЛЯ ЗНАНИЙ ОБУЧАЕМЫХ С ИСПОЛЬЗОВАНИЕМ ЭЛЕКТРОННЫХ ТЕСТИРУЮЩИХ СИСТЕМ
Климов В.Г.
Пермский нефтяной колледж
Новые условия перехода российского общества к рыночным отношениям поставили учебные заведения в сложное положение. В современном информационном мире вместе с ростом человеческого фактора увеличивается значение образования как важнейшего фактора формирования нового качества экономики, производства и науки [1]. При этом неизбежно возникает необходимость глубокой и всесторонней модернизации образования на основе информационных технологий обучения. Предстоит целостная перестройка образовательного процесса, создание необходимых управленческих предпосылок, основанных на личностно-ориентированной парадигме. В этих условиях важно принципиально изменить ситуацию в определении показателей, критериев, по которым можно достоверно оценить качество образовательных услуг, знаний, умений и навыков.
Современные образовательные информационные технологии в значительной мере помогают реализовать вышеуказанные проблемы на основе электронных тестирующих систем. Однако, педагогическая практика убеждает, что сегодня более чем оправдано сле-дует говорить о проблеме разработки и внедрения концептуальной модели технологии тестирования как средства повышения качества подготовки специалистов в учебном заве-дений, ее интеллектуализации за счет широкого применения математической обработки результатов декомпозиции учебного материала, экспертной оценки содержания тестов, математического моделирования с использованием достижений разумной формализации исследуемого объекта [2]. В настоящее время в системе образования широко используются различные комплексы тестирования. Наблюдаемая тенденция расширения использования тестов, как инструмента для измерения степени усвоения пройденного учебного материала, связана с тем, что тест является одним из наиболее удобных и относительно объективных способов контроля знаний. Стремительное развитие информационных технологий в сочетании с новыми программно-педагогическими средствами позволяет перейти к созданию и практическому применению современных систем адаптивного обучения и электронных тестирующих систем. Одно из главных преимуществ методики компьютерных тестов состоит в том, что они позволяют опросить всех студентов по всем темам учебного материала в одинаковых условиях, применяя при этом ко всем без исключения одну и ту же заранее разработанную шкалу оценок. Это значительно повышает объективность и обоснованность оценки учащегося по сравнению с традиционными методами текущего или итогового контроля знаний.
Электронное тестирование на основе компьютерных средств обучения является естественным компонентом педагогической деятельности с практическим применением информационных технологий. При этом важно разработать тестовые задания с учетом структурирования учебного курса, формирования плана теста, корректной шкалы оценки. Педагогическая практика свидетельствует, что электронный тест должен учитывать цели обучения, краткость, ясность, компактность, качественность и однозначность, простоту и надежность. Решение перечисленных задач в основном зависит от преподавателя, разрабатывающего содержание теста по своему курсу. Например, технические задачи проведения, анализа статистической обработки результатов тестирования, общие для различных дисциплин, которые могут быть достаточно эффективно реализованы в электронной тестирующей система (программе). Содержание тестов, критерии оценки и время тестирования могут варьироваться в соответствии с уровнем требований, предъявляемых к качеству усвоения учебного материала [3]. Каждый субъект образования имеет возможность многократного промежуточного тестирования, но при этом достаточный запас задач и случайное их предъявление делают невозможным улучшение результатов тестирования за счет воспроизведения правильных ответов соседа или своих из предыдущих циклов тестирования.
Например, авторская система электронного тестирования по техническим дисциплинам содержит базу исходных данных. Куда внесены определенное количество вопросов для тестов, которые можно дополнить преподавателю, независимо от уровня владения компьютерной техникой. Перед началом тестирования можно легко и быстро выполнить настройку электронной тестирующей системы. Количество вопросов, как и количество ответов к заданию, в конкретном тесте могут динамически изменяться в зависимости от текущих требований и общих стандартов, предъявляемых к испытуемому. Оценка за тест определяется непосредственно по окончании его выполнения. Результаты тестирования накапливаются в статистической базе данных и могут быть использованы для визуального просмотра, анализа и корректировки содержания тестовых заданий. В процессе разработки электронной тестирующей системы по техническим дисциплинам (техническая механика, сопротивление материалов, гидравлика, термодинамика, материаловедение, электротехника, детали машин, нефтяное оборудование) было уделено внимание вопросам защиты информации. Для этих целей создана система паролей для перезагрузки теста, входа-выхода из программы, защиты базы данных, содержащей информации о содержании теста и правильных ответах. Пароли хранятся отдельно от общей базы данных и могут быть изменены преподавателем по его усмотрению в любое время.
В заключении следует отметить, что контроль знаний текущих, промежуточных, итоговых, с использованием электронных тестирующих систем, позволяет добиться определенных положительных результатов: значительно сокращается время проведения контроля знаний по учебной дисциплине; снижается нагрузка на преподавателя; повышается степень объективности оценивания знаний; работа с тестовой программой может служить тренажером для повторения тем, например, перед контрольной работой или госэкзаменом; на основе результатов тестирования преподаватель имеет возможность анализировать процесс обучения по конкретной теме и предпринять своевременную корректировку. Компьютерные тестовые программы можно разработать с использованием стандартных оболочек и интерфейсов, не требующих большого количества оперативной памяти, что позволяет их широкое практическое применение в педагогической деятельности по любой учебной дисциплине.
Литература
1. Филиппов В.М. Модернизация российского образования//Педагогика. 2004. № 3. С. 3 – 11.
2. Гонтарь М.Ю. Интеллектуализация концептуальной модели технологии тестирования в техническом вузе/Новые образовательные технологии в вузе: сборник трудов II Международной научно-методической конференции. Екатеринбург: Изд-во ГОУ ВПО УГТУ-УПИ, 2004. С. 287 – 289.
3. Буравлев А.И., Переверзев В.Ю. Выбор оптимальной длины педагогического теста и оценки надежности его результатов//Дистанционное образование. 1999. № 2. С. 8991.