Методические материалы для учителей по итогам организации и проведения единого государственного экзамена в Саратовской области в 2011 году

Вид материала

Подобный материал:

1 ... 5 6 7 8 9 10 11 12 13

Отличия контрольно-измерительных материалов

для проведения единого государственного экзамена

по географии в 2012 году относительно 2011 года

В КИМах по географии – принципиальных изменений нет.

Количество заданий в части 1 сокращено с 25 до 24. Соответственно, общее количество заданий сократилось с 45 до 44, а максимальный первичный балл за выполнение всех заданий работы – с 55 до 54.

В КИМ 2012 г. включено новое задание (В1) базового уровня сложности, проверяющее умение читать географические карты различного содержания.

В связи с принятием июне 2011 г. Федерального закона об исчислении времени (Поскольку порядок исчисления времени на территории РФ будет изменен, включать в работу задачи на исчисление времени невозможно, так как данный материал не изучался выпускниками 2012 г.), исключено задание, проверяющее умение использовать знания о часовых поясах в практической деятельности и повседневной жизни для определения поясного времени,

Как оценивается уровень подготовленности учащихся

по результатам ЕГЭ

Совмещение выпускных аттестационных экзаменов в школе и вступительных экзаменов в ВУЗ формально предоставляет равные права и равные возможности всем выпускникам, пожелавшим стать абитуриентами, без дублирования их усилий для сдачи конкурсных экзаменов и без необходимости совершать поездку, возможно далекую, в другой город, где расположен выбранный вуз, к месту сдачи этих экзаменов.

Однако для реального воплощения этих и других гуманных целей ЕГЭ необходимо, чтобы оценки по результатам ЕГЭ были объективными.

Поставленной цели возможно добиться, если будут выполнены следующие условия:

1) высокое качество контрольно-измерительных материалов ЕГЭ, составленных опытными педагогами-предметниками;

2) научно обоснованная методика выставления окончательного тестового балла по результатам выполнения абитуриентом соответствующего теста;

3) тщательно продуманная процедура тестирования и максимально компьютеризованная технология всего комплекса обработки контрольно-измерительных материалов, предусматривающая надежную защиту от несанкционированного вмешательства.

Сто балльная шкала (О, 1, 2,…, 99, 100), предназначенная для отражения результатов ЕГЭ, принципиально отличается, от общепринятой (четырех балльной), гораздо большей потенциальной чувствительностью к градации экзаменующихся.

Если испытуемый А получил балл, например, 87, а испытуемый В получил балл, скажем, 77, то можно осмысленно утверждать, что уровень подготовленности А больше уровня подготовленности В на 10 конкретных единиц. И смысл этой разности одинаков на разных частях шкалы. Например, разность баллов 47 и 37 имеет ту же величину в 10 тех же единиц, то есть мы вправе говорить, например, о том, что 87-77 = 47-37 в обычном смысле.

Контрольно-измерительные материалы по всем предметам ЕГЭ обычно содержат задания трех типов, условно обозначаемых как А, В и С.

Задания типа А сопровождаются несколькими вариантами ответа, из которых только один правильный, а остальные – правдоподобные, но неверные. Ответ, выбранный испытуемым, оказывается, таким образом, либо верным (и тогда выставляется один первичный балл), либо неверным (и тогда выставляется ноль первичных баллов).

Задания типа В ответами не сопровождаются, но сформулированы таким образом, что правильные ответы можно выразить достаточно кратко. Испытуемому предлагается указать только ответ на задание и получить за это один первичный балл (если ответ окажется верным) или ноль первичных баллов (если ответ окажется неверным).

Это означает, что, как задания типа А, так и задания типа В имеют, как правило, только две категории ответов, условно обозначаемых 1 и 0. К категории 1 относятся только абсолютно верные и полные ответы, а к категории 0 – все остальные, в том числе, и не очень значимо отличающиеся от абсолютно верных. Тот факт, что к категории 0 относятся даже результаты, мало отличающиеся от абсолютно верных, является определенным недостатком. Однако этот недостаток не является критическим, поскольку компенсируется тем, что количество заданий в тесте всегда достаточно большое (несколько десятков), причем всегда есть несколько заданий по одной и той же теме. Поэтому, если экзаменующийся только одно задание выполнил «почти правильно» и получил за это 0, а не 1, это незначительно скажется на окончательной оценке. Ну, а если ошибки, пусть даже небольшие, допускаются часто, то за это, конечно, окончательный балл будет снижен заметно.

Первичным (сырым) баллом называют сумму условных баллов, сопоставленных каждому конкретному заданию экспертами-составителями теста. Он получается умножением 0 или 1 на соответствующий коэффициент, который отражает различные параметры и значимость конкретного задания. Примерные значения этих коэффициентах указываются в спецификациях по каждому предмету.

Задания типа С требуют от испытуемых подробного выполнения (а не только ответ) и предполагают несколько категорий оценок, условно обозначаемых как 0, 1,…, k. При этом цифры 0 и k соответствуют крайним ситуациям – задание выполнено совершенно неверно (0) или абсолютно верно (k). Цифры 1, …, k-1 соответствуют промежуточным уровням (категориям) выполнения задания. Общее количество категорий k+1 различно в разных предметах, но всегда больше двух. За выполнение каждого задания типа С испытуемый получает, соответственно, от 0 до k m первичных баллов. При этом задания типа С проверяются экспертами – предметниками, и в расчет принимаются не только (и не столько) правильность ответа, но и все детали развернутого выполнения задания.

Таким образом, по результатам выполнения КИМов, непосредственно после окончания экзамена, легко подсчитать процент верно выполненных заданий и первичный балл для каждого испытуемого. Максимально возможный первичный балл равен, очевидно, сумме всех оценок, полученных по заданиям типов А, В, С.

Но первичные баллы для объективного оценивания уровня подготовленности испытуемых не применимы. Они являются не конечными результатами, а лишь исходными данными. Требуется совместная математическая обработка всех результатов широкомасштабного тестирования в едином центре, для возможного пересчета предварительных оценок. Это необходимо делать потому, что невозможно заранее достаточно четко определить уровень сложности и других параметры каждого конкретного задания, хотя это и делается квалифицированными экспертами на основе предварительной апробации тестов и статистической обработки этих данных. Окончательный пересчет первичных данных в тестовый балл производится после получения не менее 80% результатов по конкретному предмету.

Поскольку между первичными баллами и окончательными тестовыми баллами, выставляемыми в свидетельство, устанавливается взаимно однозначное соответствие (но не равенство!), то количество рабочих баллов на 100-балльной шкале не может быть больше максимально возможного значения первичного балла. Поэтому, как правило, максимально возможный первичный балл во всех контрольно-измерительных материалах бывает не меньше 50.

В результате достаточно сложного пересчета, не только может быть повышена или понижена «цена» любого задания, но и будет учтена нелинейная зависимость тестового балла от выполнения задания. Достаточно приближённо, это означает следующее: если испытуемый выполнил простое задание, то он получит 2 тестовых балла, а если – не выполнил, то потеряет- 5, если же, он выполнил достаточно сложное задание, то получит 5 баллов, за невыполнение его – потеряет только 2 балла. Это позволяет отследить овладение базовым уровнем знаний. Так как, если испытуемый не знает ответов на базовые вопросы, то сложные задания на применение знаний и умений он выполнить не сможет, здесь будет возможно только угадывание.

Таким образом, первичные баллы способны ранжировать экзаменующихся по верно выполненным заданиям данного конкретного теста: если А% > В%, то А лучше В, но не вообще, а лишь применительно к данному единственному испытанию (варианту теста). Поэтому после пересчета результатов становится возможным сравнить результаты выполнения всех вариантов КИМов, то есть вполне может случиться так, что после этого пересчета уже В окажется лучше А.

Наконец, необходимо подчеркнуть, что все описанные возможности шкалирования результатов заведомо достижимы только в рамках определенной математической модели. В связи с этим полезно иметь ввиду, что та модель, которая используется при обработке результатов ЕГЭ, не опирается ни на какие гипотезы, кроме одной: результат выполнения определенного задания определенным человеком зависит только от разности между уровнем подготовленности испытуемого в соответствующей области знания и уровнем трудности задания. Однако вид этой зависимости может, конечно, не всегда соответствовать реально полученным результатам тестирования. Всякое отклонение от запланированной процедуры тестирования – нечеткий инструктаж организаторов, непродуманный лимит времени, недобросовестное выполнение заданий испытуемыми, неформализованная работа экспертов при проверке заданий типа С, и т.п. – все это приведет к тому, что полученные результаты будут неверны.

Непосредственно во время экзамена получение сырых баллов подчиняется следующим критериям:

Задания Части 1 и Части 2 проверяются с помощью компьютера (ответы сравниваются с эталонами).
Части 3 проверяются экспертами (устанавливается их соответствие определенному перечню критериев).

Выполнение каждого задания частей А и В оценивалось в 1-2 балла. Эти баллы умножались на поправочный коэффициент.

Задания части С имеют вес от двух до четырех баллов. Количество баллов, которое начисляется за выполнение каждого задания указано в спецификациях работ по каждому предмету.

В дальнейшем, производится пересчет полученных баллов в сто балльную шкалу.

Таблица 27

Динамика среднего балла по предметам ЕГЭ выпускников ОУ г.Саратова (код АТЕ 241-247)
Предмет	2006/2007	2007/2008	2008/2009	2009/2010	2010/2011
Русский	50,89	59,66	60,66	43,05	64,1
Математика			43,10	22,55	46,5
Физика		48,53	47,81	33,11	51,1
Химия			50,14	27,07	56,0
Информатика		58,55	62,10	41,88	67,3
Биология	53,52	57,31	53,03	42,47	53,2
История			46,23	26,62	46,5
География	45,78	47,05	47,28	37,03	52,3
Английский			60,47	34,74	66,8
Немецкий			45,92	27,96	50,1
Французский			42,95	26,98	49,4
Обществознание	51,89	56,91	57,64	44,61	57,5
Литература			56,34	37,17	63,3

Blog

Методические материалы для учителей по итогам организации и проведения единого государственного экзамена в Саратовской области в 2011 году