Тестология Классификация психологических тестов

Вид материалаТесты
Величина показателей методики САД по критерию ОБЧ
Расчет прогностической валидности ТПА-САД
Репрезентативность экспериментальной выборки
Количественная и качественная характеристика первоначальной экспериментальной выборки
Социальная структура
Семейное положение
Место проживания
Подобный материал:
1   ...   4   5   6   7   8   9   10   11   ...   18

Величина показателей методики САД по критерию ОБЧ





Полярные группы испытуемых

Среднее значение

Стандартное

отклонение

Количество

испытуемых

«лучшие»

21.45

3.23

42

«худшие»

15.35

4.22

40


Сравнение полярных групп испытуемых осуществлялось путем расчета t-критерия Стъюдента, который равен I tp I = 5.17. При p ≤ 0.05 I tp I > I tт I. То есть методика успешно дифференцирует испытуемых по способности к обучению (темпу усвоения новой информации). В результате корреляционного анализа выявлена значимая (p≤ 0.01) корреляционная зависимость между ВК и показателями методики САД. Коэффициент корреляции Пирсона равен Rxy = 0.56.

2. Факторы (показатели САД) Т и Г. Для определения корреляционной зависимости переменных использован метод сравнения полярных групп: а) первая группа испытуемых условно названа "технари" (испытуемые, склонные к технической деятельности, имеющие более высокие оценки по точным и техническим учебным предметам) и б) вторая группа испытуемых получила условное наименование "гуманитарии" (испытуемые, склонные к гуманитарным видам деятельности, имеющие более высокие оценки по гуманитарным учебным предметам).
Сравнение полярных групп испытуемых осуществлялось путем расчета t-критерия Стъюдента, который равен: для "технарей" I tp I = 2.39 и "гуманитариев" I tp I = 2.41. (Производилось сравнение гуманитарной направленности "технарей" по отношению к гуманитарным наклонностям "гуманитариев". И наоборот.) При p ≤ 0.05 I tp I > I tт I . То есть методика успешно дифференцирует испытуемых по мотивационным аспектам учебной деятельности (темпу усвоения новой профильной информации).

В результате корреляционного анализа выявлена значимая (p ≤ 0.05) корреляционная зависимость между ВК и показателями методики САД (Т и Г). Коэффициенты корреляции Пирсона равнялись: для критерия Т — Rxy = 0.42, для критерия Г — Rxy = 0.47. Коэффициенты контингенции и ассоциации соответственно равны: Q = 0.91 и Ф = 0.61.

Таким образом, эмпирические данные и математические расчеты позволяют сделать вывод об эмпирической валидности методики САД по критериям обучаемости и направленности познавательной деятельности субъекта.


Расчет прогностической валидности ТПА-САД


Прогноз развития способности испытуемых к усвоению новой информации (темпа обучаемости) по данным методики САД осуществлен при помощи уравнения линейной и нелинейной (параболическая зависимость второго порядка) регрессии.

а) Y = a (5.15) + b (0.93)X;

b) Y = a (-2.76) + b (2.12)X + c (-0.04)X2;


где Y — величина развития качества (ВК);

а — свободный член уравнения;

b, c — коэффициенты уравнения;

Х — величина показателя методики.

Коэффициент линейной корреляции (коэффициент корреляции Пирсона) между показателями методики и данными внешнего критерия составил Rxy = 0.58, для параболической зависимости Rxy 0 = 0.59 (p ≤ 0.05).

Замечено, что прогностичность методики падает с течением времени. Так, сопоставление показателей методики САД с данными ВК, полученными через три месяца после обследования, выявляет стахостическую зависимость между ними на уровне Rxy = 0.58, через полгода — Rxy = 0.55 и через год — Rxy = 0.47. Это говорит об относительно стабильном прогнозе оценки обучаемости индивида на период до полугода.

Внешняя валидность складывается из репрезентативности экспериментальной выборки и перекрестной валидности.


Репрезентативность экспериментальной выборки


Формирование экспериментальной выборки первоначально при разработке теста САД осуществлено методом рандомизации (случайный выбор) из учеников старших классов средней школы по социально-демографическим критериям и критерию минимально репрезентативного объема (данные 1991 года) (табл. 19).

С помощью методики САД при разработке первого варианта теста обследовано 649 школьников (471 девятиклассник и 178 десятиклассников), что превышает размеры минимально репрезентативной выборки.


Таблица
Количественная и качественная характеристика
первоначальной экспериментальной выборки




Критерии

Показатели критерия

Значение критерия

Возраст

15-16 лет

16-17 лет

18-19 лет

72%

27%

1%

Образование

неполное среднее

среднее

99%

1%

Социальная структура


из рабочих

из крестьян

из служащих

28%

2%

70%

Национальность

русские

украинцы

другие национальности

79%

10%

11%

Семейное положение


из полных семей

из неполных семей

из многодетных семей

из малодетных семей

80%

20%

9%

15%

Место проживания


из крупного города

из небольшого городка

из села (ПГТ)

49%

34%

17%

Расчетный минимальный объем репрезентативной выборки

при рт = 0.8 p ≤ 0.01

рт = 0.8 p ≤ 0.05

при рт = 0.9 p ≤ 0.01

рт = 0.9 р ≤ 0.05

10 650 чел.

246 чел.

5 994 чел.

138 чел.


Перекрестная валидность ТПА-САД


Перекрестная валидизация осуществлена в последующие годы использования методики на различных контингентах испытуемых. Общий объем экспериментальной выборки составляет более 3 тыс. человек. Особенность перекрестной валидизации методики САД заключается в том, что в процессе исследований на различных группах испытуемым предлагается новый стимульный материал, характеризующий мотивационную сферу данной популяции. Коэффициент корреляции между показателями методики и количественной характеристикой измеряемого свойства показывает уровень валидности теста. Расчет критериев для определения различия или сходства средних и дисперсий признаков не имеет смысла и не постоянен, опять же, ввиду разнородности стимульного материала, применяемого в ходе тестирования. Валидизацию применения САД с различным стимульным материалом возможно осуществлять только по регистрации оценочных критериев, заложенных в структуру логической схемы теста, которые являются относительно постоянными. Характеристики экспериментальных групп для перекрестной валидизации методики САД представлены в таблицах.


Таблица