Теория и практика конструирования педагогических тестов - Челышкова М.Б.
ISBN 5-94010-143-7
Скачать (прямая ссылка):
3 0,5092 0,2182 1,0000 0,3563 0,2182 0,2182 -0,3563 -0,476 -0,2182 -0,5092
4 0,4082 0,6124 0,3563 1,0000 0,4082 0,4082 -0,1667 0,5345 0,4082 0,2722
5 0,3333 0,0000 0,2182 0,4082 1,0000 0,6000 0,0000 0,6547 0,5000 0,3333
6 0,3333 0,0000 0,2182 0,4082 0,6000 1,0000 0,0000 0,2182 0,5000 0,3333
8 -0,4082 -0,1021 -0,3563 -0,1667 0,0000 0,0000 1,0000 0,3563 0,6124 0,4082
7 0,2182 0,3273 -0,476 0,5345 0,6547 0,2182 0,3563 1,0000 0,7638 0,5092
9 0,1667 0,2500 -0,2182 0,4082 0,5000 0,5000 0,6124 0,7638 1,0000 0,6667
10 0,1111 0,1667 -0,5092 0,2722 0,3333 0,3333 0,4082 0,5092 0,6667 1,0000
Суммы 3,3385 3,1392 1,3888 4,2417 4,0478 3,6114 1,3436 4,5346 4,6495 3,2915
GUNPOWDER
тельствует анализ значений коэффициента корреляции в столбцах с номерами семь, девять и десять. В них просматривается только один минус на месте, соответствующем заданию теста 3, которое в свою очередь отрицательно коррелирует с четырьмя заданиями теста.
Аналогичная ситуация наблюдается в столбце, соответствующем заданию 8 теста. Отрицательные значения коэффициента корреляции указывают на определенный просчет разработчиков в содержании заданий 3 и 8 теста. Наиболее распространенная причина — отсутствие предметной чистоты содержания — нередко встречается при разработке самых разных тестов.
Понятно, что предметная чистота — скорее идеализируемое, чем реальное требование к содержанию любого теста. Например, в тесте по физике всегда встречаются задания с большим количеством математических преобразований, в тесте по биологии — задания, требующие серьезных знаний по химии, в тесте по истории — задания, рассчитанные на выявление культурологических знаний, и т. п. Поэтому говорить об отсутствии пересечения содержания заданий одной учебной дисциплины с содержанием другой в чистом виде не приходится. Можно лишь стремиться к тому, чтобы при выполнении каждого задания доминировали знания по проверяемому предмету.
По-видимому, противоположная ситуация наблюдалась в заданиях 3 и 8, отрицательные значения корреляции по которым указывают на отсутствие связи их содержания с содержанием других заданий теста.
Таким образом, задания 3 и 8 для повышения гомогенности содержания необходимо удалить из теста. Конечно, окончательное решение остается за автором, поскольку оно бессмысленно без тщательного анализа содержания заданий теста. Правда, подобное решение об удалении заданий может быть принято в том случае, когда эмпирические результаты собраны по репрезентативной выборке учеников. Если представительность выборки не достигнута, то появление минусов может не отражать ни в коей мере реальную ситуацию с содержанием заданий теста.
Анализ 9-го столбца с максимальной суммой 4,6495, приведенной в конце, указывает на наличие ряда довольно высоких значений коэффициента корреляции (ср9 8= 0,6124; ср9 7 = 0,7638; ср9 10= 0,6667), каждое из которых может получить различную трактовку в зависимости от вида разрабатываемого теста.
Для тематических тестов высокая корреляция между заданиями неизбежна, так как задания отражают слабо варьирующее, исходное содержание, что вполне оправдано назначением теста.
251
GUNPOWDER
Однако для итоговых тестов высокой корреляции между заданиями по возможности стараются избегать тестов, оценивающих одинаковые содержательные элементы, поскольку вряд ли имеет смысл включать в итоговый тест несколько заданий. Поэтому в итоговых тестах обычно стремятся к невысокой положительной корреляции, когда значения коэффициента варьируют в интервале (0; 0,3) и каждое задание привносит свой специфический вклад в общее содержание теста.
Десятый шаг. На десятом шаге с помощью подсчета значений коэффициента бисериальной корреляции оценивается валидность отдельных заданий теста.
Коэффициент бисериальной корреляции используется в том случае, когда один набор значений распределения задается в дихотомической шкале, а другой — в интервальной (подробнее см. гл. 7). Тогда в качестве показателя связи между распределениями выбирают бисериальный коэффициент. Под эту ситуацию подпадает подсчет корреляции между результатами выполнения каждого задания (дихотомическая шкала) и суммой баллов испытуемых (интервальная или квазиинтервальная шкала) по заданиям теста.
Объяснение, на котором основан вывод формулы для подсчета бисериального коэффициента корреляции приводится в книге [9] и ряде других изданий. Формула для подсчета, полученная по результатам вывода, имеет вид
, JXx)j-(3C0)j(Nx)j-(N0)j
sx uNylN2-/V
где (X1 )j — среднее значение индивидуальных баллов испытуемых,
выполнивших верноу-е задание теста; (X0)j — среднее значение
индивидуальных баллов испытуемых, выполнивших неверно 7-е задание теста; 5L — стандартное отклонение по множеству значе-
•А
ний индивидуальных баллов; (N1).— число испытуемых, выполнивших верно 7-е задание теста; (Iv0)і. — число испытуемых, выполнивших неверно 7-е задание теста; N — общее число испытуемых, N= /V1 + /V0; и — ордината нормированного нормального распределения в точке, за которой лежит 100 ¦ (N1/N) процентов площади под нормальной кривой.
