Данные по заданиям

IATA генерирует и использует файлы с данными по заданиям в определенном формате. Файл с данными по заданиям содержит всю информацию, необходимую для проведения статистического анализа, и может содержать параметры, используемые для описания статистических свойств заданий. Банк заданий, созданный или используемый IATA, должен содержать переменные, перечисленные в табл. 8.2.

Примеры из файла с данными банка заданий, содержащего информацию о пяти заданиях по физике под названиями ClSci31, ClSci32, ClSci33, ClSci34 и ClSci35, представлены в табл. 8.3. Обратите внимание, что для задания ClSci35 отсутствуют данные в столбцах а, Ь, с и Уровень. Как показано в таблице, обязательными являются только поля с данными Название и Ключ. Если параметры а, b или с отсутствуют, они будут оценены в ходе проведения анализа. Многие ситуации могут потребовать ввода в IATA файла с данными по заданиям, в котором такие параметры отсутствуют. Наиболее распространенным сценарием является ситуация, в которой данные по ответам для заданий ранее никогда не анализировались; в таком случае файл с данными банка заданий просто используется как ключ к тесту. Другой сценарий - ситуация, где некоторые задания обладают параметрами, которые были оценены в рамках ранее проводимого анализа данных, и мы хотим зафиксировать значения параметров для таких заданий вместо того, чтобы позволить IATA их переоценивать. При таком сценарии можно оставить значения а, b и с пустыми только для заданий, для которых мы хотим оценить новые параметры. Значения для переменных Уровень и Содержание могут быть введены в интерфейс IATA вручную либо оставлены пустыми.

ТАБЛИЦА 8.2

Переменные в файле с данными по заданиям

Переменная

Описание

Название

(ОБЯЗАТЕЛЬНАЯ) уникальное название каждого тестового задания

Ключ

(ОБЯЗАТЕЛЬНАЯ) информация, используемая для присвоения числовой оценки каждому ответу на задание, которое представляет собой либо единый код, соответствующий верному ответу, либо разграниченную сетку значений, определяющую множество приемлемых ответов и их соответствующие числовые оценки

а

(НЕ ОБЯЗАТЕЛЬНАЯ) первый из трех параметров, описывающий связь между результатом выполнения тестового задания с уровнем подготовки в соответствующей предметной области, который называется наклон или параметр дискриминативности

b

(НЕОБЯЗАТЕЛЬНАЯ) второй параметр задания, который называется параметром местонахождения или пороговым значением

с

(НЕ ОБЯЗАТЕЛЬНАЯ) третий параметр задания, который называется псевдооценочным параметром3

Уровень

(НЕ ОБЯЗАТЕЛЬНАЯ) априорно присвоенный заданию уровень выполнения на основе изначальной спецификации задания и экспертного анализа (значения должны быть натуральными целыми числами, начинающимися с 1)

Содержание

(НЕ ОБЯЗАТЕЛЬНАЯ) код или наименование, используемые для описания подобласти учебной программы, также известные как ветвь или тематическая линия, к которым каждое задание привязано наиболее сильно

а. Использование параметра с для описания заданий может привести к тому, что определенные функции, такие так уравнивание, не будут работать надлежащим образом. Для большинства целей задания будут наиболее полезны, если значение параметра с равно нулю или задано нулевым. Трехпараметрическая модель должна использоваться только специалистами, которым известно о его недостатках. Оценивание и использование параметра с представлены в рамках расширенных функций IATA. Бесплатная регистрация IATA обеспечивает доступ к расширенным функциям. Для получения инструкций по регистрации см. руководство по установке на прилагающемся CD-диске.

Файл с данными по заданиям может включать дополнительные переменные. Например, дополнительная информация, которая обычно хранится с данными по заданиям, включает содержательные основы для вопросов в банке заданий, статистические показатели, описывающие, сколько раз использовались задания, и список тестов, в которых появляется каждое задание. Однако IATA не будет использовать какие-либо иные переменные кроме семи требуемых полей данных, перечисленных в табл. 8.3.

ТАБЛИЦА 8.3

Раздел выборки файла с данными по заданиям

Название

a

b

c

Ключ

Уровень

Содержание

C1Sci31

0,34

0,83

0,01

3

3

Естествознание

C1Sci32

0,46

0,40

0,12

4

2

Физика

C1Sci33

0,32

0,31

0,06

3

2

Физика

C1Sci34

0,18

0,75

0,16

1

3

Биология

C1Sci35

5

Экология

Группа по проведению национальной оценки может использовать информацию из любого источника, если у нее есть необходимые данные по заданиям в формате, представленном в табл. 8.2. Например, национальные оценки могут получить разрешение использовать задания из какой-либо крупномасштабной оценки, например, проводимой Международной ассоциацией оценки учебных достижений, которая включает TIMSS и PIRLS (http://timss.bc.edu). Если задания из существующих крупномасштабных оценок включены в национальную оценку, параметры заданий из существующих оценок могут использоваться для создания файла с данными по заданиям, которые IATA может импортировать.

 
Посмотреть оригинал
< Пред   СОДЕРЖАНИЕ ОРИГИНАЛ   След >