КАК БУДУТ ОЦЕНИВАТЬСЯ УЧЕБНЫЕ ДОСТИЖЕНИЯ?

Инструментарий должен быть разработан таким образом, чтобы обеспечить получение информации, необходимой для национальной оценки. Поскольку цели и предлагаемое использование программ национальной оценки меняются, то же самое будет происходить с инструментарием, используемым при оценке, и способах, которыми результаты сообщаются.

Некоторые национальные оценки представляют результаты в терминах характеристик распределения тестовых оценок, например, средний процент заданий, выполненных учащимися правильно, и характер распределения оценок вокруг среднего. Или результаты могли бы быть шкалированы путем приведения к произвольному среднему (такому как 500) и стандартному отклонению (такому как 100). Хотя эти оценки могут использоваться для сравнения результатов подгрупп в выборке, они имеют ограниченное применение прежде всего потому. что они очень мало говорят нам об уровне знаний учащим ся материала или фактических умениях, которые приобрели обучаемые.

Для того чтобы решить эту проблему и сделать результаты оценки более значимыми для заинтересованных лиц. все чаще результаты в отчетах приводятся так, чтобы отобразить, что учащиеся знают и что не знают. Это позволяет определить сильные и слабые стороны их знаний и умений. Данный подход включает соответствующие оценки учащихся с описанием тех заданий, которые они в состоянии выполнить (например «может читать па определенном уровне понимания» или «может выполнять основные математические операции»). Результаты могут быть разбиты на категории различными способами (например «удовлетворительный уровень» или «неудовлетворительный уровень», «базовый уровень», «профессиональный уровень» или «продвинутый уровень»). При таком разбиении для каждого уровня должна быть определена соответствующая ему доля учащихся. Установление соответствия оценок учащихся различным уровням выполнения теста является сложной задачей, сопряженной с привлечением экспертов по учебным программам и специалистов по статистическому анализу.

Способ описания результатов должен быть рассмотрен еще па стадии разрабо тки теста. Таким образом, разработку теста можно начать с определения его структуры, фиксирующей ожидаемые результаты обучения, на основе которой пишутся тестовые задания для оценки степени, в которой подготовка учащихся отвечает этим ожиданиям. Однако если задания нс соответствуют определенным критериям при их выполнении, включая степень, в которой они дифференцируют учащихся, то они нс могут быть включены в окончательный оценочный инструментарий. Необходимо позаботиться о гарантиях того, что в оценке отражены важные учебные цели, даже если ни один из учащихся при выполнении теста нс представляет свидетельств их достижения.

Большинство систем национальной и международной оценки при разработке своего инструментария отдает значительное предпочтение форме заданий с множественным выбором.

Они часто дополняются открытыми заданиями, которые требуют от учащегося написания слова, фразы или предложения. Примеры заданий с множественным выбором и открытых заданий представлены в дополнительных материалах 4.2 и 4.3 COOTBCTCTBCI11 ю.

Дополнительный материал 4.2

Примеры заданий с множественным выбором

Предмет: география

Река Волга протекает в:

A. Ки>ае

B. Германии

C. России

D. Швеции.

Предмет: математика

Тюлень должен дышать, если он спит. Мартин наблюдал за тюленем на прО1яжении 1 часа. В начале ею наблюдений тюлень опустился на дно моря и начал спать. Через 8 минут он медленно поднялся наверх и вдохнул воздух. Через 3 минуты он уже опять был на дне моря, и весь процесс повторялся с такой же частотой. Через час тюлень был:

A. на дне

B. на пути к поверхности

C. дышал на поверхности

D. опускался на дно.

Источник: примеры по математике: ОЭСР. 2007. Воспроизводится с разрешения правообладателя

Дополнительный материал 4.3

Примеры открытых заданий

Предмет: язык

Слово ВЫСОКИЙ - это антоним к слову НИЗКИЙ

Подберите антонимы к словам:

Быстрый_________ Темный__________

Тяжелый_________ Старый__________

Предмет: математика

Используйте свою линейку, чтобы нарисовать прямоугольник с периметром 20 сантиметров. Отметьте ширину и длину.

В некоторых системах национальной (например исследование NAEP в США и Национальное оценивание чтения на английском языке в Ирландии) и международной (например, TIMSS и PISA) оценки каждый учащийся отвечает только на часть общего числа заданий (см. А8 в приложении А, В1 и ВЗ в приложении В). Данный подход увеличивает общий охват учебного плана в тесте без излишне большой нагрузки на отдельных испытуемых. Он также позволяет использовать расширенные отрывки (например, короткий рассказ или газетную статью) в оценивании понимания прочитанного. В других оценочных системах все учащиеся выполняяют один и тот же набор заданий. Хотя есть определенные преимущества в подходе, когда отдельные учащиеся отвечают только на часть заданий, недостатки также существуют, особенно для стран, только начинающих реализовывать программы национальной оценки.

1 Троцесс подготовки и предъявления тестов (например, тиражирование и распределение по пунктам проведения тестирования) становится более сложным, так же как оценка и шкалирование результатов, вместе с усложнением анализа данных отдельных учащихся или школ (Sofroniou and Kellaghan, 2004).

Проблеме оценке по язык); как правило, уделяют меньше внимания, чем она того заслуживает. Это связано с двумя причинами. Во-первых, хотя во многих исследованиях представлены группы учащихся, значительная часть (а иногда и большинство) которых обучаются не на родном языке, они, как правило, оцениваются на языке обучения. В Уганде, например, подавляющее большинство учащихся выполняют тосты на втором языке (см. А.9 в приложении А). Низкие результаты тестирования являются столь же типичными для такой практики, как и в целом отсутствие явного прогресса в достижениях учащихся и раннее отчисление из школы многих из них (Naumann, 2005).

Во-вторых, проблема, связанная с языковым тестированном, возникает в тех случаях, когда оценочный инструментарий должен быть переведен на один или более языков. Если проводится сравнение результатов тестирования па разных языках, то анализ результатов должен принимать во внимание возмож ность появления различий, вызванных изменением трудности заданий из-за особенностей перевода. Эта проблема частично связана с неполным соответствием слов при переводе. Например. в международной оценке, проводимой в Южной Африке, такие слова, как газолин «gasoline» (petrol) и «flashlight» (torch) были изменены. Гана заменила слово снег «snow» словом дождь «rain». Если языковые различия меняются в сочетании с культурными и экономическими факторами, то проблема усугубляется. поскольку трудно гарантировать эквивалентность способа формулирования вопросов и адекватность их содержания культурному фону страны во всех языковых версиях теста. Например. материал, который подходит по контексту для учащихся в сельских област ях, охватывающий охоту, местные рынки, хозяйство и местные игры, может быть незнакомым для учащихся в городских районах.

Независимо от деталей метода, оценка должна обеспечить валидную и надежную информацию. Валидизация имеет несколько аспектов, включая адекватность оценочного инструментария выборке учащихся и представления конструкта (например, грамотности чтения) или предметной области учебного плана (например, общественные науки), определенного в структуре оценки. При валидизации экспертные суждения специалистов по учебным планам являются очень важными. Кроме того, оценочный инструментарий должен измерять только то, что он был предназначен измерять. Например, тест по математике или естественным наукам должен оценивать знания и умения учащихся в соответствующих областях, а нс их компетентность в языке.

Надежность оценочных процедур обычно включает приближенную оценку степени согласованности, в которой отдельные задания в тесте оценивают общий конструкт, для измерения которого предназначался тест, а в случае открытых заданий - степень, в которой два или более экспертов достигают согласия в своих оценках.

Ответственность за решение о том. как будут оцениваться учеб ные достижения, лежит на исполнительном агентстве.

 
Посмотреть оригинал
< Пред   СОДЕРЖАНИЕ ОРИГИНАЛ   След >