Кейт Кеннеди - Как использовать анализ данных о добавленной стоимости для улучшения обучения школьников - руководство для школ и лидеров школьных округов

Этап 3. Определить средний прирост за три года

В строке табл. 4.1, обозначенной как «Средний за три года NCE-прирост», указаны данные о среднем приросте за последние три года для каждого класса (года обучения). Здесь мы видим, что семиклассники в среднем показывают прирост в 1,4 балла по NCE-шкале. Средние данные за три года помогают получить более достоверное представление о долгосрочной эффективности программы обучения.

Этап 4. Сравнить результат с установленным нормативом прогресса

В 2010 г. средний прирост в классах с 4-го по 8-й составил – 6,1 балла, со стандартной ошибкой в 0,5. Значит, с высокой долей уверенности можно сказать, что прогресс среднего ученика за эти годы оказался значительно ниже ожидаемого.

Ответ на ключевой вопрос

Интерпретация этих данных должна дать вам ответ на один ключевой вопрос: какого роста удалось добиться в каждом классе округа? Из нашего отчета следует, что в 2010 г. в среднем округ добился в математике гораздо меньшего по сравнению с ожидаемым роста. Это открытие дает очень важную информацию окружной рабочей группе, которая теперь может исследовать причины этого нисходящего тренда и постоянно низких результатов, двигаясь по воронкам BFK·Фокус.

Перерыв для практики

Используйте приведенный выше отчет по добавленной стоимости по математике, чтобы ответить на следующие вопросы.

1. В каком классе в 2010 г. зафиксирован самый высокий уровень средней успеваемости? А в каком самый низкий?

2. Ученики какого класса продемонстрировали наибольший прогресс по математике в 2010 г.? В каком классе был наименьший прогресс?

3. Успешен ли оказался округ в целом в 2010 г. с точки зрения прогресса по математике?

(Ответы приведены в конце этой главы.)

После анализа результатов добавленной стоимости окружная рабочая группа должна изучить взаимосвязи между прогрессом и успеваемостью. Когда команда руководителей школ округа собирается для изучения своих данных, ее члены не должны забывать, что их конечная цель – не просто понять эти данные, но и начать действовать. Помните, что, продолжая делать то же, что и всегда, вы будете получать те же результаты, что и всегда. Необходимо предпринимать продуманные правильные действия, а не просто приказывать другим решить проблему. Но, предпринимая действия, окружная рабочая группа должна направлять осознанные усилия в те точки, где они окажут реальное влияние на результаты. Например, окружная рабочая группа не имеет возможности обучать каждого преподавателя более эффективным практикам, но если отчеты демонстрируют, что в целом по округу учителя не добиваются ожидаемого прогресса от учеников с высокой успеваемостью, то рабочая группа может организовать курсы или семинары по обучению отличников для педагогов всего округа. Суть в том, что у окружной рабочей группы больше возможностей влиять на массовые паттерны, чем на небольшие проблемы, уникальные для школы или класса. Располагая совокупными данными со всего округа, окружная рабочая группа должна задаваться конкретными вопросами.

• В каких областях текущие результаты учеников оказались наилучшими? В каких областях лучшими оказываются долгосрочные результаты?

• В каких областях текущие результаты учеников оказались наихудшими? В каких областях худшими оказываются долгосрочные результаты?

• В каких областях результаты не меняются?

Эти вопросы очень важны, потому ответы на них выявляют крупномасштабные системные закономерности. Они показывают те области, в которых педагоги действовали особенно эффективно, а также те, в которых необходимы улучшения. Один из самых лучших и простых инструментов, позволяющих ответить на эти вопросы, – это матрица, которую мы назвали «Фокус на моем округе». В этой матрице показатели роста отмечаются на одной оси, а средние баллы успеваемости – на другой. Достоинство этого простого инструмента в том, что он позволяет окружной рабочей группе одновременно видеть оба измерения. Образец матрицы «Фокус на моем округе» приведен на рис. 4.2.

В матрице «Фокус на моем округе» прирост добавленной стоимости отражен на горизонтальной оси (X), т. е. внизу сетки. Для обозначения интервалов показателей роста добавленной стоимости могут использоваться баллы процентилей роста, средние баллы роста или цветовая маркировка. В нашей полноцветной версии матрицы «Фокус на моем округе» (см. на сайте SAS) интервалы прогресса обозначены при помощи цветовой маркировки. Средний уровень успеваемости для каждого класса и каждого предмета отражается на вертикальной оси (Y), и в нашем примере он представлен интервалами баллов NCE, где 50 – это средний уровень успеваемости в год, принятый за стандарт. Больше 50 баллов NCE соответствуют уровню успеваемости выше среднего; меньше 50 баллов NCE соответствуют уровню успеваемости ниже среднего. Чем дальше показатель от значения в 50 баллов NCE, тем выше или ниже средний уровень успеваемости. Интервалы на оси успеваемости тоже могут быть представлены разными способами, например, при помощи выражения результатов тестов в процентилях, при помощи оценок, полученных при тестировании или с использованием других измеряемых показателей успеваемости (например, взвешенной успеваемости).