Алексей Грозовой – Образование с результатом: Как повысить качество обучения и раскрыть потенциал каждого ученика (страница 3)
Что показал внимательный взгляд
Учителя вернулись к данным. Выяснилось, что средний балл действительно вырос. Но контрольную в этом году проводили на две недели позже, а часть заданий была ближе к тем упражнениям, которые класс решал на уроках. Ученики, пропустившие первоначальную работу, писали вариант для пересдачи. Кроме того, в отчёте сравнивались два шестых класса с разным составом: в одном заметно увеличилось число детей, недавно пришедших в школу.
Ничто из этого не доказывало, что рост «ненастоящий». Но каждое обстоятельство уточняло, что именно можно заключить. Сравнение результатов корректно лишь настолько, насколько сопоставимы группы, задания и условия сбора данных.
На совещании решили проверить не весь курс математики, а конкретное умение: могут ли ученики не только выполнять привычные действия с дробями, но и объяснять, почему выбранный способ подходит к новой задаче. Для этого учителя взяли три источника:
•короткое задание с незнакомой формулировкой;
•несколько ученических работ, в том числе с ошибками;
•наблюдения и ответы детей на вопрос: «На каком шаге ты понял, что делать дальше?»
Короткое задание показало: из 26 учеников 7 уверенно решали знакомые примеры, но затруднялись применить тот же принцип в изменённом контексте. Работы помогли увидеть, где именно возникала путаница: часть детей неверно представляла дробь как величину. Разговоры показали, что некоторым было трудно начать, потому что они не понимали, как перевести текст задачи в рисунок или выражение.
Это уже не просто цифра «семеро затрудняются». Это возможная подсказка для действия: вернуться к смыслу дроби, дать детям несколько способов представить её и предложить объяснить переход от рисунка к записи. Данные не выбрали за учителей метод, но помогли точнее определить, где искать следующий шаг.
Как проверить данные до того, как принять решение
Перед тем как делать вывод, задайте четыре вопроса.
1. Что именно измеряется? Проверяет ли задание запоминание, объяснение, применение или способность рассуждать? Если мы хотим понять, умеют ли дети переносить знания, контрольная, состоящая только из задач, отработанных по образцу, даст неполный ответ.
2. Кого охватывает показатель? Это весь класс или только те, кто пришёл в день работы? Сравниваем ли мы одних и тех же учеников или две разные группы? Если из отчёта выпали дети с частыми пропусками, результат может описывать не весь класс, а его наиболее регулярно присутствующую часть.
3. Когда и как получены данные? Одинаковые ли были условия, время на выполнение, инструкции и критерии оценивания? Измерялась ли одна и та же тема на сопоставимых заданиях? Маленькие различия в процедуре иногда меняют результат сильнее, чем реальные изменения в обучении.
4. Какие ещё объяснения возможны? Могли ли повлиять посещаемость, смена учителя, тревожность, языковые трудности, новый состав класса, особые условия выполнения? Контекст не нужен для того, чтобы оправдывать слабые результаты или назначать виноватых. Он нужен, чтобы не предлагать всем одинаковое решение, когда причины могут быть разными.
К этому стоит добавить два понятия. Надёжность — насколько последовательно работает измерение: получим ли мы сходную картину, если проверим то же умение сопоставимым способом? Валидность — действительно ли задание измеряет то, что мы хотим понять. Тест может быть надёжным, но невалидным для конкретного вопроса: например, безошибочно проверять скорость чтения, когда команда хотела оценить качество понимания текста.
Даже хорошее измерение остаётся оценкой, а не прямым взглядом внутрь ученика. Ученик может знать, но растеряться на контрольной; может получить верный ответ случайно; может уметь решать знакомые задачи, но не понимать принцип. Поэтому результаты разных источников не обязаны полностью совпадать. Если тест показывает одно, ученические работы — другое, а разговор с детьми — третье, это не шум, который нужно поскорее заглушить. Возможно, именно в расхождении скрыта полезная информация.
Протокол: от вопроса к повторной проверке
Чтобы данные не превращались в бесконечные таблицы, школе нужен небольшой, повторяемый порядок работы. Его можно записать в шесть шагов:
Вопрос → источник данных → ограничение → сопоставление → решение → повторная проверка.
Разберём протокол на примере с дробями.
Вопрос. Не «Почему шестиклассники плохо знают математику?», а «Могут ли ученики применить представление о дроби в задаче, которую не решали по готовому образцу?». Узкий вопрос проще проверить и легче связать с действием.
Источник данных. Учитель готовит одну короткую задачу на перенос знаний, выбирает несколько работ и просит учеников объяснить ход мысли. Одной контрольной может быть достаточно, если вопрос очень узкий, но часто сочетание источников помогает понять не только сколько детей ошиблись, но и где возникло затруднение.
Ограничение. Задача даёт лишь один пример применения. Устный ответ может зависеть от уверенности ребёнка, а выборка тетрадей не обязана отражать всех учеников. Это не повод отказаться от измерения, а способ не приписывать ему больше, чем оно может сообщить.
Сопоставление. Команда сравнивает результаты с исходной работой по тому же умению, проверяет одинаковость критериев и смотрит на изменения у конкретных учеников. Отдельно рассматривает работы тех, кто пропускал занятия или недавно присоединился к классу. Сравнение становится содержательнее, когда видно не только, где находятся ученики сейчас, но и откуда каждый начал движение.
Решение. Учителя договариваются на двух ближайших уроках использовать модели дробей, а затем предложить новую задачу и попросить детей объяснить, как они выбирали способ. Решение небольшое и проверяемое. Оно не требует объявлять весь курс неэффективным или навсегда распределять детей по ярлыкам «способные» и «отстающие».
Повторная проверка. Через две недели команда возвращается к вопросу и смотрит, стали ли дети увереннее переносить способ решения. Если да — можно продолжить практику и проверить её на других задачах. Если нет — это не автоматическое доказательство, что приём бесполезен. Возможно, детям нужно больше времени, другой способ объяснения или более точная диагностика затруднений.
Полезно заранее записать, какое изменение учителя считают достаточным, чтобы пересмотреть решение. Иначе появляется соблазн после любого результата подобрать объяснение, подтверждающее первоначальное ожидание.
Контекст — не оправдание, а часть картины
При сравнении школ, классов или учеников легко принять разницу в результатах за прямое доказательство разницы в качестве обучения. Но на показатель могут влиять исходный уровень, посещаемость, язык обучения, опыт предыдущих лет, число недавно пришедших учеников, доступность поддержки и даже то, кто именно участвовал в измерении.
Это не означает, что сравнивать нельзя. Это означает, что сравнение нужно строить аккуратно. Уточнять, сравниваются ли одинаковые возрастные группы и одна и та же программа; проверять, как формировалась выборка; учитывать исходные результаты; отдельно рассматривать прогресс и достигнутый уровень. Школа, в которой ученики начинали с более серьёзных трудностей, может показать скромный средний результат, но значительное продвижение. И наоборот, высокий итоговый балл не всегда означает, что обучение помогло каждому двигаться вперёд.
Особенно осторожно следует относиться к рейтингам, когда на их основе принимают решения с высокими ставками. Если от одного показателя зависят репутация, финансирование или оценка работы учителя, люди начинают подстраивать действия под сам показатель. Например, уделять почти всё время тем заданиям, которые попадут в тест. Тогда измеряемый результат может улучшиться, а более широкая цель — понимание и самостоятельность — остаться без внимания. Показатель полезен как фонарь, но опасен как единственная цель, к которой направили весь свет.
Обсуждать данные без поиска виноватых
Данные становятся полезнее там, где их можно обсуждать без страха немедленного обвинения. Если ошибка ребёнка превращается в доказательство его неспособности, учителя теряют повод исследовать ход мысли. Если низкий классный результат автоматически считается личной неудачей педагога, команда начинает защищать цифры вместо того, чтобы разбираться в обучении.
Можно установить простое правило совещания: прежде чем предлагать оценку или объяснение, каждый участник формулирует, что он действительно наблюдает. Не «дети ленятся», а «из восьми ученических работ в пяти не записан первый шаг решения». Не «методика не работает», а «после двух недель практики ученики лучше решают знакомые задания, но в новой формулировке по-прежнему затрудняются». Точное описание не отменяет профессионального суждения — оно делает его проверяемым.
Для короткого упражнения выберите один привычный школьный показатель и заполните шесть строк протокола:
1. Какой конкретный вопрос он должен прояснить?
2. Откуда поступили данные и кого они охватывают?
3. Что этот показатель не позволяет узнать?
4. С чем его можно сопоставить, чтобы проверка была честной?
5. Какое небольшое решение поддерживают имеющиеся свидетельства?