↓
 ↑
Регистрация
Имя/email

Пароль

 
Войти при помощи
ReznoVV
16 апреля 2022
Aa Aa
#образование #ЕГЭ

Недавнее интересное обсуждение ЕГЭ в блогах (вот тут) натолкнуло меня на мысль написать несколько слов на эту тему, так сказать, с той стороны, как участника региональной экспертной комиссии ЕГЭ по физике. Сразу оговорюсь, что писать буду субъективное мнение, основанное сугубо на личном опыте.

Организация
Тестовая часть работ проверяется автоматически, компьютером, а приглядывают за этим специально обученные верификаторы, исправляющие непрочитанные программой ответы и обрабатывающие паспортные данные экзаменуемых. Эксперты проверяют только развёрнутую часть – в случае физики это одна качественная и шесть расчётных задач. Проходит это дело обычно или на базе одной из школ, или в здании регионального министерства образования. Самой проверке предшествуют довольно долгие формальные процедуры – оформление сертификата эксперта и договора (делается, как правило, за две-три недели до даты экзамена и переоформляется каждый год), сверка списков и получение под подпись бланков протоколов (они у каждого эксперта персональные). Кроме них экспертам выдают копии заполненных учениками бланков ответов (без личной информации, конечно), их варианты заданий и критерии оценивания. Всю организационную работу выполняют сотрудники министерства, они же следят за технической стороной дела: ручки-бумажки, камеры видеонаблюдения, сдача всей электроники, паспортный контроль – всё серьёзно, как и на самом экзамене.

Каждый бланк с ответами независимо проверяют два разных эксперта, в случае расхождения в оценках более одного первичного балла, его перепроверяет старший эксперт, в случае расхождения в один балл оценка округляется в большую сторону. При этом есть важный нюанс – региональную экспертную комиссию тоже проверяют, а расхождения в баллах (каждое из которых отмечается в специальном протоколе) сильно не приветствуются. Так что старшие эксперты внимательно следят за процедурой проверки, чтобы все работы получали наиболее объективную и справедливую оценку (я не могу написать, что они сверяют баллы разных экспертов, проверяющих одни и те же работы, до написания ими протоколов, т.к. это было бы административным правонарушением). В любом случае, в спорных ситуациях оценка ставится в пользу ученика – это непреложное правило.

Объективность
За все (невеликие) годы работы в качестве эксперта я ни разу не сталкивался ни с каким сторонним давлением, несанкционированным доступом третьих лиц к бланкам и протоколам проверки или какими бы то ни было иными способами махинаций с результатами экзаменов. Опечатанные пакеты с бланками всегда вскрываются при всех экспертах, протоколы сдаются под подпись, а доступ к ним есть только у самих экспертов. В общем, не могу утверждать за всю процедуру экзамена, но конкретно экспертная проверка развёрнутой части действительно не подвержена никаким сторонним искажениям.

Что касается самих экспертов, то злонамеренно занизить или завысить оценку конкретному ученику практически невозможно – работы распределяются между экспертами случайным образом, количество экспертов даже по физике, не говоря уж о русском или математике, в нашем небольшом (~миллион населения) регионе приближается к полусотне, а сами работы полностью обезличены. И даже если злонамеренный эксперт каким-то образом выучит почерк нужного ребёнка или договориться, что тот оставит ему тайные знаки в тексте, вероятность того, что его работа попадёт на проверку именно этого эксперта не превышает 2%. Да и второй эксперт с независимой проверкой всё равно никуда не девается, а при наличии значимых расхождений вмешается старший эксперт. Для организованных же искажений нужен полноценный заговор всех экспертов, что практически нереально.

Процедура проверки
Сама процедура проверки максимально проста – эксперт берёт заполненный бланк, сверяет его с критериями оценивания и проставляет баллы в соответствии с ними. Критерии обычно максимально подробны и учитывают разные варианты решения одной и той же задачи (привести более конкретные примеры не могу – это подпадает под местную версию подписки о неразглашении). В любом случае, для людей, регулярно имеющих дело со школьной физикой на профессиональной основе, никакой сложности процедура проверки не представляет. Намётанный глаз быстро выделяет алгоритм решения и проверяет его на соответствие критериям.

Не могу не отметить известную шаблонность решений большинства экзаменуемых. При том, что почти каждую расчётную задачу можно решить двумя-тремя разными способами, подавляющее большинство детей, решающих её верно, делают это максимально стандартным способом. Это, разумеется, не плохо – в случае ответственного экзамена, наверное, любой человек выберет наиболее надёжный метод решения. Правда, в случае 11-классников это свидетельствует скорее об известной "натасканности" на конкретные типа задач, чем об осознанном выборе самого надёжного пути решения из нескольких возможных альтернатив. Доходит до того, что если я вижу нестандартное начало решения той или иной задачи, я подсознательно готовлюсь к неверному или недоведённому до конца решению. Увы, подсознание почти никогда в этом деле не ошибается. Тем не менее, порой (очень, очень редко) встречаются настоящие бриллианты находчивости и изворотливости, за которые я бы с удовольствием накинул балл-другой. Ещё раз увы, критерии весьма строги и таких вольностей не позволяют. Кстати, строгость критериев, разумеется, никак не наказывает за альтернативные варианты решения – если итоговый ответ получен закономерным и физически обоснованным методом, а не просто случайно совпал с правильным, ученик получит причитающийся ему максимальный балл.

Напишу пару слов и о "любимых" у некоторых учителей требованиях к оформлению работы. Лично мне неизвестны эксперты, которые бы снимали баллы за неряшливое оформление решения или пользовались правом аннулирования решения в силу его неразборчивости. Как правило, экспертами являются люди с большим опытом обработки письменных работ детей, а потому неразборчивым почерком их не запугать. Это, разумеется, не значит, что ученики могут писать как курица лапой, игнорировать единицы измерения и хаотически разбрасывать формулы по бланку ответа, но и делать из правил оформления священную корову тоже не стоит.

Кадры
Теоретически к квалификации экспертов ЕГЭ должны предъявляться высочайшие требования. Перед допуском к проверке работ эксперты проходят специальные курсы подготовки, получают сертификаты и регулярно подтверждают свою квалификацию. Практически же... Как вы уже поняли, процесс проверки работ в подавляющем большинстве случаев скучен, рутинен и однообразен. Учителя высокой квалификации, ведущие вузовские преподаватели и учёные не горят желанием потратить день-другой на то, чтобы сверять детские каракули с критериями оценивания.

Лучшей иллюстрацией того, насколько всё плохо с кадрами, является сам факт моего участия в экспертной комиссии. Дело в том, что к преподаванию школьной физики я не имею вообще никакого отношения (не считая педпарктики при получении педагогического образования). Да, может быть, я не самый бесполезный учёный-теоретик, что-то представляю из себя как методист и преподаватель астрономии, даже какие-то успехи в деле популяризации науки имею, но со школьной физикой не связан никак. Тем не менее, вот уже несколько лет меня исправно зовут проверять ЕГЭ по ней. Само собой, моей квалификации вполне хватает, чтобы справляться с этим без каких-либо проблем, но факт остаётся фактом.

В таких условиях особенно проникаешься уважением к старшим экспертам и председателю комиссии. Не знаю, как в других регионах, а у нас старшими экспертами являются действительно выдающиеся школьные педагоги (стобалльники и призёры всероса по физике почти у каждого), а главенствует среди них настоящий корифей университетского преподавания, многие десятилетия занимающийся развитием дополнительного образования по физике для школьников. Именно он, наряду с ещё несколькими заслуженными учителями с многолетним педагогическим стажем, не жалея времени и сил из года в год руководит всей работой комиссии. Представители регионального министерства образования весьма разумно им не мешают, выполняя в основном формальные и организационные функции, вроде паспортного контроля, видеосъёмки и т.д.

Апелляции
Теоретически апелляционная комиссия должна формироваться независимо, фактически же кадровые проблемы никуда не деваются и в этом случае. Так что в неё входят почти те же люди, что и в экспертную, только числом поменьше – всё же работы там гораздо меньше. Апелляции по тестовой части фактически сводятся к техническим вопросам – нечастым случаям, когда компьютерная программа и верификаторы неправильно расшифровали ответ экзаменуемого. Любые другие претензии, вроде "некорректности" составленных задач, почти всегда отклоняются – ответ получен или верный, или нет, третьего не дано.

В случае развёрнутой части апелляции интереснее, да и направляют их чаще. Впрочем, подавляющее большинство решений – оставить результат без изменений. Виной тому не некая злокозненность апелляционной комиссии, а объективная реальность – всё же пара независимых друг от друга экспертов с многолетним опытом очень-очень редко синхронно ошибаются при оценивании решений школьных задач. Вопреки всяким мифам, никаких санкций для экспертов за подвергнутую апелляции оценку не предусмотрено – если они сами не участвуют в апелляционной комиссии, они и знать не будут, что их вердикт был пересмотрен по итогам рассмотрения апелляции. Возможно, министерство ведёт какую-то внутреннюю статистику и попросту перестаёт приглашать "ненадёжных" экспертов, но мне про это ничего не известно. Кстати, по итогам рассмотрения апелляции могут не только повысить, но и понизить баллы, но это очень-очень редкий случай.

Деньги
За участие в работе экспертной комиссии платят очень хорошо, по меркам образования в нашей провинции. У меня (правда, с доплатой за учёную степень) выходит около 5 тысяч за рабочий день (обычно с 9 до 19 часов с положенным перерывом на обед), это при ставке научного сотрудника в 23 тысячи, а зарплаты учителя с надбавками ~25 тысяч рублей в месяц. К слову, за проверку олимпиад платят сопоставимо: 1.5 – 2 тысячи рублей за несколько часов проверки. Зато за подготовку муниципального этапа всероссийских олимпиад платят весьма ощутимо – в нашей астрономии выходит около 20 тысяч рублей за весь пакет заданий, решений и критериев оценивания, который мы с коллегами обычно делаем втроём.
N.B. Я проверял, ни один из договоров не содержит пункта о неразглашении условий и сумм оплаты труда, так что тут всё законно.

Моё личное мнение
Что федеральному министерству просвещения, что региональному министерству образования, давно пора отказаться от бессмысленных и всё равно не исполняющихся на практике требований к качеству кадров в экспертных комиссиях. Это позволило бы многим молодым учителям получить весомую прибавку к жалованию аккурат в начале "голодного времени" в виде летних каникул (думаю, ни для кого не секрет, что многие учителя во время учебного года подрабатывают репетиторством, а лето в этом плане довольно грустное). Разумеется, речь не идёт про старших экспертов высокой квалификации. Их желательно разгрузить от рутины, и оставить им действительно важные и сложные случаи. С проверкой же подавляющего большинства типовых решений вполне справится любой школьный учитель с хоть каким-то опытом решения задач ЕГЭ.

Сама процедура проверки ЕГЭ хоть и обставлена множеством формальных условностей, в целом соответствует официально заявленной картине, полностью исполняя свою главную функцию беспристрастной и объективной проверки экзамена. Насколько сам экзамен справляется с задачей объективного контроля знаний учащихся по тому или иному предмету, я судить не берусь, но проверяют его вполне адекватно. Занятие это донельзя скучное и выматывающее (глаза и правая рука к концу дня начинают ощутимо болеть даже у меня, человека сравнительно молодого), но прилично организованное и хорошо оплачиваемое.

P.S. Если интересно, могу нечто подобное расписать про школьные олимпиады, на примере всё той же физики и профильной для меня астрономии.
16 апреля 2022
7 комментариев
Напишите, пожалуйста, и про олимпиады, любопытно
Хорошо написали. Про физику не могу сказать,а вот в целом очень похоже на проверку части С по русскому языку.
Когда дошла до пункта Деньги, поняла, что живу в параллельной реальности. За проверку олимпиад не платили никогда. Ни копейки за школьный этап, за муниципальный - только в последние пять лет либо отгул (если вырвешь зубами), либо баллы в стимулирующую часть (не больше 500 рублей и аналогично, если вырвешь). За работу экспертом на ОГЭ (9 класс) - аналогично, но платить начали только с прошлого года. И суммы там за день работы - от 100 до 300 рублей. А заплатят их в лучшем случае к концу года.
Ну и разумеется, никаких перерывов на обед. А проверку любезно ставят на выходной день.
Ну собственно, q.e.d.

Ваши слова вполне подтверждают три тезиса, которые выдвигались ранее:
1) школы натаскивают учеников на стандартные решения
2) с точки зрения "справедливости" ЕГЭ организован лучше чем прежние "выпускные экзамены": если исключить читерство на этапе написания, соответствие проверяемому КИМом объёма знаний и умений оценивается +/- объективно
3) несмотря на позитив, многое, связанное с ЕГЭ, за 20 лет так и осталось на уровне приказа левой пятки министра образования.

Ну и немного несвязанного из личного опыта.
Как правило, экспертами являются люди с большим опытом обработки письменных работ детей, а потому неразборчивым почерком их не запугать. Это, разумеется, не значит, что ученики могут писать как курица лапой, игнорировать единицы измерения и хаотически разбрасывать формулы по бланку ответа, но и делать из правил оформления священную корову тоже не стоит.
Я сдавал ЕГЭ в далёком 2003 году. По русскому языку, где тогда ещё присутствовала пришибленная на голову часть А с множественным выбором, получил 59 (странно, что вообще что-то получил, ибо стресс был дикий — ночью умер крёстный, экзамен был первый, в общем свой завтрак я оставил на пассажирах маршрутки). Подал на апелляцию и выяснилось, что на части C у меня тупо украли баллы "за почерк" — в итоге я получил без одного полные первичные баллы за часть C и итоговая оценка выросла до 73. Что же, рад слышать, что таких вот казусов всё меньше и меньше.
Показать полностью
Vallle
Напишу, как смогу, наверное, через недельку.

Amalia_Vilson
Спасибо на добром слове)))

клевчук
Сильно подозреваю, что платить начали в связи с серьёзным дефицитом кадров. Может, специфика нашего изолированного региона содействует дополнительно. Собственно, старшие товарищи (я-то экспертом несколько лет всего являюсь) рассказывают, что раньше и их сгоняли добровольно-принудительно за символическую плату, но в какой-то момент даже это перестало помогать (всё же эксперты должны проходить аттестации, а организует всё министерство, которое на школьных учителей действует только опосредованно, через администрации), вот и пришлось нормально и даже хорошо платить.

yzman
Подал на апелляцию и выяснилось, что на части C у меня тупо украли баллы "за почерк" — в итоге я получил без одного полные первичные баллы за часть C и итоговая оценка выросла до 73. Что же, рад слышать, что таких вот казусов всё меньше и меньше.
Ну, как там с языками, я не в курсе. Может, и сейчас строго относятся к чёткости почерка в экзаменах по русскому и английскому. У нас-то в физике ключевой момент – формулы, их сложно написать настолько коряво, чтобы проверяющий не смог в них разобраться.
Показать полностью
Я сдавал ЕГЭ в далёком 2003 году.
ЕГЭ тогда уже был? Я сдавал в каком то 2009 наверное, и тогда (2005-2007) оно было ещё далеко не по всей стране, мы считались "передовым" регионом и проверяли на нас идею.

В целом, у нас довольно ровно шло, оценки были справедливы, апелляции работали в случае явных косяков.
MonkAlex
Да, у нас самый экспериментальный что ни на есть регион, и это был год когда ЕГЭ для всех выпускников был обязателен по трём предметам на выбор. Плюс ЕГЭ засчитывался как вступительные экзамены в вузах области + прочих нетоповых вузах страны. МГУ, Бауманка, МФТИ и прочие из топов москвабада клали болт, в Питере принимали охотно.

А вот в 2002 ещё можно было выбрать ЕГЭ или не ЕГЭ для выпускного экзамена. Тольятти.
ПОИСК
ФАНФИКОВ











Закрыть
Закрыть
Закрыть