в каком документе определяется существенное расхождение баллов
В каком документе определяется существенное расхождение баллов
4. Организация проверки развернутых
ответов. Методика оценивания развернутых ответов
на задания экзаменационной работы
4.1. Развернутые ответы участников экзаменов оцениваются двумя экспертами.
4.2. По результатам первой и второй проверок эксперты, независимо друг от друга, выставляют баллы за каждый ответ на задания экзаменационной работы ЕГЭ с развернутым ответом, за каждый ответ на задания экзаменационной работы ГВЭ. Результаты каждого оценивания вносятся в протокол проверки развернутых ответов участников экзаменов.
4.3. В случае установления существенного расхождения в баллах, выставляемых двумя экспертами, назначается третья проверка.
4.4. Существенное расхождение в баллах, выставленных двумя экспертами, определено в критериях оценивания по каждому учебному предмету и опубликовано в спецификациях и демонстрационных вариантах КИМ по каждому учебному предмету на сайте уполномоченной Рособрнадзором организации (ФИПИ).
4.5. Третий эксперт назначается автоматизированно (посредством РИС) из числа экспертов ПК, которым в текущем году присвоен статус «ведущий эксперт» или «старший эксперт», ранее не проверявших данную экзаменационную работу.
4.6. Эксперту, осуществляющему третью проверку, предоставляется информация о баллах, выставленных экспертами, ранее проверявшими экзаменационную работу.
4.7. Третий эксперт проверяет и выставляет баллы за выполнение всех заданий с развернутым ответом, позиции оценивания по которым в бланке-протоколе не заполнены автоматизированно при распечатке бланка-протокола.
4.8. Распределение работ участников экзаменов (ЕГЭ и ГВЭ) между экспертами ПК, расчет баллов по каждому заданию экзаменационной работы ЕГЭ с развернутым ответом, а также определение необходимости проверки работы ЕГЭ третьим экспертом осуществляются автоматизированно с использованием специализированных аппаратно-программных средств РЦОИ и уполномоченной Рособрнадзором организации (ФЦТ).
4.9. Расчет окончательной отметки за работу ГВЭ осуществляется экспертом в соответствии с критериями оценивания ответов на задания ГВЭ по соответствующему учебному предмету и фиксируется в протоколе, который затем передается в РЦОИ для дальнейшей обработки (см. п. 4.41).
4.10. Председатель ПК заблаговременно направляет в ОИВ информацию о необходимости принятия локальных актов, содержащих перечень технических средств и справочных материалов на бумажных носителях, разрешенных к использованию экспертами ПК по соответствующему учебному предмету.
4.11. Не позднее чем за 14 календарных дней до начала проведения обработки ЭМ председатель ПК и руководитель РЦОИ согласуют график работы ПК в период проведения обработки ЭМ по соответствующему учебному предмету с учетом требований к срокам обработки ЭМ, установленных Порядком.
4.12. Не позднее чем за 14 календарных дней до начала проведения экзаменов председатель ПК передает руководителю РЦОИ списочный состав ПК и расписание работы экспертов ПК для назначения в РИС экспертов на проверку экзаменационных работ.
4.13. Списочный состав ПК, направляемый в РЦОИ для внесения в РИС, должен соответствовать списочному составу ПК, указанному в соответствующем распорядительном документе ОИВ, и содержать информацию о статусе каждого члена ПК («основной эксперт», «старший эксперт», «ведущий эксперт») для корректного назначения экспертов на первую-вторую проверку экзаменационных работ, третью проверку экзаменационных работ, перепроверку и проверку апелляционных работ. Председатель ПК согласует с руководителем РЦОИ график работы экспертов ПК, проводящих проверку изображений, предположительно не заполненных участниками экзаменов (ЕГЭ) бланков ответов N 2, дополнительных бланков ответов N 2.
4.14. К проверке принимаются письменные развернутые ответы участников экзаменов (ЕГЭ), выполненные только на бланках ответов N 2 и дополнительных бланках ответов N 2 установленной Рособрнадзором формы и заполненные в соответствии с Правилами заполнения бланков ЕГЭ.
4.16. Председатель ПК до начала работы ПК получает от руководителя РЦОИ критерии оценивания развернутых ответов, а также дополнительные схемы оценивания ответов при проверке ответов по иностранным языкам, полученные из уполномоченной Рособрнадзором организации (ФЦТ) в день проведения экзамена (или на следующий день после проведения экзамена при существенной разнице во времени субъекта Российской Федерации с московским временем), и проводит в течение не менее часа оперативное согласование подходов к оцениванию развернутых ответов участников экзаменов (ЕГЭ) на каждое из заданий с развернутым ответом, опираясь на полученные критерии. Рекомендуется провести повторное оперативное согласование подходов к оцениванию после проверки каждым экспертом определенного количества первых экзаменационных работ для уточнения и конкретизации согласованных подходов к оцениванию.
4.17. В целях обеспечения согласованной работы экспертов председатель ПК может назначить из числа экспертов, имеющих статус «ведущий эксперт» или «старший эксперт», консультантов, к которым могут обращаться эксперты ПК при возникновении затруднений при оценивании развернутых ответов участников экзаменов. Рабочие места консультирующих экспертов должны быть организованы в помещениях для работы ПК таким образом, чтобы консультации не мешали работе других экспертов.
4.18. В целях повышения уровня объективности оценивания развернутых ответов участников экзаменов председатель ПК или назначенный им эксперт может использовать рабочие места, оборудованные выходом в информационно-телекоммуникационную сеть «Интернет» для предоставления экспертам возможности уточнить и (или) проверить изложенные в экзаменационных работах участников экзаменов факты (например, сверка информации с источниками, проверка приведенных участниками ГИА фамилий, названий, фактов и т.п.).
4.19. Проверку развернутых ответов участников экзаменов эксперты ПК осуществляют, руководствуясь критериями оценивания развернутых ответов и согласованными в ПК подходами к оцениванию развернутых ответов.
4.20. Развернутые ответы участников экзаменов оцениваются двумя экспертами ПК независимо друг от друга. Оба эксперта, проверяющие одну работу, выставляют баллы за каждый развернутый ответ или за каждую позицию оценивания (если ответ на задание оценивается по нескольким критериям) согласно критериям оценивания выполнения заданий с развернутым ответом.
4.21. Эксперт, который оценивает письменные развернутые ответы участников экзаменов (ЕГЭ), получает рабочий комплект эксперта ПК, который содержит:
Бланк-копия является изображением бланка ответов N 2 участника экзамена (ЕГЭ) и дополнительных бланков ответов N 2, если они заполнялись участником экзамена (ЕГЭ), в регистрационной части которого указаны:
информация об эксперте, назначенном на проверку бланков-копий рабочего комплекта (фамилия, имя, отчество эксперта, код эксперта);
наименование учебного предмета;
дата проведения экзамена;
номер протокола и номер строки в протоколе, соответствующий данному коду бланка-копии;
номер варианта КИМ;
номер страницы и количество заполненных страниц участником ЕГЭ в бланке ответов N 2, включая дополнительный бланк ответов N 2;
код субъекта Российской Федерации;
баллы, выставленные двумя экспертами, ранее проверявшими данную экзаменационную работу (в случае, когда экзаменационная работа направлена на третью проверку).
Бланк-протокол представляет собой таблицу, в которой указаны коды бланков-копий полученного рабочего комплекта и поля для внесения экспертами баллов за ответы.
В регистрационной части бланка-протокола указаны:
информация об эксперте, назначенном на проверку бланков (фамилия, имя, отчество эксперта, код эксперта);
наименование учебного предмета;
дата проведения экзамена;
код субъекта Российской Федерации.
4.22. Бланк-протокол является машиночитаемой формой и подлежит обязательной автоматизированной обработке в РЦОИ.
4.23. Рабочие комплекты формируются (распечатываются) для каждого эксперта в РЦОИ с учетом графика работы ПК.
4.25. Эксперты проводят проверку экзаменационных работ (ЕГЭ) и выставляют баллы в соответствующие поля бланка-протокола в соответствии с критериями оценивания развернутых ответов. Рекомендуется использовать черновики бланков-протоколов, не содержащие переменной информации: номеров работ, данных об эксперте и т.п.), в которые эксперты выставляют баллы до их внесения в бланк-протокол.
4.26. В случае возникновения у эксперта затруднения в оценивании экзаменационной работы эксперт может получить консультацию у председателя ПК или консультирующего эксперта, назначенного председателем ПК.
4.27. Номера наиболее характерных работ, вызвавших затруднения при оценивании, эксперт выписывает для передачи председателю ПК.
После проведения автоматизированной обработки бланков-протоколов в РЦОИ могут быть выявлены работы, требующие третьей проверки.
4.29. Экзаменационная работа направляется на третью проверку в случае существенного расхождения в баллах, выставленных двумя экспертами:
1) существенное расхождение в баллах по каждому учебному предмету определяется критериями оценивания и закладывается в алгоритм автоматизированной обработки;
2) проверку экзаменационной работы, назначенной на третью проверку, может осуществлять только эксперт, которому в текущем году присвоен статус «ведущий эксперт» или «старший эксперт», ранее не проверявший данную экзаменационную работу, имеющий опыт первой-второй и третьей проверки в текущем году;
3) на бланке-копии работы, назначенной на третью проверку, в регистрационной части для сведения третьего эксперта указываются баллы, выставленные двумя экспертами, проверявшими эту работу ранее. Третий эксперт проводит оценивание по тем позициям оценивания, которые указаны в бланке-протоколе. Позиции оценивания, которые третий эксперт не проверяет, в протоколе заполнены автоматизированно при печати бланка-протокола.
4.30. На протяжении периода работы ПК председатель ПК и (или) его заместитель фиксирует у себя номера работ, вызвавших наибольшие разногласия или трудности у экспертов при оценивании (на основании работ, проверенных собственноручно, и (или) работ, номера которых выписывали эксперты в процессе оценивания). Информацию о номерах таких работ необходимо будет передать в уполномоченную Рособрнадзором организацию (ФИПИ) после получения соответствующего запроса. Данные работы будут проанализированы и использованы для совершенствования критериев оценивания, проведения обучения экспертов ПК и согласования подходов к оцениванию экзаменационных работ.
о количестве проверенных на текущий момент времени экзаменационных работ;
о количестве экзаменационных работ, ожидающих первой, второй или третьей проверки;
о количестве и доле экзаменационных работ, назначенных на третью проверку;
другая информация, позволяющая определить качество работы ПК и необходимость проведения дополнительных согласований с экспертами ПК.
Результаты статистических отчетов председатель ПК использует для оптимизации организации работы ПК.
4.32. При необходимости председатель ПК дает дополнительные разъяснения по вопросам согласованности работы ПК.
4.33. Председатель ПК направляет в ГЭК и ОИВ представление об отстранении от работы экспертов, нарушающих требования Порядка, игнорирующих согласованные подходы к оцениванию экзаменационных работ, систематически допускающих ошибки в оценивании экзаменационных работ или нарушающих процедуру проведения проверки. Окончательное решение по вопросу отстранения эксперта от работы в ПК принимает ОИВ после проведенного ГЭК рассмотрения ситуации.
4.34. При проведении межрегиональной перекрестной проверки изображений экзаменационных работ участников экзаменов (ЕГЭ), полученные из другого субъекта Российской Федерации, проверяются экспертами ПК в общей очереди работ участников экзаменов (ЕГЭ). При этом членам ПК не предоставляется информация о том, экзаменационные работы из какого субъекта Российской Федерации были назначены на проверку экспертам ПК.
4.35. В период работы ПК, с момента получения критериев оценивания развернутых ответов из РЦОИ до окончания проверки развернутых ответов участников экзаменов, все помещения ПК, включая помещение, в котором проводится семинар-согласование с разбором заданий и критериев оценивания развернутых ответов, должны быть оборудованы функционирующей системой непрерывного видеонаблюдения и видеозаписи.
4.36. При выходе каждый член ПК сдает все материалы, в том числе полученные критерии оценивания развернутых ответов, лицу, обеспечивающему учет экземпляров критериев оценивания развернутых ответов, назначенному ОИВ.
4.38. В случае невозможности экспертом оценить развернутые ответы участника экзамена по причине проблем технического характера (нечеткая печать, некачественное сканирование работы, некачественная запись устного ответа и т.п.), эксперт уведомляет об этом председателя ПК. Совместно с председателем ПК составляет акт в свободной форме с указанием номера работы и описанием проблемы. Председатель ПК направляет служебную записку с приложением указанного акта руководителю РЦОИ для устранения причин, не позволяющих оценить экзаменационную работу. Данная работа не оценивается, эксперт оставляет соответствующие поля бланка-протокола пустыми.
4.39. Проверка развернутых ответов участников экзаменов считается завершенной, когда все экзаменационные работы проверены экспертами необходимое количество раз (определяется ПО РЦОИ), а результаты оценивания из бланков-протоколов проанализированы ПО РЦОИ.
4.40. По завершении работы каждый эксперт ПК сдает все материалы, в том числе полученные критерии оценивания развернутых ответов, лицу, обеспечивающему учет экземпляров критериев оценивания развернутых ответов, назначенному ОИВ.
4.41. Особенности проведения проверки развернутых ответов участников ГВЭ.
Каждая работа ГВЭ проверяется двумя экспертами. При проверке ответов участников экзаменов (устная форма) экспертам предоставляется доступ к единому хранилищу аудиозаписей ответов. Результаты проверки экзаменационных работ вносятся экспертами в стандартизированные формы проверки экзаменационных работ (см. «Развернутая форма проверки заданий»). Стандартизированные формы проверки экзаменационных работ не являются машиночитаемыми и не подлежат автоматизированной обработке.
Эксперты осуществляют перевод первичных баллов участников экзаменов в отметку по пятибалльной системе оценивания и вносят отметку в первое поле протокола (см. «Правила заполнения протоколов экспертов предметной комиссии ГВЭ»), при этом отметки «0» и «1» не используются и не обрабатываются.
После заполнения бланки-протоколы обрабатываются в стандартном режиме по аналогии с обработкой бланков.
Окончательная итоговая отметка определяется как среднее арифметическое двух отметок, выставленных проверявшими работу экспертами.
Результаты проверки работ участников экзаменов автоматизированно сохраняются в РИС.
4.42. Окончательные баллы за развернутые ответы определяются исходя из следующих положений:
если баллы, выставленные двумя экспертами, совпали, то эти баллы являются окончательными;
если установлено несущественное расхождение в баллах, выставленных двумя экспертами, то окончательные баллы определяются как среднее арифметическое баллов двух экспертов с округлением в соответствии с правилами математического округления;
если установлено существенное расхождение в баллах, выставленных двумя экспертами, то назначается третья проверка. Баллы, выставленные третьим экспертом, являются окончательными.
Проверка экзаменационных работ и их оценивание
В соответствии с п. 52, 53, 54, 57, 60, 61, 62, 63, 64, 65, 66 приказа Министерства образования и науки Российской Федерации от 26 декабря 2013 года № 1400 «Об утверждении порядка проведения государственной итоговой аттестации по образовательным программам среднего общего образования» (в ред. Приказов Минобрнауки России от 08.04.2014 № 291, от 15.05.2014 № 529, от 05.08.2014 № 923, от 16.01.2015 № 9, от 07.07.2015 № 693, от 24.11.2015 № 1369, от 24.03.2016 № 306, от 23.08.2016 № 1091, от 09.01.2017 № 6):
Проверка экзаменационных работ ЕГЭ обучающихся включает в себя:
Экзаменационные работы ЕГЭ обучающихся, удаленных с экзамена или не завершивших выполнение экзаменационной работы по объективным причинам, в случаях, предусмотренных настоящим Порядком, проходят обработку, но не оцениваются.
Записи на черновиках и КИМ не обрабатываются и не проверяются.
При проверке устных ответов на задания раздела «Говорение» ЕГЭ по иностранным языкам предметные комиссии обеспечиваются файлами с цифровой аудиозаписью устных ответов по иностранным языкам и специализированными программными средствами для их прослушивания.
Экзаменационные работы проходят следующие виды проверок:
По результатам первой и второй проверок эксперты независимо друг от друга выставляют баллы за каждый ответ на задания экзаменационной работы ЕГЭ с развернутым ответом.
В случае существенного расхождения в баллах, выставленных двумя экспертами, назначается третья проверка. Существенное расхождение в баллах определено в критериях оценивания по соответствующему учебному предмету.
Эксперту, осуществляющему третью проверку, предоставляется информация о баллах, выставленных экспертами, ранее проверявшими экзаменационную работу.
Распределение экзаменационных работ ЕГЭ между экспертами, расчет баллов по каждому заданию экзаменационной работы ЕГЭ с развернутым ответом, а также определение необходимости третьей проверки осуществляются автоматизированно, с использованием специализированных аппаратно-программных средств РЦОИ.
РЦОИ и предметные комиссии работают в помещениях, исключающих возможность доступа к ним посторонних лиц и распространения информации ограниченного доступа. В РЦОИ и предметных комиссиях присутствуют:
Непосредственно по завершении обработки и проверки экзаменационных работ ЕГЭ РЦОИ направляет в уполномоченную организацию результаты обработки и проверки ответов экзаменационных работ ЕГЭ.
После получения указанных данных из всех субъектов Российской Федерации уполномоченная организация обеспечивает проведение централизованной проверки экзаменационных работ ЕГЭ.
Централизованная проверка включает в себя:
организацию межрегиональной перекрестной проверки, перепроверки и межрегиональной перекрестной проверки в рамках рассмотрения апелляции о несогласии с выставленными баллами в случаях, установленных настоящим Порядком;
сверку ответов обучающихся, выпускников прошлых лет на задания экзаменационной работы с кратким ответом с правильными ответами на данные задания;
определение первичных баллов ЕГЭ (сумма баллов за правильно выполненные задания экзаменационной работы);
перевод первичных баллов ЕГЭ (за исключением ЕГЭ по математике базового уровня) в стобалльную систему оценивания.
По решению Рособрнадзора организуется обмен экзаменационными работами ЕГЭ между субъектами Российской Федерации (межрегиональная перекрестная проверка, межрегиональная перекрестная проверка в рамках рассмотрения апелляции о несогласии с выставленными баллами).
Централизованная проверка завершается не позднее чем через пять рабочих дней с момента получения результатов обработки бланков ЕГЭ, а также результатов проверки ответов на задания экзаменационной работы с развернутым ответом и устных ответов по иностранным языкам из всех субъектов Российской Федерации (за исключением централизованной проверки экзаменационных работ, направленных на перепроверку).
До 1 марта года, следующего за годом проведения экзамена, по поручению Рособрнадзора или по решению ГЭК предметные комиссии проводят перепроверку отдельных экзаменационных работ обучающихся, выпускников прошлых лет, сдававших ЕГЭ на территории Российской Федерации или за ее пределами.
По решению органа исполнительной власти субъекта Российской Федерации, осуществляющего государственное управление в сфере образования, предметные комиссии субъекта Российской Федерации проводят перепроверку отдельных экзаменационных работ обучающихся, выпускников прошлых лет, проходивших ГИА на территории субъекта Российской Федерации.
Результаты перепроверки оформляются протоколами ГЭК.
По завершении проведения централизованной проверки экзаменационных работ ЕГЭ уполномоченная организация обеспечивает передачу результатов ЕГЭ в РЦОИ.
Назначение третьего эксперта при проверке развернутых ответов ГВЭ-9 (письменная форма)
Приложение к критериям оценивания развернутых ответов
ГВЭ-9 (письменная форма)
Назначение третьего эксперта при проверке развернутых ответов ГВЭ-9 (письменная форма)
Проверка выполнения заданий, требующих развёрнутого ответа, проводится экспертами на основе разработанной системы критериев оценивания.
В соответствии с Порядком проведения государственной итоговой аттестации по образовательным программам основного общего образования (приказ Минобрнауки России зарегистрирован Минюстом России 03.02.2014 № 000)
«48. Экзаменационные работы проверяются двумя экспертами. По результатам проверки эксперты независимо друг от друга выставляют баллы за каждый ответ на задания экзаменационной работы. В случае существенного расхождения в баллах, выставленных двумя экспертами, назначается третья проверка. Существенное расхождение в баллах определено в критериях оценивания по соответствующему учебному предмету.
Третий эксперт назначается председателем предметной комиссии из числа экспертов, ранее не проверявших экзаменационную работу.
Третьему эксперту предоставляется информация о баллах, выставленных экспертами, ранее проверявшими экзаменационную работу обучающегося. Баллы, выставленные третьим экспертом, являются окончательными.»
Ниже определено существенное расхождение в баллах по соответствующему учебному предмету.
Существенным расхождением в баллах, выставленных двумя экспертами за всю работу, является расхождение в 8 и более баллов.
Существенным расхождением в баллах, выставленных двумя экспертами за выполнение любого из заданий 11 и 12, составляет 2 балла, или расхождение в баллах, выставленных двумя экспертами за выполнение заданий 11 и 12 в сумме, составляет 2 и более баллов.
В первом случае третий эксперт проверяет только ответ на то задание, которое было оценено двумя экспертами со столь существенным расхождением, во втором случае третий эксперт проверяет оба задания.
Существенным расхождением в баллах, выставленных двумя экспертами за выполнение любого из заданий с развернутым ответом, является расхождение в 2 и более баллов.
Существенным расхождением в баллах, выставленных двумя экспертами за выполнение задания 25, является расхождение в 3 и более баллов.
Существенным расхождением в баллах, выставленных двумя экспертами за выполнение задания 31, является расхождение в 2 и более баллов.
Существенным расхождением в баллах, выставленных двумя экспертами за выполнение задания 26, является расхождение в 2 балла.
Существенным расхождением в баллах, выставленных двумя экспертами за выполнение задания 19, является расхождение в 2 балла.
Существенным расхождением в баллах, выставленных двумя экспертами за выполнение задания 19, является расхождение в 2 балла.
Существенным расхождением в баллах, выставленных двумя экспертами за выполнение задания 13, является расхождение в 2 балла.
Существенным расхождением в баллах, выставленных двумя экспертами за выполнение задания 28, является расхождение в 2 и более баллов.
Существенным расхождением в баллах, выставленных двумя экспертами за выполнение задания 12, является расхождение в 2 и более баллов.
Приложение к критериям оценивания развернутых ответов
Назначение третьего эксперта при проверке развернутых ответов ГВЭ-9 по русскому языку и математике (устная форма)
Проверка выполнения заданий, требующих развёрнутого ответа, проводится экспертами на основе разработанной системы критериев оценивания.
В соответствии с Порядком проведения государственной итоговой аттестации по образовательным программам основного общего образования (приказ Минобрнауки России зарегистрирован Минюстом России 03.02.2014 № 000)
«48. Экзаменационные работы проверяются двумя экспертами. По результатам проверки эксперты независимо друг от друга выставляют баллы за каждый ответ на задания экзаменационной работы. В случае существенного расхождения в баллах, выставленных двумя экспертами, назначается третья проверка. Существенное расхождение в баллах определено в критериях оценивания по соответствующему учебному предмету.
Третий эксперт назначается председателем предметной комиссии из числа экспертов, ранее не проверявших экзаменационную работу.
Третьему эксперту предоставляется информация о баллах, выставленных экспертами, ранее проверявшими экзаменационную работу обучающегося. Баллы, выставленные третьим экспертом, являются окончательными.»
Ниже определено существенное расхождение в баллах по русскому языку и математике.
Существенным расхождением в баллах, выставленных двумя экспертами, является расхождение в 8 и более баллов.
В первом случае третий эксперт проверяет только ответ на то задание, которое было оценено двумя экспертами со столь существенным расхождением, во втором случае третий эксперт проверяет задания с расхождением баллов.