Оценка стратегии и спецификация

3.1. Общие рекомендации

Оценивание регулируется Оценкой стратегии WorldSkills. Стратегия устанавливает принципы и приемы, которые должны соответствовать оценке, установленной правилами WorldSkills.

Экспертная практика оценки лежит в основе конкурса WorldSkills. По этой причине она предметом непрерывного профессионального развития и изучения. Рост информированности в области оценивания будет способствовать совершенствованию основных инструментов оценки, используемых конкурсом WorldSkills: Схема маркировки, Тестовый проект и информационной системы оценки (CIS).

В конкурсе WorldSkills оценка состоит из двух широких категорий: измерение и мнение судей. Соответственно они называются объектной и Judgement-оценкой. Для обоих типов оценки используются установленные критерии, по которым оценивается каждый аспект, который имеет большое значение для обеспечения качества в целом.

Схема маркировки должна следовать нормам нагрузки в рамках Технического описания. Тестовый проект - это средства оценки в рамках заявленных навыков на конкурсе и также должен следовать правилам Технического описания. Специализированная информационная система Конкурса предусматривает своевременную и точную запись оценок и имеет расширенный вспомогательный объем.

Схема маркировки, в общих чертах, будет сопровождать процесс создания Тестового проекта. После этого Схема маркировки и Тестовый проект будут разрабатываться и развиваться посредством итеративного процесса для того, чтобы совместно оптимизировать свои взаимоотношения в рамках Стандартной спецификации и Положения о стратегии оценки. Они будут согласованы с экспертами и представлены WSR для утверждения, чтобы продемонстрировать их качество и соответствие Стандартному руководству.

До представления на утверждение WSR Схемы маркировки и Тестового проекта будет поддерживаться связь с квалифицированными консультантами WSR для того, чтобы использовать данные конкурса (CIS).

Схема оценки

Общие правила

Этот раздел описывает роль и место Схемы оценки, каким образом эксперты оценивают работы конкурентов, демонстрируется на тестовом проекте, а также процедуры и требования к оценке участников.

Схема оценки - ключевой инструмент конкурса WorldSkills, с помощью которого можно оценить навыки участников (почти дословно: который связывает оценку участников с некими стандартами мастерства).

Он предназначен для оценки каждого этапа выполнения работ в соответствии с распределением значений "весов" в Спецификации стандартов.

На основе значений "весов" в Техническом описании, Схема оценки устанавливает параметры для тестового проекта. В зависимости от навыков (мастерства) и оценки их значимости, допустимо разработать более подробную Схему оценки, которая будет использоваться в качестве руководства для тестового проекта.

Кроме того, первоначальный тестовый проект может быть основан на плане Схемы оценки.

С этого момента Схема оценки и тестовый проект должны разрабатываться совместно.

Раздел 2.1, а также предыдущие разделы показывают до какой степени могут расходиться Схема оценки и тестовый проект от значений "весов" в Стандартных спецификациях, если нет практических альтернатив.

Схема оценки и тестовый проект могут быть разработаны одним человеком или несколько, или всеми экспертами.

Детализированная и финальная Схемы оценки и тестовый проект должны быть одобрены всем Экспертным Жюри до конкурса для предоставления независимого контроля качества. Исключением являются компетенции, которые используют внешнего специалиста для разработки Схемы оценки и тестового проекта.

Кроме того, рекомендуется представить экспертам свои Схемы оценки и тестовые проекты заранее до окончания работ для комментариев и предварительного одобрения, чтобы избежать разочарования или неудач на последних стадиях проекта. Эксперты также советуют работать с командой CIS на промежуточном этапе, для того, чтобы в полной мере воспользоваться возможностями CIS.

Во всех случаях полная и одобренная Схема оценки должна быть введена в CIS, по крайней мере, за 3 дня до проведения соревнования с использованием стандартной таблицы CIS или других согласованных методов.

Критерии оценки

Основные пункты (заголовки, разделы) Схемы оценки являются критериями оценки. Заголовки разделов получаются совместно с тестовым проектом. В соревнованиях Критерии оценки могут быть похожи на заголовки разделов в Стандартных спецификациях; в других они могут быть совершенно другими. Существует, как правило, 5-9 критериев оценки. Соответствуют они заголовкам или нет, Схема оценки должна отражать значения "весов" в Стандартных спецификациях.

Критерии оценки создаются людьми, разрабатывающими Схему оценки, они могут беспрепятственно определить критерии, которые они считают наиболее подходящими для оценки тестового проекта. Каждый критерий оценки определяется буквами (A-I).

Суммарная форма оценки генерируется CIS и будет включать в себя список Критериев оценки.

Оценка, по каждому из критериев будет рассчитана CIS. Оценки будут представлять собой совокупную сумму оценки, данную в отношении каждого элемента оценки в рамках этих Критериев оценки.

Подкритерии

Каждый Критерий оценки состоит из одного или нескольких подкритериев. Каждый подкритерий - заголовок раздела в Форме оценки WorldSkills.

Каждая Форма оценки (подкритерий) содержит информацию об определенном дне, в который он будет отмечен.

Каждая Форма оценки (подкритерий) содержит либо объективные или субъективные аспекты, которые должны быть оценены.

Некоторые подкритерии содержат в себе как объективные, так и субъективные аспекты, и в этом случае существует Форма оценки для каждого из них.

Аспекты

Каждый аспект определяется детально, каждый элемент маркируется и оценивается совместно с другими оценками или по инструкции, содержащей информацию о том, как должны оцениваться аспекты. Аспекты оцениваются объективно или субъективно и появляются в соответствующей Форме оценки.

Форма оценок – это детальный список, в котором каждый аспект отмечается совместно с оценкой (маркировкой), указывается ссылка на раздел навыков, как изложено в Стандартных спецификациях.

Суммарная оценка, по каждому аспекту должна находиться в пределах, указанных в Стандартных спецификациях. Это будет отображаться в таблице распределения оценок CIS, в следующем формате, когда Схема оценки проверяется за С-8 недель

4.5. Judgement (Мнение экспертов)

Judgement-оценка осуществляется в соответствии с правилами WorldSkills.

Оценка должна быть проведена с использованием:

· критериев с мнением экспертов по каждому аспекту

· с указанием следующего масштаба:

- 0 неприемлемо для коммерческого производства;

- 1: приемлемо для коммерческого производства;

- 2 приемлемо, с элементами более высокого качества;

- 3 превосходно.

Judgement-оценка не является субъективной оценкой.

Measurement (измерение)

Оценка производится в соответствии с правилами WorldSkills. Measurement-оценка используется.