Фонды оценочных средств, разработка и экспертиза презентация

материалам Челышковой М.Б.)

Кибальченко Ирина Александровны
Южный федеральный университет, ИКТИБ
http://pibg.tti.sfedu.ru

освоения образовательной программы, т.е. всю совокупность компетенций, которая установлена образовательной организацией для данной образовательной программы

в вузе
Положение о ФОС вуза
Методические указания по формированию ФОС
Требования к ФОС в рамках реализуемой ОП
Паспорта оценочных средств
Рецензии на оценочные средства

этапов их формирования в процессе освоения ОП;
описание показателей и критериев оценивания компетенций на различных этапах их формирования, описание шкал оценивания;
типовые контрольные задания или иные материалы, необходимые для оценки знаний, умений, навыков и (или) опыта деятельности, характеризующие этапы формирования компетенций в процессе освоения образовательной программы;
методические материалы, определяющие процедуры оценивания знаний, умений, навыков и (или) опыта деятельности и характеризующие этапы формирования компетенций

19.12.2013 № 1367)

Разрабатывается для итоговой (государственной) аттестации и включает в себя:
Перечень компетенций
Описание показателей и критериев оценивания, а также шкал оценивания
Типовые контрольные задания или иные материалы, необходимые для оценки результатов освоения ОП (компетенций)
Методические материалы, определяющие процедуры оценивания

интерпретировать оценки освоения компетенций?

умений и навыков по дисциплинам и практикам, формирующим части компетенций

На основе результатов оценивания опыта деятельности на этапах формирования компетенции (группы компетенций)

и (или)

проведения контроля
• Метод оценивания (экспертный, автоматизированный)
• Критерии оценивания результатов
• Дата последней коррекции заданий

(Росаккредагенство)

необходимы специальные методы и средства контроля
многофункциональны и надпредметны, поэтому необходимы полидисциплинарные модули в образовательных программах
носят по проявлению отсроченный характер, поэтому необходимо оценивать уровень их освоения в обучении, прогнозируя владение компетенциями в профессиональной деятельности
имеют обобщенный характер , поэтому нуждаются в операционализации (представлении в форме индикаторов, понятных для обучения и пригодных для измерений)

проявления на языке требований квалификационных характеристик или профессиональных стандартов

компетенций ФГОС.
2. Построение профессионального профиля деятельности специалиста на основе компетенций ФГОС в соответствии с направленностью ОП
3. Установление связи каждой компетенции ФГОС с квалификационными требованиями или требованиями профессиональных стандартов (по образовательной программе)
4. Разработка паспортов компетенций

у студента
6. Выбор оптимальных методов формирования каждой компетенции в обучении (для рабочих программ дисциплин)
7. Выбор оптимальных контрольно-оценочных средств для промежуточной аттестации (для рабочих программ дисциплин)
8. Выбор оптимальной модели измерителей для итоговой аттестации (для образовательной программы)

специальные полидисциплинарные измерители, гарантирующие оценивание компетенций.
Оценки прогнозируют успехи в дальнейшей профессиональной деятельности после окончания обучения

компетентностной модели деятельности специалиста;
разработка моделей многоуровневых измерителей;
проведение оценочных процедур и сбор эмпирических данных на репрезентативной выборке испытуемых;
проведение факторного анализа эмпирических данных, коррекция структуры кластеров и компетентностной модели;
проведение анкетирования работодателей по результатам сертификации квалификаций;
оценка прогностической валидности измерителей, их надежности и конструктной валидности;
проведение линейного иерархического анализа данных с целью выявления главных факторов (кластеров) влияния и тенденций в отрасли

если:

А. Грамотно составлять задание, используя рекомендации приведенные выше.
Б. Использовать при проверке только разработанную стандартизированную схему оценивания не более, чем с тремя оценочными категориями (0, 1, 2).
В. Обучить экспертов по проверке заданий пользовать стандартизированными критериями оценивания.
Г. Привлекать не менее двух экспертов для проверки каждого задания и приглашать третьего эксперта в случае расхождений первых двух экспертов более, чем на один балл.
Д. Использовать принцип анонимности проверяемых работ и независимость экспертных суждений.
Е. Не смотреть на оценку, данную предыдущему заданию, при оценивании последующего.

коллективов
- выбор модели измерителя
- операционализация компетенций
- разработка спецификаций вариантов измерителей
- разработка авторских версий компетентностных заданий
- экспертиза заданий
- коррекция заданий
- апробация заданий на выборке студентов
- повторная коррекция заданий

образования

используются для повышения
точности и обоснованности
аттестационных решений

= «тесты для экзаменов высокой значимости» измерители для итоговой аттестации

собеседование в форме структурированного интервью

Субтест для проверки основных знаний и умений, необходимых для выполнения должностных обязанностей (задания с выбором ответов)

Диапазон базовой компетентности

Компетентностно-ориентированный субтест для оценки уровня освоения компетенций (задания с конструируемыми ответами)

Пороговый балл

Пороговый балл

- 7 заданий)

Диапазон базовой компетентности
Компетентностные тесты (задания с конструируемым ответом) или тесты практической деятельности в профессиональной области
(10 - 15 заданий)

Диапазон минимальной компетентности

Тест с выбором ответов
(20 и более заданий)

100

90

80

10

20

0

30

40

50

60

70

Построение профессионального профиля деятельности специалиста на основе квалификационных требований или профессиональных стандартов.
3. Выделение ядра профиля профессиональной деятельности посредством установления связи каждой компетенции ФГОС с квалификационными требованиями, разработка паспортов
4. Представление каждой компетенции в форме признаков проявления по нескольким диапазонам на языке квалификационных требований.
5. Выделение дисциплин, на основе которых формируются эти признаки у студента.
6. Разработка модели, спецификации и отбор содержания измерителей
7. Разработка компетентностно-ориентированных заданий для измерителей

заданий.
10. Обработка результатов апробации, анализ и интерпретация
11. Коррекция заданий.
12. Помещение заданий в банк

виду профессиональной деятельности специалистов:
Перечень компетенций
Перечень трудовых функций
Паспорта компетенций с дескрипторами по трем уровням (минимальный, базовый, повышенный)
Спецификации измерителя (отдельно для каждой части)
Задания с оценками параметра трудности и др.
Описание показателей и критериев оценивания, а также шкал оценивания

действия по трем уровням (минимальный, базовый, повышенный)

2-й: сгруппировать трудовые функции в кластеры и представить их через трудовые действия по трем уровням

части)
Описание общей структуры измерителя и временных интервалов между частями
Число заданий различной формы с ключами ответов и оценочных рубрик(для каждой части)
Число параллельных вариантов
Рекомендуемое время выполнения (для каждой части)

функциям с их перечнями (для каждой части)
Рекомендации по периоду апробации
Рекомендуемый порядок расположения заданий

заданий
- оценка уровня трудности содержания каждого задания
- оценка уровня значимости содержания каждого задания
- оценка логической корректности задания
- оценка правильности ответов или оценочных категорий при конструируемом ответе
- оценка качества формулировок содержательной основы заданий с позиций тестовой технологии
Второе направление - анализ качества содержания всего измерителя:
- оценка полноты охвата требований ФГОС или ПС
- правильность пропорций содержания
- соответствие пропорций содержания спецификации
Третье направление - подготовка общего заключения и обобщающих выводов и рекомендаций по улучшению содержания измерителя

выводов (0-2)
3. Самостоятельность и логика представления материала (0-2)
4. Наличие нестандартных решений проблем (0-3)
5. Полнота и обоснованность ответов (0-2)

применять знания
Умений анализа
Умений синтеза
Рефлексивности
Креативности
др.

результатах ФГОС профессиональных компетенций, согласованных и одобряемых профессиональным сообществом/работодателями
Наличие измерительных материалов/инструментов и процедур для оценки профессиональных компетенций (отраженных в профессиональных стандартах), привлечение к их разработке работодателей
Участие работодателей в различных формах аттестации
НИРС и проекты по заказу работодателей
Наличие различных форм вовлечения студентов в профессиональную деятельность в рамках учебного процесса
Организация полноценных практик студентов
Использование образовательных технологий, адекватных формированию задаче профессиональных компетенций