Педагогический анализ результатов Федерального Интернет-экзамена в сфере профессионального образования презентация

семинара Росакредагентства

образования и науки (Рособрнадзор) РАСПОРЯЖЕНИЕ 17.07.2006   N 1192-05 Москва
В соответствии с решением Аккредитационной коллегии Рособрнадзора от 01.06.2006 N 4-2006/АК, в целях обеспечения контроля качества образования:
Управлению лицензирования, аттестации и аккредитации Рособрнадзора (В.И. Круглову), Национальному аккредитационному агентству в сфере образования (В.Г. Наводнову) в срок до 01.09.2006 разработать методику использования технологии Интернет-тестирования по циклам общих гуманитарных и социально-экономических дисциплин, а также общих математических и естественнонаучных дисциплин при проведении аттестации образовательных учреждений по образовательным программам высшего профессионального образования.
Рекомендовать вузам (филиалам) использование технологии Интернет-тестирования, разработанной Национальным аккредитационным агентством в сфере образования, по указанным в п.1 циклам дисциплин при проведении самообследования.
Управлению лицензирования, аттестации и аккредитации Рособрнадзора (В.И. Круглову) довести настоящее распоряжение до сведения руководителей высших учебных заведений.
Контроль за исполнением настоящего распоряжения возложить на заместителя руководителя Е.Н.Геворкян.
Руководитель       В.А. Болотов

требованиям ГОС

мониторинг результатов этой оценки для образовательных программ

образования (декабрь 2007 г. - январь 2008 г.) представлены в виде:
Отчета по результатам тестирования
Информационно-аналитической карты «Педагогический анализ результатов тестирования на основе дисциплинарного (полидисциплинарного) подхода»

полидисциплинарное тестирование)

Показатели освоения ГОС для ООП, студенты которых принимали участие в Интернет-экзамене (дисциплинарное и полидисциплинарное тестирование)

элементов содержания (дидактических единиц) дисциплины на уровне, заданном в ГОС

Дидактическая единица (ДЕ) – раздел дисциплины

Освоение ДЕ – выполнение не менее половины заданий раздела

% правильно выполненных заданий

Дисциплина

Дидактическая

единица №1

Дидактическая

единица №2

...

Дидактическая

единица №k

Задание 1

Задание 2

Задание 3

Задание 4

Задание 1

Задание 2

Задание 3

Задание 4

Задание 1

Задание 2

Задание 3

Задание 4

Название

дисциплины

Контролируемые

в

АПИМ

дидактические

единицы

дисциплины

Задания

АПИМ

карта Шухарта - контрольный листок - диаграмма рассеивания - диаграмма Исикавы

95 % вопросов, связанных
с управлением качеством, можно решить на основе «семи методов управления качеством». Оставшиеся 5 % требуют для анализа более тонких методов.

ГОС для ООП вуза
1.2. Обобщенные результаты выполнения требований ГОС по циклам дисциплин для ООП вуза
2. Результаты тестирования студентов по ООП вуза
2.1. Результаты тестирования студентов ООП ……
2.2. Результаты тестирования студентов ООП …..
3. Педагогический анализ результатов тестирования студентов на соответствие требованиям ГОС
3.1. Дисциплина «Английский язык»
3.1.1. ООП 070601.65 «Дизайн»
Приложение 1. Методы анализа результатов дисциплинарного тестирования (модель оценки качества подготовки студентов
на соответствие требованиям ГОС, представление обобщенных
результатов для ООП вуза на основе педагогических измерений)

Дисциплина освоена, если не менее 50 % студентов, принимавших участие в Интернет-экзамене, освоили 100 % ДЕ дисциплины.
«−/+» Дисциплина освоена условно, если не менее 50 % студентов, принимавших участие в Интернет-экзамене, освоили не менее 70 % всех ДЕ дисциплины.
«−» Дисциплина не освоена, если более 50 % студентов, принимавших участие в Интернет-экзамене, освоили
менее 70 % всех ДЕ дисциплины.
« * » Выводы о соответствии качества подготовки студентов данной ООП требованиям ГОС по дисциплине являются статистически незначимыми (контингент менее 10 чел.).

освоению цикла дисциплин не приводятся (**), если сумма часов тестируемых дисциплин цикла составляет менее половины объема часов, отводимого в ГОС на изучение цикла, или количество часов по тестируемым дисциплинам данного цикла в ГОС отсутствует.
Выводы по освоению цикла дисциплин приводятся, если сумма часов тестируемых дисциплин цикла составляет не менее половины объема часов, отводимого в ГОС на изучение цикла. При этом полагается, что:
‑ цикл дисциплин освоен, если освоены дисциплины, количество часов по которым в сумме составляет не менее половины объема часов, отводимого в ГОС на изучение дисциплин цикла;
‑ цикл дисциплин освоен условно, если освоены и условно освоены или только условно освоены дисциплины, количество часов по которым в сумме составляет не менее половины объема часов, отводимого в ГОС на изучение дисциплин цикла;
‑ цикл дисциплин не освоен, если не освоены дисциплины, количество часов по которым в сумме составляет не менее половины объема часов, отводимого в ГОС на изучение дисциплин цикла.

(не менее 50 % студентов, принимавших участие
в Интернет-экзамене, освоили не менее 70 %
всех ДЕ дисциплины)
формирование устойчивого уровня усвоения материала
завершение процесса управляемого обучения
начало процесса самообучения
возможность самостоятельно видеть свои ошибки и исправлять их
улучшение качества усвоения дисциплины

деятельность выполняется с помощью извне (подсказка, намёк))
второй (репродуктивный) — воспроизведение (репродуктивная деятельность выполняется по памяти)
третий (продуктивный) — экспертный (деятельность осуществляется путём комбинирования известных методик )
четвертый (продуктивный) — творческий (деятельность сопровождается созданием новых оригинальных методик)

уровня подготовки по дисциплине

Декан, зав.кафедрой

целом по дисциплине
Диаграмма ранжирования ООП вуза по показателю освоения дисциплины на соответствие требованиям ГОС
Требования ГОС к обязательному минимуму содержания ООП по дисциплине
Структура АПИМ по дисциплине
Гистограмма плотности распределения результатов тестирования
Карта коэффициентов решаемости заданий по темам
Карта коэффициентов освоения ДЕ дисциплины

дисциплине

ГОС (по каждой дисциплине цикла)

гистограммы можно судить о характере распределения результатов для данной группы студентов

Гистограмма позволяет эффективно оценить расслоение результатов студентов по уровню подготовки

уровень подготовки испытуемых по отдельным темам измерительных материалов

По данному графику можно выявить темы, оказавшиеся трудными для студентов контролируемой группы (коэффициент решаемости менее 0,4)

тематических разделов дисциплины

Наглядно выявляются разделы, освоенные на недостаточном уровне (коэффициент освоения менее 0,7)

выполненных заданий и/или освоенных разделов
Рейтинг на курсе по уровню освоения совокупности дисциплин (цикла дисциплин) на уровне требований ГОС

выполнения требований ГОС для ООП вуза
1.2. Обобщенные результаты выполнения требований ГОС по циклам дисциплин для ООП вуза
2. Результаты полидисциплинарного тестирования студентов по ООП вуза
2.1. Результаты полидисциплинарного тестирования студентов ООП 030301.65
2.2. Результаты полидисциплинарного тестирования студентов ООП 030501.65
3. Содержательный анализ результатов педагогических измерений полидисциплинарного тестирования для ООП вуза
3.1. Цикл дисциплин ГСЭ
3.1.1. ООП 030301.65 «Психология»
3.2. Цикл дисциплин ЕН
3.2.1. ООП 030501.65 «Юриспруденция»
Приложение 1. Методы анализа результатов дисциплинарного тестирования (модель оценки качества подготовки студентов на соответствие требованиям ГОС, представление обобщенных результатов для ООП вуза на основе педагогических измерений, представление результатов педагогических измерений по дисциплине для отдельной ООП)
Приложение 2. Методы анализа результатов полидисциплинарного тестирования (модель полиАПИМ, модель оценки качества подготовки студентов на соответствие требованиям ГОС, представление обобщенных результатов полидисциплинарного тестирования для ООП вуза, представление результатов полидисциплинарного тестирования для отдельной ООП вуза)

по отдельной дисциплине

основе полидисциплинарного подхода

«+» Дисциплина освоена, если все контролируемые ДЕ дисциплины освоили не менее 50 % студентов.
«−» Дисциплина не освоена, если все контролируемые ДЕ дисциплины освоили менее 50 % студентов.
« * » Выводы о соответствии качества подготовки студентов данной ООП требованиям ГОС по дисциплине являются статистически незначимыми (контингент менее 10 чел.).

дисциплин по результатам полидисциплинарного тестирования не приводятся (**), если сумма часов, предусмотренных ГОС для изучения тестируемых дисциплин, составляет менее половины объема часов, отводимого в ГОС на изучение цикла, или количество часов по тестируемым дисциплинам данного цикла в ГОС отсутствует.
Выводы по освоению цикла дисциплин приводятся, если сумма часов тестируемых дисциплин цикла составляет не менее половины объема часов, отводимого в ГОС на изучение цикла. При этом полагается, что:
цикл дисциплин освоен, если показатель освоения совокупности дисциплин полиАПИМ не менее 50 %;
цикл дисциплин освоен условно, если показатель освоения совокупности дисциплин полиАПИМ менее 50 %, но при этом показатели освоения всех дисциплин полидисциплинарного тестирования не менее 50 %;
цикл дисциплин не освоен, если показатель освоения совокупности дисциплин полиАПИМ менее 50 %, и при этом показатели освоения некоторых дисциплин полидисциплинарного тестирования также менее 50%.

030000 - Гуманитарные науки;
080000 - Экономика и управление Дисциплина: Менеджмент

ГОС к обязательному минимуму содержания ООП по дисциплине
структура АПИМ по дисциплине
гистограмма плотности распределения результатов полидисциплинарного тестирования
карты коэффициентов решаемости заданий по дисциплинам
карта коэффициентов освоения ДЕ совокупности дисциплин

080105.65 «Финансы и кредит»

«Финансы и кредит»

для ООП: 080105.65 «Финансы и кредит»