Что такое мониторинг качества образования

Мониторинг качества образования

ШКОЛЬНЫЙ МОНИТОРИНГ

Понятие “мониторинг” пришло в педагогику из социологии. Образовательный мониторинг – это система организации, сбора, хранения, обработки и распространения информации.

Система мониторинга, сложившаяся в нашей школе, дает информацию не только об эффективности образовательного процесса, но и о творческом потенциале личности. Система отслеживания личностного развития ограничена отдельными параметрами и соблюдает определенные правила и условия работы школы.

В основу определения уровня личностного развития положены следующие критерии: способность ученика к самовыражению через понимание собственной индивидуальности и уникальности; степень ответственности за самого себя, свои поступки, адекватное реагирование на окружающий мир, самостоятельность в принятии решений, умение объяснять и доказывать свой выбор, умение прогнозировать возможные варианты развития поступков, степень зависимости в принятии решений и поступков от взрослых. Ребенок прослеживается в сравнении с самим собой.

В течение учебного года создается определенная база данных. Данные сообщаются по блокам и классифицируются в определенной системе. Создание такой базы является необходимым условием для анализа учебного года. Такой анализ служит нам основанием для прогнозирования дальнейшего развития школы, для постановки новых ближних и дальних целей.

За основу мы взяли направления, описанные Ю.А. Конаржевским: эффективность и действенность внутри школьную управления; состояние, эффективность и действенность инновационной работы в школе; состояние и результативность методической работы; уровень развития учащихся и состояние успеваемости, качество знаний, умений и навыков, анализ конечных результатов функционирования школы.

При формировании мониторинга школьного образования учитываются не только конечные результаты деятельности учебного заведения, но и факторы, влияющие на качество конечных результатов.

Остановлюсь подробнее на блоке “уровень обученности учащихся”. Качество обученности определяет:

СОДЕРЖАНИЕ ШКОЛЬНОГО МОНИТОРИНГА

В содержание мониторинга школьного образования включаются педагогические измерения:

Далее я раскрою содержание мониторинга состояния преподавания, потому как он относится к одной из самых актуальных задач управления. Для того, чтобы администрации можно было объективно судить о качестве преподавания по любому предмету и в любом классе, мы запускаем анкету качества урока.

Анкета качества урока

Отметить кружком номера тех проявлений, которые имели место при проведении урока по __________________________________________________________________________ учителем

(вписать предмет, класс)

(вписать фамилию, имя, отчество учителя)

1. Устно или письменно (для эксперимента) ставит цели развития личностных качеств учащихся на уроке (например, мышление, речь, воля, нравственность, коммуникативность, эстетическое воспитание и др.) и реализует их средствами учебного предмета.

2. Уверенно (профессионально) владеет учебным материалом.

3. Демонстрирует правильную, выразительную, ясную, точную, краткую, уместную речь.

4. Демонстрирует ненасильственные приемы обучения (не перебивает, не проявляет неприятия, раздражения, гнева, не навязывает точку зрения).

5. Устанавливает и использует связи с другими предметами.

6. Уместно использует материал из разных сфер жизнедеятельности (кроме учебных дисциплин).

7. Использует раздаточные, наглядные статичные материалы.

8. Использует динамические дидактические материалы (аудио, видео, компьютерные демонстрации, приборы и т.п.).

9. Дает разноуровневые домашние задания.

10. Стимулирует обоснование, аргументацию ответов, в том числе с использованием фактов из других областей знания.

11. Поощряет инициативу и самостоятельность учащихся.

12. Поощряет индивидуальные учебные достижения.

13. Предлагает задания, развивающие интуицию, творческое воображение, эмоциально-чувственное восприятие.

14. Обращает внимание на качество речи обучаемых.

15. Вовремя (без задержки) заканчивает урок.

На уроке использует приемы (методы) педагогических технологий:

16. Дифференцированного, в том числе индивидуализированного обучения (учитывает особенности темперамента, психосоматического типа, каналов восприятия, уровня понимания, типа мышления и т.д.)

17. Проблемного обучения (проблемные вопросы и ситуации, в том числе на стыке наук).

18. Диалогового обучения (свободное обсуждение и дискуссии).

19. Рефлексивного обучения (оценки учащихся полезности урока, своего психологического состояния).

20. Коллективной мыслительной деятельности.

21. Исключающие утомляемость, перегрузки обучаемых.

Дата _____________________ Эксперт _________________________________

Анкета создавалась учеными Пермского регионального института педагогических информационных технологий: доктором философских наук Е.А. Юниной и кандидатом технических наук А.И. Севруком. Это оптимальное количество пунктов, по которым вполне реально оценить качество проведенного урока. Конкретность формулировок пунктов анкеты позволяет использовать балльную систему оценки. Если каждый реализованный пункт анкеты оценивается одним баллом, то сумма баллов отражает интегральный рейтинг качества деятельности учителя на уроке.

Пригодность анкеты к оценкам состояния преподавания в школе можно обосновать с помощью табличных матриц соответствия пунктов анкеты критериям качества деятельности учителя на уроке. Рассмотрим следующие критерии: должностные обязанности учителя, профессиональную компетентность, результативность методической работы, развивающую направленность урока.

Для установления соответствия анкеты с должностными обязанностями учителя использованы общеизвестные тарифно-квафикационные характеристики. Виды деятельности, которые учитель реализует на уроке:

Матрица соответствия пунктов анкеты должностным обязанностям учителя представлена в таблице:

Источник

Мониторинг качества образования

В педагогику понятие “мониторинг” пришло из экологии социологии. В экологии мониторинг – это непрерывное слежение за состоянием окружающей среды с целью предупреждения нежелательных отклонений по важным параметрам.

“Педагогический мониторинг – это форма организации сбора, хранения, обработки и распространения информации о деятельности педагогической системы, обеспечивающая непрерывное слежение за её состоянием и прогнозирование её развития”.

Одним из важнейших условий повышения эффективности управления учебным процессом является систематический анализ объективных данных о состоянии результатов обучения учащихся. Без осуществления постоянной обратной связи процесс управления неэффективен, уровень эффективности принимаемых решений недостаточно высок. Такая обратная связь функционирует сегодня в практике недостаточно эффективно. Необходимым инструментом в решении этих проблем является мониторинг. Постоянный мониторинг за качеством учебного процесса, результатов обучения школьников становится особенно актуальным в условиях модернизации школы, обновления содержания образования, введения образовательных стандартов, нормализации учебной нагрузки обучающихся.

В настоящее время мониторинг все прочнее входит в систему образования. Сегодня как никогда возрос спрос на объективную информацию о результатах деятельности.

Исследованию проблем внедрения в практику новейших научно-педагогических технологий и достижений в области управлении посвящены труды отечественных педагогов С.А.Иванова, М.М. Поташника, В.И. Зверевой, В.П. Симонова и многих других ученых.

Всегда остается объективным вопрос: насколько объективно выставляются отметки? Для проведения такой работы желательно использовать в работе не только такой показатель как степень обученности по предмету, но и дисперсия стабильности успеваемости и коэффициент вариации. Всё это позволяет получить объективную картину соответствия выставленных оценок к их качественному показателю.

Возникают ситуации, когда нарушается соответствие выставленных оценок, и тогда делаются прогнозы-рекомендации, появляется необходимость совершенствования качества обучения не только по отдельным предметам, но и во всей школе.

В основу расчета СОУ желательно применять десятибалльную шкалу по Симонову В.П.

Симонов В.П. выделяет следующие уровни обученности:

I – различение;
II – запоминание;
III – понимание;
IV – элементарные умения и навыки;
V – перенос.

Всегда ли достаточно одних, даже очень хороших, индикаторов для качественного анализа? Что, если, например, средний балл успеваемости по классам приблизительно один и тот же, а соотношение пятерок, четверок и т.д. в этих классах различается, и весьма серьезно? Или как интерпретировать ситуацию, когда у одного преподавателя класс получает сплошь одинаковые оценки, допустим, “четверки”, а у другого по другому предмету – очень широкий диапазон успеваемости: от “пятерок” до “двоек”? Означает ли это, что осваивать один предмет дети могут примерно с одинаковым успехом, а другой предмет дается не всем? Или причина контраста успеваемости класса по разным предметам кроется в ином?

Помочь провести более тонкий анализ этих индикаторов может аппарат математической статистики, используя методику Иванова С.А.

Если сравнить классы только по среднему баллу, то можно сделать вывод, что ситуация во всех трех из них абсолютно одинаковая – везде учатся преимущественно “хорошисты”. Но если посмотреть на разброс оценок, то неизбежно возникнет вопрос, почему оценки оказались такими разными. Что стоит за таким разбросом оценок и как оценить сам этот разброс?

Разобраться в этом вопросе поможет математическая статистика. Для обобщенной характеристики некоторой совокупности признаков можно использовать средние значения этих признаков для данной совокупности. Что такое “средний балл”. Это рассчитанная средняя арифметическая величина из совокупности оценок, полученных классом. Простая средняя арифметическая рассчитывается как сумма отдельных значений признака, деленная на число этих значений. Рассчитывается средняя арифметическая по известной формуле:

где x₁, x₂, x₃,…,x_n отдельные значения признака (оценки учащихся в баллах), а n – число единиц совокупности (количество учеников в классе).

Для анализа разброса оценок (вариации значений признаков) используют дополнительные статистические приемы обработки. В частности, рассчитывают среднее линейное отклонение, дисперсию, среднее квадратическое отклонение, коэффициент вариации и пр.

Для того чтобы дать обобщающую характеристику распределению отклонений, исчисляют среднее линейное отклонение (d), которое учитывает различие всех единиц изучаемой совокупности. Среднее линейное отклонение определяется как средняя арифметическая из отклонений индивидуальных значений от средней, без учета знака этих отклонений:

Среднее квадратическое отклонение-это обобщающая характеристика абсолютных размеров вариации признака в совокупности. Выражается оно в тех же единицах измерения, что и признак, в нашем случае в баллах.

Среднее квадратическое отклонение дает обобщающую характеристику колеблемости всех вариантов совокупности. Чем меньше среднее квадратическое отклонение в нашем примере, тем более ровно по успеваемости учится класс. Иными словами, низкая величина среднего квадратического отклонения говорит о том, что в классе все успевают примерно в равной степени, нет резкой поляризации на “двоечников” и “отличников”.

С другой стороны, если величина среднего квадратического отклонения близка к нулю, это тоже определенный сигнал, но это сигнал о другом. Отсутствие каких-либо различий в уровне успеваемости различных учащихся может свидетельствовать либо о необъективности оценок, выставляемых этим учителем, либо о действии каких-либо иных факторов.

Высокое значение среднего квадратического отклонения также подлежит тщательному анализу. Непосредственно такая ситуация является сигналом того, что класс разделился на успевающих и неуспевающих. При даже относительно высоком среднем балле большая величина среднего квадратического отклонения говорит о том, что в классе много запущенных детей. Резкие различия в успеваемости могут быть следствием либо необъективности, либо педагогической некомпетентной преподавателя.

Для определения критичности ситуации используется такой статистический оператор, как коэффициент вариации:

Коэффициент вариации является наиболее распространенным индикатором колеблемости, используемым для оценки типичности средних величин. При этом исходят из того, что если V больше 40 %, то это говорит о чрезмерно большой колеблемости признака в изучаемой совокупности.

Анализируя с помощью статистических операторов ситуацию, мы видим, что при одинаковом среднем балле успеваемости, они весьма сильно различаются по разбросу величин статистических операторов, что обуславливается различиями в оценках конкретных учащихся.

Как видим, использовать данные статистики можно как для мониторинга качества образования внутри самой школы, так и для межшкольных сравнений. И в том и другом случае администрация школы получает дополнительные инструменты анализа деятельности отдельных классов, учителей. Но при этом очень важно, чтобы, во-первых, все индикаторы, методика их расчета были понятны всем участникам мониторинга, а во-вторых, чтобы исходные данные и результаты расчетов были доступны, легко проверяемы также любым участником мониторинга. И самое главное, индикаторы должны быть “привязаны” к целям анализа, предмету оценки.

Для учителя и администрации является трудоемким осуществить мониторинг учебной деятельности каждого ученика класса, но это необходимое условие при планировании индивидуальной работы с учащимися.

Для этих целей разработана программа объективности педагогической оценки и педагогической деятельности учителя за четверть или полугодие. Приложение 2, Приложение 3, Приложение 4. Примечание: Все приложения и папка basa (имя папки basa и входящих в неё папок и файлов не менять!) связаны между собой и должна находиться только в папке Приложение 1. Перемещать их в другие папки нельзя, т.к. при этом нарушиться работоспособность всей программы!

Программа разработана с учетом особенностей образовательного учреждения. Она может быть использована и легко адаптирована во всех общеобразовательных учреждениях, которые ведут обучение по 4 четвертям или по двум полугодиям.

Данная программа адресована для классных руководителей и администрации образовательных учреждений для автоматизации обработки результатов по итогам четверти, полугодия или года. Классный руководитель, после завершения отчетного периода вводит данные (список учащихся на данный учебный год (Приложение 2),текущие оценки по учебным предметам за четверть или полугодие (Приложение 3)). Автоматически формируются такие показатели: качество, успеваемость по классу и по каждому ученику; средний оценочный бал ученика; рейтинг ученика; средний балл по предмету, качество знаний по предмету, успеваемость по предмету, дисперсия стабильности успеваемости и коэффициент вариации (Приложение 4). Примечание: Приступая к работе, сначала запустите Приложение 2, после внесения всех данных выйдите из него.

Затем запустите Приложение 3,после внесения всех данных выйдите из него.

Запустив после Приложение 4, выберите учебный год, учителя, предмет и т.д. При выборе класса активируйте программу, кликнув по номеру класс, при этом изменится цвет окна класс, затем кликните по кнопке ВВОД– данные по классу, или данные по учителю.

Полученные материалы могут быть использованы классным руководителем при проведении классных родительских собраний и администрацией образовательного учреждения при прохождении аттестации учителя.

Необходимость и практическая значимость системного анализа качества образовательного процесса сейчас ни у кого уже не вызывает сомнения. Контроль в сфере обучения – дело важное, а системное его осуществление – одна из актуальных задач, без решения которой невозможно получить информацию о качестве различных инновационных технологий, сравнительной эффективности вариативного обучения, а также об индивидуальном развитии обучаемых.

Оценки учащихся за четверти и полугодия по предмету и пропущенные занятия записываются в отдельный файл. Программа обрабатывает внесенные данные по каждому ученику и по классу в целом. Выводятся традиционные данные: средний бал, процент успеваемости, процент качества знаний, процент пропусков и степень обученности.

Вместе с этим выводится рейтинг “Активность” учащихся в процентах. Он зависит от пропусков занятий, от активности ученика на уроках и от самого предмета, т.е. от его коэффициента.

Показатель “Рейтинг” отражает в большей степени работу учителя на уроке с данным учеником и с классом в целом. По этим показателям можно судить о том, применяет ли данный учитель современные педагогические и компьютерные технологии на занятиях, какова степень организации индивидуальной работы с учащимся. Этот показатель зависит количества часов по предмету, категории предмета, степени работы ученика на уроке.

РУД – рейтинг учебных достижений учащихся (средний балл по классу).

СОУ – степень обученности учащихся, выраженная в % зависит от уровня подготовки (обучения) учащихся (гуманитарный – уровень A, базовый – уровень B, профильный – уровень C) и трех уровней достижений учащихся (репродуктивный, конструктивный, творческий).

Результаты мониторинга по СОУ отражают процентные показатели обученности учащихся, полученные на основе методики В. П. Симонова: в переводе на десятибалльную систему оценивания. Рекомендуемая оценка рассчитывается по методике В. П. Симонова.

Разработанная педагогами методика расчета реальной степени обученности учащихся, которая по своей сути является статистическим методом, основана на эмпирическом подходе. Можно привести еще множество работ, рассматривающих проблему контроля и оценки знаний, умений и навыков учащихся, но их анализ показывает, что большая часть из них касается вопроса объективности оценки. Это можно объяснить тем, что объективность – основное требование к оценке знаний, умений и навыков учащихся, с одной стороны. С другой, оценка служит результативным средством стимулирования учения, формирования положительной мотивации, влияния на развитие личностных качеств ученика. Поэтому значимость оценки, разнообразие ее функций требуют таких показателей, которые отражали бы все стороны учебной деятельности школьников и обеспечивали их выявление. С этой точки зрения данная программа повышает ее диагностическую значимость и объективность.

Полученные результаты мониторинга позволяют проанализировать работу учителя. Сопоставление результатов мониторинга учебной деятельности с выявленными уровнем памяти, внимания, мышления, общих способностей, обучаемости учащихся, дает возможность корректировать деятельность учителя по осуществлению учебного процесса. Разрабатывать программу индивидуальной работы с классом, с отдельными учащимися.

Систематический анализ результатов мониторинга на каждом его этапе позволяет определить “болевые” точки, пробелы в процессе учебной деятельности, пути преодоления трудностей в обучении для каждого ученика.

Для работы требуется персональный компьютер с операционной системой Windows 95 (и выше).

Под входными данными понимают: список учеников (вводится один раз в начале учебного года), оценки учащихся (вводятся после каждой учебной четверти). После каждой учебной четверти классному руководителю необходимо проставить текущие оценки и сохранить отчет. Все остальные выходные данные в программе обрабатываются автоматически. Также генерируются такие показатели: средний балл учащегося, статус учащегося, качество знаний по классу, успеваемость по классу, качество знаний по каждому учащемуся, успеваемость по каждому учащемуся, коэффициент вариации, персональная информация по каждому учителю предметнику (качество, успеваемость, средний балл, СОУ, коэффициент вариации). С отстающими учащимися проводится работа по ликвидации пробелов в знаниях.

Гласность результатов работы стимулирует учителя к добросовестному отношению к своей работе, качественному проведению уроков, системы индивидуальной работы, направленной на конечный результат.

Использование информационных технологий значительно облегчает и ускоряет проведение подобных расчетов. Показатели степени обученности учащихся, коэффициент вариации и дисперсия стабильности успеваемости могут служить оценкой фактической эффективности деятельности преподавателя. При этом учитель заботится о прочности, глубине и осознанности знаний, которые получают ученики. Именно эти показатели и определяют высокое качество образования. Применение данной методики позволяет получать более достоверную рейтинговую оценку и проводить качественный мониторинг образовательного процесса.

Источник

Мониторинг качества образования, экспертно-диагностическая служба

Термин мониторинг качества образования является новым для отечественной педагогики. Его появление связано с реформирова­нием системы образования России, проникновением рыночных отношений в сферу образования и теми противоречиями, которые возникают на рынке образовательных услуг. Важность социальной защиты потребителя образовательных услуг диктует необходимость государственного контроля за качеством образования.

Слово «мониторинг» происходит от латинского слова monitor^ (мо­нитор) и означает наблюдение за состоянием окружающей среды, техногенных систем и т.д. с целью их контроля, прогноза и охраны.

Мониторинг качества образования— понятие емкое и много­гранное. Применительно к системе дошкольного образования можно выделить следующие грани мониторинга:

• систематическая и регулярная процедура сбора, экспертизы и оценки
качества образовательных услуг дошкольных учреждений на нацио­
нальном, региональном и местном уровнях (включая конкретные
образовательные учреждения) в целях развития системы дошкольно­
го образования, своевременного предотвращения неблагоприятных или
критических, недопустимых ситуаций в данной сфере;

• относительно самостоятельное звено в управленческом цикле,
обеспечивающее выявление и оценки проведенных действий, ме-

роприятий для установления обратной связи, т. е. о соответствии фактических результатов деятельности педагогической системы ее конечным целям;

• возможность правильно оценить степень, направление и причи­
ны отклонений.

В масштабах государства мониторинг качества дошкольного образования представляет собой систему, главными элементами которой выступают:

• разработка государственных (региональных) стандартов до­
школьного образования;

• операционализация стандартов в индикаторах (показателях,
измеряемых величинах), установление критериев, по которым мож­
но судить о достижении стандартов;

• проведение научно-педагогической экспертизы (аттестации),
сбор данных и оценка результативности и качества образователь­
ных услуг ДОУ;

• принятие соответствующих мер, обеспечивающих позитивное
развитие системы дошкольного образования, оценку результатов
принятых мер в соответствии со стандартами;

• возможность изменения, корректировки самого стандарта.

Как видим, мониторинг базируется на стандарте, эталоне, нор­ме. Нормирование — одно из самых необходимых условий и осно­ваний мониторинга, поскольку именно с эталоном сравниваются фактические результаты.

Мониторинг будет эффективен, если нормы и стандарты кор­ректно заданы. По мнению академика РАО, доктора педагогиче­ских наук, профессора М.М. Поташника, слабость педагогики в том, что она не может точно назвать параметры, критерии, пока­затели и т.п., по которым можно было бы определить результаты педагогической деятельности — результаты образования. Это обус­ловливает одну из сложнейших проблем мониторинга — проблему измеримости его показателей.

Существуют количественные и качественные способы (методы) оценки. Однако результаты качества образования, особенно на эта­пе дошкольного периода, трудно измеримы количественно. Боль­шинство результатов образования, связанных с оценкой личност­ного развития, воспитанностью ребенка, можно определить толь­ко квалиметрически — качественно, описательно или в виде балль­ной шкалы, показателей уровней развития. Определение таких показателей осуществляется в исследовательско-эксперименталь-ном режиме, а оценка результатов требует экспертной оценки.

Весьма важно также, чтобы стандарт был оптимальным. Его за­вышение вызывает чрезмерную напряженность, тревогу, неуверен­ность у всех участников образовательного процесса. Заниженный стандарт расхолаживает, парализует активность, провоцирует со­стояние благодушия и безделья.

Следует подчеркнуть также, что мониторинг — это не только основа отслеживания курса движения к заявленным целям, но и механизм их корректировки и путей достижения. Сам по себе мо­ниторинг не может повысить качества образования — он только помогает его отслеживать. Для повышения качества образования, как правило, нужны нововведения, инновационный процесс.

Для осуществления мониторинга необходимо наличие аппара­та мониторинга, т. е. отдельных лиц (экспертов, менеджеров обра­зования) или коллективного органа, реализующего механизм мо­ниторинга.

В настоящее время мониторинг осуществляется практически на всех структурных уровнях системы дошкольного образования. Ниже представлена классификация видов мониторинга дошкольного об­разования.

В масштабах государства мониторинг качества образования осу­ществляет экспертно-диагностическая служба. В Москве функцио­нирует Федеральный экспертный совет по общему образованию, созданный в 1990 г. в целях осуществления федеральной политики в области образования совершенствования гласной, независимой и компетентной экспертизы стандартов образования, учебной ли­тературы, учебных материалов.

Учредителем Федерального экспертного совета является Ми­нистерство образования (МО) Российской Федерации, оно осу­ществляет его финансирование и материально-техническое обес­печение. Совет дает разрешение на массовое издание учебно-ме­тодической и научной литературы, сам осуществляет издательскую деятельность; взаимодействует с научно-исследовательскими ин­ститутами и центрами Российской академии наук и Российской академии образования, методическими и экспертными советами ко­митетов, департаментов по образованию краев, областей, Москвы и Санкт-Петербурга; привлекает к экспертизе крупнейших ученых, наиболее компетентных специалистов. Президиум Экспертного со­вета формирует состав секций, определяет статус эксперта.

Мониторинг качества образования осуществляют также эксперт­ные комиссии по аттестации и аккредитации образовательных уч­реждений, педагогических и руководящих кадров системы образо­вания.

Экспертный метод как механизм научно-педагогической экспертизы

Механизмом, позволяющим проводить научно-педагогическую экспертизу, является экспертный метод, или метод экспертных оценок.

Экспертный метод — это комплекс логических и математических процедур, направленных на получение информации, ее анализ и обоб­щение с целью подготовки и принятия компетентного управленчес­кого решения.

Суть метода состоит в проведении экспертами анализа проблемы с качественной и количественной оценкой суждений и формальной обработкой результатов индивидуальных экспертных оценок.

Метод экспертных оценок позволяет анализировать сложные педагогические процессы, явления или ситуации, которые харак­теризуются в основном качественными, неформализуемыми при­знаками (что затрудняет их анализ и оценку). Метод экспертных оценок используется при прогнозировании развития системы об­разования в ее взаимосвязи с социальной средой, для определения и ранжирования по заданному критерию наиболее существенных факторов, влияющих на функционирование и развитие педагоги­ческой системы. Данный метод обеспечивает оценку альтернатив­ных решений и выбор предпочтительных вариантов решения.

Метод экспертных оценок имеет логически взаимосвязанные этапы, которые являются основными этапами педагогической экс­пертизы.

Начальный этап (организация экспертизы) включает:

• определение цели и задач экспертизы, постановку проблемы;

• определение меры ответственности, прав и полномочий рабо­
чей группы экспертов;

• установление сроков проведения экспертизы;

• подбор экспертов, формирование экспертных групп (при не­
обходимости определение их компетентности).

Основной этап экспертизы связан со сбором данных, про­ведением исследовательской работы и экспертной оценкой, ана­лизом имеющегося материала. Технология экспертизы, использо­вание совокупности методов и критериев оценки зависят от ха­рактера экспертизы, области ее применения.

Для педагогической экспертизы чаще всего требуется разработ­ка анкет, опросников, тестов, контрольно-диагностических зада­ний. Экспертная оценка является результатом аналитической дея­тельности, основана на умении видеть и разрешать противоречия, прогнозировать, предвидеть и находить нестандартные способы решения.

Завершающий этап экспертизы — опрос экспертов (ин­дивидуальный или групповой; личный, очный или заочный; устный или письменный), оформление документа (отчет, справка, рецен­зия и пр.), принятие экспертного заключения — основы для компе­тентного управленческого решения, которое принимает менеджер.

«Экспертное заключение» и «экспертная оценка» — понятия близкие, но не тождественные.

Экспертное заключение— это документ, оформленный в соот­ветствии с установленными требованиями и содержащий мотивиро­ванную экспертную оценку, т. е. мнение, суждение эксперта о пред­мете экспертизы.

В зависимости от области применения экспертных методов в педагогике возможны индивидуальные, групповые и коллективные эк­спертные оценки. Для принятия важных экспертных заключений о перспективах и концепциях развития системы образования, госу­дарственных стандартах образования, новых образовательных про­граммах используется метод коллективных экспертных оценок. Чет­ко регламентирован количественный состав членов экспертной группы при проведении аттестации образовательных учреждений.

Методы коллективной работы экспертов — совещания, дискус­сии, «мозговая атака», а также деловые игры.

Смысл коллективных методов работы экспертов состоит в ак­тивизации коллективного поиска решения проблемы путем сбора идей и предложений, возникающих в процессе дискуссии.

Так, метод «мозговой атаки» может быть рекомендован для на­хождения нетрадиционного, оригинального решения в предельно сжатые сроки. Возможны разные способы организации «мозговой атаки». Например, после определения проблемы и задач для поис-

ка решения, знакомства с правилами «мозговой атаки», форми­рования рабочих групп (3 — 5 человек) дают сигнал к «мозговому штурму», и начинается генерирование идей, которые фиксируют­ся без обсуждения и критических замечаний (возможны только уточняющие вопросы). После завершения «мозгового штурма» все высказанные идеи анализируют на основе ранее определенных кри­териев и подвергают экспертной оценке.

Для получения обобщенного суждения экспертов относительно прост и удобен метод ранговых оценок. Он заключается в том, что любую изучаемую информацию располагают в порядке возраста­ния или убывания величины признака. Каждому признаку припи­сывают число, обозначающее его ранг. Полученные результаты лег­ко поддаются математической обработке. Проверку согласованно­сти ранжировок определяют вычислением коэффициента ранго­вой корреляции Спирмена или коэффициента конкордации.

Индивидуальные экспертные оценки могут быть получены путем анкетирования, интервью, свободной беседы.

Для проведения педагогической экспертизы целесообразно ис­пользовать уже разработанные, апробированные, доказавшие свою валидность и объективность методики: они, как правило, являют­ся результатом психолого-педагогических исследований. Если же таких методик нет, их приходится разрабатывать самим экспер­там.

Требует разработки и определение критериев экспертной оцен­ки. Алгоритм разработки:

• определяется номенклатура уровней (высокий, средний, низ­
кий или оптимальный, допустимый, недопустимый и т.д.);

• отрабатывается набор показателей, которые в совокупности
характеризуют уровень развития оцениваемого качества, парамет­
ра, результата.

При разработке показателей исходят из того, что каждый из критериев оценки, например материально-технические и медико-социальные условия пребывания детей в дошкольном образова­тельном учреждении, может быть представлен как совокупность подкритериев более низкого уровня (предметная развивающая сре­да, безопасность ребенка, охрана здоровья), а они, в свою оче­редь, — в виде совокупности подкритериев еще более низкого уровня и т.д. Этот процесс повторяют до тех пор, пока не появля­ется возможность определить для каждого из критериев и подкри­териев один или несколько показателей оценки (наличие обору­дования, игрушек и пособий, показатели заболеваемости и трав­матизма, санитарное состояние помещений и территории детско­го сада, сформированность культурно-гигиенических навыков, уровень самотического, психофизического здоровья детей и т.д.), значение которых определяют с помощью измерительных методик или экспертной оценки.

Обзор развития методов экспертных оценок в образовании по­казывает тенденцию к разработке методов, позволяющих конкрет­но обозначить, определить, назвать и измерить результаты педаго­гической деятельности, подвергнуть их программно-техническим средствам обработки.

Достоверность экспертной оценки зависит от компетенции экс­перта. Независимо от уровня экспертизы ее должны давать наибо­лее квалифицированные специалисты. Общие требования, предъяв­ляемые к эксперту:

• креативность, развитые творческие способности, позволяю­
щие анализировать проблемные ситуации и находить пути разре­
шения противоречий;

• отсутствие склонности к конформизму, принятию мнения боль­
шинства;

• аналитичность, широта и конструктивность мышления;

• позитивное отношение к инновациям, отсутствие консерватиз­
ма, т. е. стремления придерживаться однажды избранной позиции.

Для независимой экспертизы весьма важна этика поведения экс­перта, прежде всего его честность, неподкупность, ответственность.

Наиболее простым способом оценки компетентности экспер­тов в области педагогики является анкетирование, разработанное в логике «постадийного развертывания вопроса» (Г. Гэллап):

• вопрос-фильтр, позволяющий выявить осведомленность оп­
рашиваемого о проблеме;

• вопрос, направленный на выявление общего отношения оп­
рашиваемого к проблеме (открытый, не предусматривающий ва­
риантов выбора ответа);

• вопрос для получения ответа по конкретному аспекту пробле­
мы (закрытый, предполагающий варианты готовых ответов);

• вопрос, позволяющий выявить причины взглядов, мотивацию
его суждений (полузакрытый);

• вопрос на выявление устойчивости взглядов опрашиваемого
на проблему (в закрытой форме).

Понятие статус эксперта обозначает совокупность прав и обязан­ностей, полномочия и ответственность эксперта. Определяется на основе нормативно-правовых документов и утверждается прези­диумом «кспертного совета.

Системно-комплексный подход в научно-педагогической

Изучение сущности и экспертная оценка эффективности функ­ционирования педагогических систем требуют системно-комплек­сного подхода (Т. И. Шамова).

Его необходимость диктуется самой жизнью, прежде всего вы­сокой степенью интеграции общественных процессов, где «все связано со всем», решение одной проблемы зависит от решения множества других, а сами проблемы приобретают системный, ком­плексный характер (В.Г.Афанасьев).

Осуществляя научно-педагогическую экспертизу, давая эксперт­ную оценку, важно помнить, что и любое дошкольное образова­тельное учреждение, и вся система дошкольного образования — это целостная социально-педагогическая система.

Под системой понимается совокупность определенных элемен­тов, которые взаимодействуют между собой и образуют целост­ность, единство. Единство компонентов и их взаимодействие об­разуют систему в рамках заданного качества, обеспечивают ее фун­кционирование и развитие. Поэтому, осуществляя научно-педаго­гическую экспертизу, эксперт имеет дело с системой в ее целост­ности.

Адекватная экспертная оценка основана на умении расчленять систему на подсистемы, блоки, структурообразующие компонен­ты, учитывать их взаимосвязи, а также осознании того, что целост­ность системы порождает качественно новые свойства, которые отсутствуют у ее компонентов.

Педагогические системы создаются и действуют с определен­ной целью, при этом цель является системообразующим компо­нентом. Необходимость ее достижения связана с комплексом средств и действий по ее реализации.

Реализация цели — функция педагогической системы. Будучи активными в реализации целей, педагогические системы опреде­ляются как целеустремленные, целенаправленные. Отличительным признаком всех целенаправленных систем выступает их полифунк­циональность — способность видоизменять цели и корректировать действия для достижения результатов. Достижение промежуточных ‘»итогов, т.е. подцелей, вследствие функционирования компонен­тов педагогической системы указывает на другой аспект систем­ности — системно-функциональный.

Особенностью педагогических систем является их теснейшая связь с внешней средой, зависимость от социально-политических, экономи­ческих, бытовых, природно-экологических условий. Эксперт должен помнить, что педагогические системы исторически обусловлены. По мере общественного, социального и научно-технического про­гресса они совершенствуются в содержательном, структурном, функциональном и историческом аспектах.

Функционируя и развиваясь во внешней по отношению к себе среде, педагогическая система как открытая связана со средой множеством информативно-коммуникативных связей. При этом системы более высокого уровня (государственная, политическая, экономическая и др.) ставят перед низшими подсистемами, в том

числе и педагогическими, цели и задачи, выделяют ресурсы, ус­танавливают ограничения. Здесь в самом общем виде проявляется информационно-коммуникативный аспект системности.

Исходя из данных положений, научно-педагогическая экспер­тиза, экспертные оценки в образовании требуют системного и все­стороннего комплексного анализа результатов управленческой и педагогической деятельности. Важны также определение специфиче­ских условий и проблем социума, их влияние на дошкольное уч­реждение или систему дошкольного образования в целом.

С учетом открытости, динамичности и целеустремленности пе­дагогических систем их следует относить к числу развивающихся, которым присущи внутренние противоречия. Благодаря управле­нию происходящие в педагогических системах изменения носят не стихийный, а упорядоченный характер.

Структурно-функциональная упорядоченность компонентов, их интеграция и взаимодействие с окружающей средой обеспечива­ются органами внутреннего управления и механизмами управле­ния. В этом плане педагогические системы проявляются как само­управляемые (Т. И. Шамова).

Названные положения являются основополагающими при про­ведении научно-педагогической экспертизы и требуют от экспер­та выявления закономерных связей, определяющих уровень целост­ности системы управления дошкольными образовательными учреж­дениями как по вертикали (субординационные связи управления), так и по горизонтали (координационные связи). Экспертный подход в оценке эффективности существующей системы образования обес­печивает основу для принятия грамотного управленческого реше­ния, совершенствования динамичной структуры и технологии уп­равления как образовательным учреждением, так и системой об­разования в целом.

Таким образом, экспертные оценки в образовании требуют си­стемного видения действительности. Суть системного подхода со­стоит в том, что каждый сложный объект рассматривается как си­стема, взаимодействующая с другими системами и подсистемами.

Источник