Мониторинг результатов деятельности учреждения

дополнительного образования детей

Оценка качества дополнительного образования детей

� Оценивание – это сопоставление полученных результатов с предполагаемыми или заданными по определенным критериям или как качественный анализ деятельности относительно реализации целей.

Оценка качества дополнительного образования детей

� Внешняя оценка

� Внутренняя оценка

Внешняя оценка качества дополнительного образования детей осуществляется в процессе:

� экспертных проверок, � аттестации педагогических и руководящих кадров ОУ

� и в других ситуациях.

Что отслеживается в процессе аттестации учреждения?

� соответствие дополнительных образовательных программ, реализуемых в учреждении требованиям к ним –по структуре, целям, содержанию, формам и методам организации образовательной деятельности, результатам;

� полнота реализации дополнительных образовательных программ –по полноте реализации целей, объема программы (по содержанию и времени его освоения);

� уровень реализации программ –по срокам реализации, возрасту детей;

� направленности реализации программ –по количеству направленностей, реализуемых дополнительными образовательными программами;

� уровень сохранности контингента –по возрасту и годам обучения;� качество подготовки выпускников –по результативности участия воспитанников и коллективов УДО в конкурсах, олимпиадах, выставках, концертах, соревнованиях, конференциях и т.д., количеству поступлений в средние специальные и высшие учебные заведения по профилю деятельности.

Внутренняя оценка качества дополнительного образования детей

осуществляется в процессе:

� внутреннего контроля, � самоанализа деятельности,� Мониторинга результатов деятельности.

Поскольку эта процедура не задается извне, учреждение само устанавливает, что и как

будет оцениваться.

Мониторинг – это:� оценка соответствия фактических результатов заявленным целям, образовательным потребностям населения;

� измерение изменений во внутренних и внешних элементах системы деятельности образовательного учреждения;

� система критериев, показателей и технологий отслеживания состояния и развития образовательного процесса;

� функция управления, обеспечивающая получение обратной связи для принятия управленческих решений по регулированию и коррекции образовательного процесса.

Мониторинг – это:� системное наблюдение с целью контроля, оценки, прогноза качества образования;

� система сбора, анализа, обработки, хранения, представления информации; информационная база управления, система построения информационных потоков в образовательном учреждении;

� система выявления и оценивания промежуточных результатов и факторов, влияющих на них.

Субъект, объект и предмет мониторинга в УДО

� Субъектом мониторинга является не только тот, кто собственно выполняет оценочную деятельность, но и тот, результат чьей деятельности оценивается.

� Объектом мониторинга в соответствии с современными требованиями к образованию детей может быть, например: цель деятельности, результаты обучения, воспитания, развития детей, результаты реализации социально-педагогических функций

Предмет мониторинга – динамика изменения результата

� Предметом мониторинга на уровне ребенка могут стать изменения в личности ребенка –изменения в уровне его знаний, умений, навыков, черт характера, поведения, мотивов, эмоций, волевых устремлений, саморегуляции и других.

� Предметом мониторинга на уровне педагога могут стать изменения в профессиональной позиции педагога –изменения в уровне построения отношений с детьми в образовательном процессе, достижения профессиональных целей, личностного роста и др.

� Предмет мониторинга на уровне учреждения -реализация целей деятельности учреждения и влияния на достижение результата состояния всех компонентов системы деятельности.

Трудности организации мониторинговой деятельности в УДО� Проблемы качества и стандартизации дополнительного образования детей;

� Недостаточная разработанность содержания деятельности УДО;

� Сложность организации дополнительного образования детей;

� Несовпадение целевых ориентаций субъектов деятельности;

� Система дополнительного образования детей недостаточно обеспечена профессиональными кадрами;

� Трудности практической реализации процесса мониторинга.

Трудность в работе с целями и результатами деятельности УДО

� многие результаты дополнительного образования детей трудно определить, для их фиксации нужны специальные измерения, описания, характеристики, параметры;

� дополнительное образование детей само по себе должно являться комплексным результатом, интегрирующим результаты обучения, воспитания и развития ребенка;

� многие результаты дополнительного образования детей отсрочены во времени, поэтому в ходе образовательной деятельности не могут быть зафиксированы;

� часто образовательную деятельность невозможно оценить как положительную или отрицательную для ребенка;

� многие результаты зависят от огромного числа факторов, в том числе и случайных.

Критерии и показатели мониторинга

� Критерий – мерило, оценка, суждение; правило, признак, на основе которого можно судить о достоверности или ценности чего-либо.

� Показатель – данные, по которым можно судить о состоянии или развитии чего-либо.

Критерии и показатели мониторинга

Для упрощения работы с разными критериями и показателями, их можно объединить в две группы:

� продуктивность, которая чаще выражается в единицах продукции, соотнесенных с затратами на ее производство;

� удовлетворенность, которая понимается как психологическое состояние, вызванное соотношением определенных притязаний человека и возможностью его осуществления.

Критерии и показатели мониторинга

Удовлетворенность будет выражаться в том, насколько субъекты дополнительного образования разделяют его цели, участвуют в реализации, довольны результатами

Показатели мониторинга� 1 группа – количественные показатели, которые дают частичное представление о результатах деятельности УДО.

К ним можно отнести: охват детей, сохранность контингента, достижения детей и педагогов, продолжительность обучения, а также количественные показатели ресурсного обеспечения (финансового, кадрового, хозяйственного) и другие показатели.

� 2 группа –показатели, характеризующие соответствие деятельности стандартам или заявленным программам.

К ним можно отнести: выполнение нормативов нагрузки, выполнение санитарных норм и правил, полнота реализации образовательных программ и другие показатели.

� 3 группа – качественные показатели, которым можно отнести, например, творческий потенциал педагогических кадров, ценности детей и педагогов, морально-психологический климат в коллективе, удовлетворенность детей и родителей условиями обучения и другие показатели.

Алгоритм разработки мониторинга

Цель

Результат 1

Результат 2

Результат 3

Критерий 1.1

Критерий 1.2

Критерий 2.1

Критерий 2.2

Критерий 3.1.

Критерий 3.2

Технология 1.1.1

Технология 1.1.2

Технология 1.2.1

Технология 1.2.2

Технология 2.1.1

Технология 2.1.2

Технология 2.2.1

Технология 3.1.1

Технология 3.1.2

Технология 3.2.1

Роль целеполагания в мониторинговой деятельности

� Цель является не просто центральным понятием в педагогике, а центральным объектом отслеживания

� Цель образования – это предельно конкретный, охарактеризованный качественно, а где можно и количественно образ желаемого результата, которого ребенок, образовательное учреждение могут достичь к строго определенному моменту времени. Цель и результат должны быть охарактеризованы, описаны и измерены в одних единицах, или параметрах.

� Цель должна отвечать таким требованиям, как реальность, достижимость, измеримость, диагностичность .

Технология организации мониторинговой деятельности в УДОД

1 этап. Выявление возможностей и условий мониторинговой деятельности в УДОД.

2 этап. Разработка заданий на мониторинг и программы мониторинговой деятельности.

3 этап. Создание банка информации по реализации программы мониторинга.

4 этап. Разработка инструментария (технологий) мониторинга.

5 этап. Проведение мониторинговых исследований.

6 этап. Обработка и анализ результатов исследования.

7 этап. Разработка комплекса управленческих мероприятий (решений) по результатам реализации программы мониторинга.

1 этап. Выявление возможностей и условий мониторинговой деятельности в УДОД

Методы и способы:� изучение литературных источников по проблеме организации мониторинговой деятельности в системе образования в целом и системе дополнительного образования детей в частности;

� изучение и обобщение передового опыта по организации мониторинга результатов деятельности в УДОД;

� ретроспективный анализ собственного опыта отслеживания результатов деятельности;

� собеседование с управленческими и педагогическими кадрами УДОД на предмет возможностей и готовности к участию в мониторинговой деятельности;

� организация деятельности временных творческих групп по ведению исследования первоначального состояния деятельности УДОД и разработке модели организации мониторинга в УДОД;

� организация просвещения управленческих и педагогических кадров по проблемам организации мониторинга результатов деятельности.

Результаты 1 этапа

� получение информации о возможностях проведения мониторинговой деятельности в УДОД;

� повышение квалификации кадров учреждения в вопросах мониторинга результатов деятельности;

� обеспечение положительной мотивации кадров учреждения к участию в мониторинговой деятельности;

� проведение первоначального анализа состояния деятельности УДОД;

� разработка критериев эффективности деятельности и развития УДОД.

Индикаторы деятельности УДО

Это - доступные наблюдению и измерению характеристики

изучаемого объекта

Критерии и показатели результативности по субъектам деятельности УДО

Сохранность контингента, количество воспитанников УДО 2-3-и последующих годов обучения

• уровень устойчивости интереса ребенка к предмету; • степень комфортности пребывания ребенка в УДО;• важность занятий в УДО для будущего ребенка;• степень сплоченности детского коллектива;• уровень значимости педагога для ребенка;• и др.

Количество достижений детей в виде побед на смотрах, конкурсах, выставках, фестивалях и т.д.

• уровень обученности детей;• уровень успешности детей в освоении образовательной программы;• уровень активности детей в образовательной деятельности;• степень способности детей к творческой деятельности и созданию творческих продуктов;• и др.

Количество выпускников, связавших свою профессию с занятиями в УДО

• уровень направленности личности в профессиональном выборе;• уровень успешности детей в освоении образовательной программы;• степень адекватной самооценки детей;• уровень авторитета педагога;• и др.

Родители

Отзывы родителей о деятельности педагога, образовательного объединения или учреждения в целом

• степень удовлетворенности родителей результатами образования ребенка;• степень решения проблем родителей в воспитании детей с помощью УДО;• уровень качества дополнительного образования детей, предоставляемых УДО;• и др.

Количество родителей, участвующих в общей деятельности образовательного объединения (родительские собрания, открытые занятия, спонсорская помощь и др.)

• степень удовлетворенности родителей результатами образования ребенка;• успешность работы педагога дополнительного образования;• восстребованность услуг педагога или УДО в целом;• и др.

Педагоги

Стабильность педагогического коллектива

•степень удовлетворенности педагогических работников своей работой;•уровень интереса сотрудников к педагогической деятельности;•уровень сплочения педагогического коллектива УДО;•восстребованность дополнительных образовательных услуг УДО;•и др.

Результаты аттестации педагогических и руководящих работников УДО

•уровень профессионализма педагогов и руководителей УДО;•степень включенности коллектива в процессы аттестации;•уровень условий, созданных в УДО для прохождения сотрудниками аттестации;•и др.

Количество достижений педагогов УДО

•уровень профессионализма педагогического коллектива;•степень активности педагогов;•уровень создания условий в УДО для творческой деятельности педагогов;•и др.

Индикаторы результативности по достижениям УДО

Критерий Показатель

Восстребованнос

ть выпускников УДО на рынке труда

•уровень учета социального заказа при организации деятельности УДО;•уровень качества дополнительного образования детей в УДО;•уровень организации продвижения выпускников УДО;•и др.

Количество социальных партнеров УДО

•уровень качества дополнительного образования детей в УДО;•восстребованность услуг и престиж УДО;•уровень активности руководителей и педагогов УДО;•и др.

Индикаторы результативности по соответствию нормативным

показателям

Критерий Показатель

Состояние учебных помещений УДО

•уровень соответствия деятельности санитарно-гигиеническим нормам;•уровень обеспеченности образовательного процесса в соответствии с требованиями предмета или направленности деятельности;•и др.

Успешность прохождения аттестации УДО

•соответствие деятельности УДО требованиям к типу и виду;•уровень качества деятельности УДО;•уровень самоанализа деятельности УДО;•и др.

2 этап. Разработка программы мониторинговой деятельности

Источники мониторинга:� цели и задачи деятельности УДОД, обозначенные в нормативных документах;

� приоритеты деятельности УДОД;� проблемы деятельности УДОД, его слабые стороны.

Методы и способы:� подбор и анализ нормативных документов;� выявление объектов мониторинга;� разработка форм и объема мониторинга, расчет времени на его разработку;

� оценка необходимости полученных результатов;� предположение возможных управленческих решений, которые будут получены на основе имеющейся информации.

Результаты 2 этапа

� определение объектов мониторинга, т.е. результата который будет отслеживаться;

� разработка программы мониторинговой деятельности;

� разработка возможных вариантов управленческих решений, которые могут быть приняты по итогам проведения программы мониторинга.

3 этап. Создание банка информации по реализации программы мониторинга

Методы:� создание временных творческих групп по разработке структуры банка информации и показателей ее сбора;

� организация обсуждения промежуточных результатов работы над структурой банка с заместителями или директором;

� проведение совещаний, педагогических советов по разработке и согласованию информационных потоков в банк мониторинга учреждения.

Результаты 3 этапа

� структура банка информации УДОД;

� система показателей информации;

� система информационных потоков учреждения, формы, процедуры и правила предоставления информации в банк мониторинга;

� банк первичной информации;

� пакет специальных компьютерных программ обработки информации.

Структура банка информации УДО

1 Документы УДО • Основные нормативные документы и локальные акты деятельности УДО

2 История УДО • Летопись основных событий УДО с момента открытия до настоящего времени

3 Структура УДО • Особенности и динамика развития организационной структуры УДО• Особенности и динамика развития управленческой структуры УДО

4 Внешняя среда УДО

•Исследования социального заказа на деятельность УДО•Конкуренты УДО: обзор сильных и слабых сторон ближайших УДО •Взаимодействие, сотрудничество УДО: информация о содержании и формах взаимодействия УДО на международном уровне, уровне России, региона, района, внутри УДО

5 Цели, ценности, принципы, приоритеты деятельности УДО

•Постановка и выполнение целей, приоритетов деятельности УДО•Существующие ценности в системе деятельности УДО

6 Состояние образовательно

го процесса УДО

• Информация о субъектах образовательного процесса УДО:Дети – сводные данные по динамике контингента

воспитанников

Родители – информация о целях, задачах, направлениях, формах работы с родителями УДОПедагоги – сводные данные по педагогическим

кадрам УДО (динамика развития кадрового состава УДО, динамика штатного расписания, информация об аттестации педагогических кадров)• Информация о динамике содержанияобразовательного процесса УДО• Информация о динамике организации образовательного процесса УДО• Информация о динамике состояния дополнительных образовательных программ УДО

• Информация о динамике развития инновационной деятельности УДО (в том числе информация об издательской деятельности УДО)

7 Состояние системы обеспечения деятельности УДО

• Информация о динамике методического обеспечения деятельности УДО (качественные и количественные показатели)• Информация о динамике психологического обеспечения деятельности УДО (количественные и качественные показатели деятельности, результаты исследований психологической службы)• Информация о динамике экономического обеспечения деятельности УДО (исполнение бюджета, динамика нормативов)• Информация о динамике внебюджетной деятельности УДО (анализ доходов и расходов внебюджетных средств, динамика дополнительных источников финансирования, статистические данные о платных образовательных объединениях, информация о реализации бизнес-плана УДО)• Информация о динамике материально-технического обеспечения деятельности УДО (приобретение основных средств, проведение ремонтных работ и др.)

8 Состояние системы управления деятельностью УДО

• Состояние организационной культуры УДО (материалы исследований, выводы)• Информация о выполнении управленческих функций администрацией УДО (содержание, формы, выводы)• Информация о командировках сотрудников УДО

9 Результаты деятельности УДО на уровне детей и педагогов

• Информация о достижениях детей –статистические данные по годам (структурным подразделениям)• Информация о достижениях педагогов –статистические данные по годам• Информация о движении контингента детей –сравнительные данные, выводы

10 Общие аналитические выводы по эффективности функционирования и развития УДО

• Информация об общих выводах эффективности функционирования и развития УДО, которые делались в процессе анализа общей информации в разное время

При создании банка данных о функционировании и развитии УДО нужно выполнить как минимум

два условия:

� сохранение системности деятельности учреждения, то есть сбор информации о реальном состоянии каждого из компонентов системы и их взаимосвязях;

� полнота базы показателей реального состояния: учет всех количественных, качественных показателей и показателей, характеризующих соответствие деятельности стандартам или заявленным программам.

4 этап. Разработка инструментария (технологий) мониторинга

Содержание деятельности:� изучение существующих технологий результатов деятельности удод;

� выявление предметов мониторинга;

� изучение источников литературы для выявления существующих в науке и практике технологий;

� разработка необходимых технологий мониторинга;

� обучение педагогических и управленческих кадров использованию или разработке новых технологий;

� апробация вновь созданных технологий.

Методы работы:

� масстер-классы, педагогические мастерские и другие формы обмена опытом использования разных технологий;

� временные творческие группы по разработке новых технологий мониторинга;

� индивидуальная работа с педагогами и управленцами по разработке и освоению инструментария мониторинга.

Требования к выбору технологий отслеживания результатов

дополнительного образования детей:� рассмотрение образовательного процесса как целостной системы, системообразующим фактором которой является цель, заявленная в дополнительной образовательной программе;

� определение сторон образовательного процесса и его результатов, подлежащих отслеживанию (эти стороны, скорее всего, будут определяться задачами педагогической деятельности);

� анализ основных связей внутри объекта мониторинга;

� определение количественных и качественных характеристик предмета мониторинга.

Классификация технологий мониторинга

По компонентам (задачам) мониторинга:� методы отслеживания и фиксирования образовательных

результатов: наблюдение; конспектирование («фотография»); видеофиксация; ведение журналов отчета; дневники педагогического наблюдения и самонаблюдения; книга успехов и достижений, банк достижений и т.п.)

� аналитико-оценочные методы: анализ занятия; типологическая характеристика образовательного процесса; собственно метод анализа по заданным или выбранным параметрам; методы педагогической оценки и самооценки учащихся; тестирование; шкалирование и др.

� методы обобщения результатов: методическое или практическое обобщение опыта, описание моделей эффективности образовательных процессов, аналитический отчет; к формам обобщения относятся матрицы, свободные таблицы, графические формы, систематизированный видеофонд и методический фонд.

Классификация технологий мониторинга

По направленности мониторинга:

� внешний мониторинг (аттестационные процедуры, открытые занятия; занятия -мастерские, совместный анализ занятия с педагогами и т.д.);

� внутренний мониторинг (самоанализ; дневник самонаблюдений; коллективный анализ дела; решение проблемных ситуаций; взаимотестирование; зачетные книжки и т.п.).

Классификация технологий мониторинга

По количеству участвующих субъектов:� групповые способы;

� коллективные способы;

� индивидуальные способы.

Классификация технологий мониторинга

По внешнему выражению способа:� вербальные способы (графические, письменные,

технические);� творческо-активные способы (игра, специально

организованная для наблюдения и выявления чего-либо; социальная проба; создание проблемной ситуации; поисково-исследовательские методы организации образовательного процесса).

По предмету мониторинга. При таком выборе основания для классификации может быть великое множество групп способов. Например, по масштабу предмета – способы мониторинга воспитательных, учебных и т.д. результатов.

Результат 4 этапа

Пакет технологий отслеживания результатов деятельности УДОД (инструментарий мониторинга).

5 этап. Проведение мониторинговых исследований

Содержание деятельности:� проведение диагностических исследований в соответствии с инструментарием, разработанным на предыдущем этапе;

� занесение данных исследований в банк информации, наполнение банка информацией, необходимой для проведения мониторинга;

� организация обсуждения предварительных результатов исследования.

Методы: анкетирование, тестирование, наблюдение, устный опрос, анализ документов и др.

Результаты:Пакет материалов по программе исследования: заполненные анкеты или тесты, дневники наблюдений, статистические и другие материалы.

6 этап. Обработка и анализ результатов исследования

Содержание деятельности:� обработка результатов исследования;

� организация обсуждения результатов на административном уровне и уровне коллектива удод;

� подготовка результатов анализа в виде графиков, диаграмм, таблиц;

� оформление результатов анализа документально в виде аналитической записки;

� занесение результатов в банк мониторинга.

Методы:

коллективный анализ, круглые столы, деловые игры, методы экспертных оценок, «Мозговой штурм», SWOT-анализ и др.

Многократный анализ результатов разными группами специалистов позволит учесть большее число мнений и повысить объективность аналитических выводов.

7 этап. Разработка комплекса управленческих мероприятий (решений) по результатам реализации программы мониторинга

Результат:

Документальное оформление комплекса решений, позволяющих повысить эффективность использования результатов мониторинга в управленческой деятельности.

Условия организации мониторинговой деятельности в УДО

� Кадровые

� Материально-технические� Научно-методические� Информационные

� Мотивационные

� Нормативные

� Организационные

Кадровые условия:� включение всего педагогического коллектива в реализацию процесса мониторинга, сплочение коллектива вокруг идеи мониторинга результатов деятельности и развития учреждения;

� привлечение специалистов по разработке инструментария мониторинга, новых информационных технологий, для ведения исследований;

� обучение кадров;� введение новых ставок в штатное расписание.

Материально-технические условия:

� приобретение необходимого оборудования, например, компьютерной техники, исследовательских методик и другого оборудования;

� создание программного обеспечения обработки компьютерного банка информации и др.

Научно-методические условия:� подбор необходимой научно-методической литературы по проблеме мониторинга результатов деятельности дополнительного образования детей;

� разработка программ обучения кадров;� разработка и ведение коллективных продуктивных форм деятельности (лабораторий, мастерских, «круглых столов» и т.д.);

� ведение исследования: разработка программ исследования, подбор необходимого инструментария для исследования, ведение аналитической документации;

� выявление и описание лучшего опыта, создание банка опыта мониторинговой деятельности;

� анализ и систематизация наработанных материалов, формирование фондов, ведение картотеки;

� подготовка издательской продукции учреждения по проблеме мониторинга результатов дополнительного образования детей и др.

Информационные условия

� Источниками информации могут стать литература, средства массовой информации, обмен опытом и др.

� Ведущей задачей является введение новых информационных технологий в организацию мониторинга результатов дополнительного образования детей

Мотивационные условия:

� поощрение педагогов и управленцев, участвующих в мониторинговой деятельности учреждения;

� организация конкурсов программ, технологий мониторинга;

� создание системы грантов учреждения на участие в мониторинговой деятельности;

� пропаганда лучшего опыта мониторинговой деятельности педагогов и управленцев.

Нормативные условия:

� разработка положений об организации мониторинговой деятельности в УДО;

� введение в должностные инструкции разделов, касающихся участия педагогических и руководящих работников в мониторинговой деятельности или разработка должностных инструкций на деятельность новых специалистов, организующих мониторинговую деятельность (например, педагога-организатора банка информации к мониторингу) и др.

Организационные условия� Четкая определенность объектов и предметов мониторинга ;

� Участие в мониторинге каждого субъекта того процесса (или системы), который выступает объектом мониторинга;

� Наличие единых параметров и критериев отслеживания и оценки результатов деятельности УДО;

� Гласность и открытость, управляемость и гибкость мониторингового процесса;

� Создание и систематическое ведение банка информации УДО.

Организация мониторинговой деятельности в УДО позволит создать:

� систему оптимальных статистических показателей, позволяющих объективно анализировать деятельность УДО;

� модель банка информации УДО;� модель программы развития, образовательной программы, программы деятельности учреждения;

� систему требований к содержанию и организации образовательного процесса в УДО;

� систему критериев и показателей развития учреждения;

� и другие возможности.

Критерии и показатели мониторинга

Можно выделить две группы критериев оценки продуктивности деятельности:

� критерии соответствия достижимых результатов установленным целям деятельности.

� критерии соответствия процесса функционирования системы объективным требованиям к его содержанию, организации и результатам.

Входная дверь

Топочная дверца печи

Промежуточная дверь

Задняя дверь

Передняя дверь

Врата небесные

Запасной выход

Портал

Дверь с дверным глазком

Бронированная дверь

Дверь в подвал

Наружная дверь дома

Решетчатая дверь

Деревянная дверь

Стеклянная дверь

Металлическая дверь

Потайная дверь

Вращающаяся дверь

Раздвижная дверь

Салонная дверь

Автоматически закрывающаяся дверь

Дверь сарая

Зеркальная дверь

Служебный вход

Вход для прислуги

Двухстворчатая дверь