Организация системы мониторинговых исследований в учреждении дополнительного образования

Организация системы мониторинговых исследований

в учреждении дополнительного образования.

Л.Б.Талалаева, педагог дополнительного образования

МБУ ДО города Ростова-на-Дону

«Дворец творчества детей и молодежи»

Мониторинг строится на основе проведения диагностических процедур. И связан с прогнозом возможных личностных изменений учащегося в учебном процессе.

"Мониторинг в образовании это система сбора, обработки, хранения и распространения информации об образовательной системе или отдельных ее элементах, ориентированная на информационное обеспечение управления, которая позволяет судить о состоянии объекта в любой момент времени и может обеспечить прогноз его развития." (Майоров А.Н. Мониторинг в образовании. СПб.: Изд-во "Образование-Культура", 1998,.с.141).

В этом определении можно выделить три аспекта.

Во-первых, мониторинг есть система сбора, обработки, хранения и распространения информации об объекте изучения. Эти аспекты мониторинга зависят от исполнительности, обязательности, аккуратности, компетентности тех, кто будет собирать и обрабатывать данные.

Во-вторых, данные мониторинга предназначены для обеспечения управления объектом, поэтому они должны быть представлены в форме, доступной тем, кто будет принимать управленческие решения (педагог, завуч, директор, и т. д.).

В-третьих, данные мониторинга должны позволять судить о состоянии объекта в любой момент времени и прогнозировать его развитие. По сути дела здесь идёт речь о выборе параметров, описывающих состояние объекта изучения (воспитанника, детского коллектива, педагогического коллектива и т. д.).

Однако из этого же определения следует, что прогностические процедуры находятся вне системы мониторинга.

Прогностика выступает заказчиком к диагностическим средствам и процедурам мониторинга, поэтому выбранные средства и процедуры должны позволять прогнозировать ход экспериментальной работы. Для этого они должны отвечать ряду требований, которые можно рассматривать как критерии отбора диагностических средств и процедур.
К основным качественным показателям управленческой информации можно отнести следующие:
объективность - полученные результаты должны отражать реальное состояние дел, а личностный фактор должен быть минимизирован;
точность - погрешности измерений должны быть такими, чтобы гарантировать значения истинных показателей с приемлемой точностью;

полноту - источники информации должны перекрывать возможное поле получения результатов или корректно репрезентировать его;
достаточность - объем информации должен соответствовать потребностям руководителя и быть достаточным для принятия того или иного решения;
систематизированность (структурированность) - управленческая информация, полученная из различных источников относительно одного объекта, должна быть структурирована и систематизирована с учетом качества источников информации и информационных запросов руководителей;
оптимальность обобщения - информация должна соответствовать тому уровню задач, который решает орган управления;
оперативность (своевременность) - как качество самой информации. Информация должна носить в большей степени управленческую, а не историческую ценность, то есть соответствовать темпам развития;
доступность - этот показатель можно понимать двояко. С одной стороны, это доступность в смысле возможности и реальности получения. Второе понимание доступности связано с формой предоставления информации, когда достаточная и качественная информация поступает в такой форме, что становится непригодной для принятия решения (например, многостраничный отчет или графическая информация);

содержательная валидность инструментария, который должен позволять измерять именно то, что необходимо для прогноза.

Если информация, получаемая в ходе мониторинга, не соответствует указанным выше критериям, то она не может быть использована для коррекции модели обучения и выбора адекватного её варианта. Исходя из поставленных целей и выделенных условий её достижения, мы выбираем те диагностические процедуры, которые позволяют контролировать выполнение условий и следить за изменением состояния учащихся. При таком подходе к отбору диагностических процедур они неизбежно оказываются достаточными для прогнозирования. Осуществление мониторинга творческих достижений должно опираться на следующие положения:

 Использование стандартизированного инструментария обеспечивающего получение достоверных данных (т.е. апробированного и имеющего устойчивые статистические характеристики)

 Централизованная разработка инструментария мониторинга

 Полученные результаты должны служить основой для принятия обоснованных решений на разных уровнях управления экспериментом

 Используемые показатели качества образования должны быть социально и личностно значимыми. Поэтому, например, одним из показателей является достижение базового уровня усвоения программного материала

 Оценка достижений участников образовательного процесса осуществляется на разных уровнях: индивидуальном, уровне учреждения, региональном (?), федеральном (?) (если это необходимо);

 Оценка достижений участников осуществляется на различных этапах обучения: входном, промежуточном, итоговом

 Осуществление мониторинга в зависимости от этапов его проведения:

- либо структурами независимыми от руководства структурных подразделений (экспертная группа),

- либо этими структурами совместно с руководителями структурных подразделений, но в любом случае при их активной поддержке.

Общие подходы к организации мониторинга

Необходимость получения систематической информации о ходе эксперимента определяет ряд требований к проведению мониторинга достижений воспитанников. К ним относятся:

 мониторинг осуществляется по всем детским объединениям;

 оценка достижений должна быть ежегодной; в детских объединениях, участвующих в эксперименте, сроки проверки определяются особенностями воспитательно-образовательной деятельности;

 разработка инструментария, сбор и обобщение информации о достижениях участников образовательного процесса осуществляются на разных уровнях, а именно на уровне детского объединения, структурного подразделения, образовательного учреждения.

 головная структура должна вести банк данных, собранных по мониторинговым исследованиям, производить периодическую коррекцию используемых методик.

2. Экспертные методы:

а) должны быть однозначно сформулированы цели, предмет и область применения методики. Предмет, диагностический конструкт (концепт), должен быть сформулирован в теоретических понятиях и соотнесен на теоретическом уровне с системой релевантных концеп­тов. Должна быть четко выделена область применения, под которой подразумевается особая социальная среда или сфера общественной практики (производство, медицина, семейная жизнь и т. п.), контингент испытуемых (пол, возраст, образование, профессиональный опыт, должностное положение). Должны быть конкретизированы цели использования результатов: для прогноза успешности профессиональной деятельности, для психологического вмешательства, для принятия правовых, административных решений, для прогноза стабильности коллектива и т. п.;

инструкции по применению снабжаются указанием на требуемую квалификацию экспертов, их необходимое количество для получения надежных данных по методу независимых оценок;

б) инструкции по применению должны пройти специальные ис­пытания на однозначность их выполнения экспертами по отношению к некоторому эталонному набору данных (текстов, рисунков, звуко-или видеозаписей и т. п.);

в) процедура обработки результатов должна включать в себя такое документирование промежуточных этапов обработки, которое позволило бы перепроверить конечный результат другому эксперту;

г) головная структура должна вести банк данных, обеспечивая подготовку пользователей (в соответствии со стандартами методики).

Организационная структура мониторинга:

• Разработка циклограммы мониторинга

• Программа сбора информации (формирование экспериментальных и контрольных групп в структурных подразделениях, формирование экспертных групп, определение методов мониторинга)

• Методы обработки и анализа информации

• Коррекционная программа управления воспитательно-образовательным процессом

Особенности педагогического мониторинга

• Непрерывность

• Диагностичность

• Информационная оперативность

• Обратная связь

• Научность

Общенаучные методы мониторинга:

• Наблюдение

• Описание

• Диагностика

• Моделирование

• Проектирование

Специальные методы мониторинга:

• Включенное наблюдение за изменениями личностного развития под влиянием социально-педагогического процесса и определение смысла в происходящих явлениях

• Метод тестовых ситуаций – педагог создает специфические условия, в которых проявляется наиболее отчетливо каждый из компонентов воспитательно-образовательного процесса

• Экспликация как развертывание содержания воспитательного процесса, позволяющее вносить коррективы в личностное развитие. Экспликация (от лат. Еxplication – развертывание, разъяснение) – развертывание содержания учебно-профессиональной деятельности. Этот метод позволяет не только диагностировать происходящие изменения в развитии обучаемого, но и оперативно вносить коррективы в процесс образования. Экспликация осуществляется путем постановки наводящих вопросов, оказания помощи в виде подсказок и совместных действий, поощрения педагогом обучаемых. Регистрация эксплицируемых характеристик осуществляется в простейшем случае посредством метода наблюдения, а фиксация данных – с помощью опросников, в которых отражаются эмпирически наблюдаемые учебно-профессиональные качества и действия обучаемых.

• Опросные методы

• Анализ результатов воспитательно-образовательного процесса по разработанным критериями показателями качества воспитания, соотнесение реальных результатов с прежними и составление прогноза развития

• Тестирование и самотестирование как объективные методы сбора информации об уровне развития личности, степени выраженности социально значимых качеств и т.д.

Результаты мониторинга можно использовать для оценки творческих достижений воспитанников, для сравнения творческих достижений воспитанников разных образовательных учреждений, а в дальнейшем при систематическом мониторинге определить динамику изменений творческих достижений и наличие определенных тенденций.

Результаты мониторинга можно использовать также для выявления факторов, связанных с особенностями воспитательно-образовательной деятельности учреждения или социальным окружением, оказывающих влияние на развитие воспитанников. Например, выделить оптимальные учебные планы, программы, методики обучения и др.

На промежуточных этапах эксперимента достижения воспитанников могут иметь существенные различия в разных структурных подразделениях учреждения из-за разнообразия используемых учебных планов, программ, методических разработок и рекомендаций, инновационных технологий. В этих условиях сравнение результатов может привести к необоснованным выводам.

Очевидно, мониторинг на промежуточных этапах должен и может решать другие задачи. Прежде всего, в рамках такого мониторинга может успешно осуществляться методическая поддержка педагогов, использующих в эксперименте различные учебные планы, методики. Необходимо ориентировать педагогов на достижение воспитанниками наряду с требованиями образовательной программы, целей, поставленных образовательным учреждением в ходе эксперимента.

В мониторинге экспериментальной деятельности выделяются следующие объекты:

• творческое развитие воспитанников;

• Развитие мотивационно-потребностной сферы воспитанников

• Развитие познавательной сферы воспитанников, учебных достижений;

• Особенности личностных, эмоционально-аффективных характеристик воспитанников (уровень воспитанности обучающихся как интегративная личностная характеристика).

• Развитие общения и особенности внутригрупповых отношений

• Особенности ближайшего социального окружения (педагоги, семья);

Данные этого базового мониторинга показывают среднестатистические данные по всему учреждению в целом. Если же данные мониторинга покажут статистически значимые отклонения, то тогда можно будет делать вывод о том, что влияние содержания экспериментальной деятельности отделов имеет место. В этом случае экспертной группе каждого структурного подразделения нужно постараться выделить именно те особенности, которые оказывают это влияние.

Можно обобщить задачи мониторинга процесса формирования творческой направленности личности в системе творческой деятельности:

1. разработка диагностического инструментария системы творческого развития детей дошкольного возраста (на основе гендерного подхода) – соц. ТВ-во;

2. разработать диагностический инструментарий к программе, ориентированной на формирование творческой направленности личности ребенка на основе интеграции основных видов художественного искусства – худ.отд. (Ценностно - смысловая среда)

3. (Сотворчество как условие самореализации) ДПИ

4. (социализирующей системе научно- исследовательской деятельности) экол. профессиональное самоопределение воспитанников, формирование ключевых компетенций социально-активной, экологически грамотной личности

5. формирования ключевых компетенций воспитанников средствами детских и молодежных общественных объединений.

6. На основе определения критериев развития творческого потенциала педагогов дополнительного образования, проведение исследований динамики профессионального развития каждого педагога