Виктор Звонников - Контроль качества обучения при аттестации: компетентностный подход
Обновление хранимой информации в системе мониторинга обеспечивается путем доступа с клиентских рабочих мест к информационной базе системы для модификации документов и записей в соответствии с индивидуальным сценарием доступа каждого пользователя. При этом система обеспечивает целостность информационной базы благодаря интегрированным внутренним алгоритмам и обязательной регистрации вносимых изменений для предоставления возможности отмены некорректных действий. Контроль целостности информационной базы обеспечивают специальные индикаторы (контролирующие подпрограммы), которыми управляют системные администраторы. Направления обмена данными и информацией между различными объектами показаны в табл. 1.2.
Таблица 1.2 Объекты и направления обмена данными и информацией
Несмотря на явные достоинства СМК образования, далеко не все руководители вузов и преподаватели поддерживают идею создания такой системы и использования ее результатов. Возможные причины подобного неприятия могут носить субъективный характер и быть связанными с особенностями личностного восприятия информации, которая иногда кажется противникам мониторинга избыточной и излишне формализованной либо противоречащей собственным благоприятным оценкам результатов учебного процесса.
Помимо субъективных есть ряд объективных причин, способствующих негативной оценке мониторинга отдельными участниками образовательного процесса. Встречаются случаи неправильной или упрощенной интерпретации данных мониторинга и проведения обследований без учета дополнительных факторов, например социально-экономических, значимо влияющих на результаты образовательной деятельности. Эти случаи способствуют формированию недоверия к возможностям мониторинга и скептицизма, особенно у тех руководителей и преподавателей, чья деятельность незаслуженно получает негативные оценки. Наблюдаемые, по данным мониторинга, отставания в итоговых результатах студентов могут быть следствием неучтенной слабой материально-технической оснащенности учебного процесса, низкой квалификации преподавательского состава, высокого уровня безработицы среди родителей студентов, ошибок при формировании выборочной совокупности студентов для проведения мониторинговых обследований и др. Вместе с тем возможны искусственно завышенные результаты, получаемые путем намеренного исключения из обследования слабых студентов, сговором экспертов и т.д.
Все эти причины в совокупности значимо снижают достоверность информации мониторинга и приводят к тому, что многие исследователи просто предлагают отказаться от проведения любых сравнений качества образования. К тому же они полагают, что мониторинг может отвлекать педагогов от учебного процесса и отнимать время на усвоение нового материала у студентов. К противникам мониторинга относятся сотни преподавателей и управленцев во всех странах, которые чувствуют, что проведение мониторинга нередко выдвигает нереалистичные требования к их времени и возможностям, а в конечном счете, уменьшает их власть и использует ими же собранную информацию против них.
Помимо временных потерь, проведение мониторинга требует больших денежных затрат. В финансировании нуждается работа по формированию выборочных совокупностей студентов, созданию инструментария (тестов, анкет, опросных листов, программного обеспечения и т.д.), сбору данных, кодированию и анализу данных, их обработке, интерпретации и подготовке информационных бюллетеней. Мировой опыт проведения мониторинга говорит о том, что затраты могут перевесить выгоды, если не приложить усилия по соблюдению всех методических требований к проведению мониторинга, не обеспечить достоверность информации и не создать условия для ее использования в управлении качеством образования.
Специалисты по мониторингу выделяют ряд условий его эффективности:
• системный подход, обеспечивающий слаженную работу механизма по сбору, обработке, анализу и интерпретации информации;
• сочетание количественных и качественных методов измерений в мониторинге;
• преимущественная ориентация системы показателей, по которым проводится мониторинг, на практику и методы обучения, поддающиеся воздействиям со стороны преподавателей и руководства вуза;
• достаточная полнота совокупности показателей, учет различных факторов, в том числе и косвенно влияющих на результаты обучения;
• корректная интерпретация данных мониторинга с учетом различных влияний и связей между показателями;
• репрезентативность выборочных совокупностей студентов, принимающих участие в мониторинге;
• широкое привлечение к проведению мониторинга квалифицированных специалистов и преподавателей вуза;
• использование качественного инструментария и современного программного обеспечения для обработки и анализа данных мониторинга;
• наличие необходимой материально-технической базы (статистических пакетов для обработки данных, техники и т.д.);
• методическая и финансовая помощь со стороны администрации вуза.
Таким образом, даже если отвлечься от негативных последствий мониторинга и принять идею его проведения, придется решать много сложных проблем. Необходимо беспокоиться о проектировании системы мониторинга и выборе его модели, компетентности организаторов и участников, финансовых затратах, определении показателей, по которым будут собраны данные, методиках анализа данных, определении круга пользователей и структурирования данных по различным уровням доступа, выборе вида представления данных, методах их интерпретации и т.д. Нужно также договориться о направлениях использования данных мониторинга, поскольку его результаты можно применять как для поощрений, так и для санкций против отдельных преподавателей или кафедр в вузе. Для успешной работы по проведению мониторинга все эти соображения следует принять во внимание.
В целом можно утверждать следующее.
• Системы мониторинга могут вносить значительный позитивный вклад в работу как преподавателей, так и управленцев. Мониторинг выполняет множество функций, релевантных повышению качества обучения и уменьшению несправедливости, вызванной субъективизмом преподавателей и управленцев в образовании.
• Системы мониторинга могут стимулировать развитие многочисленных позитивных тенденций, они позволяют оценить эффективность различных инноваций в образовании.
• Данные мониторинга не заменяют прочую информацию, необходимую для принятия управленческих решений в образовании. Их следует использовать совместно с другими данными о системе образования, собранными в результате бесед со штатом преподавателей и студентов.
• При проведении мониторинга следует учитывать не только его позитивные возможности, но и вероятные негативные последствия. Преодолеть негативные результаты внедрения систем мониторинга в образование можно в том случае, если управленцы и педагоги заранее осведомлены о сложностях мониторинга и ограничениях на использование его данных, а сам мониторинг проводится в соответствии с научно-обоснованными методиками и технологиями в условиях четкой определенности перечня сообщаемых результатов на каждом уровне доступа к ним.
1.7. Эвалюация в образовании
Термин «эвалюация» (в англоязычной литературе – evaluation) не распространен в отечественной педагогической науке, хотя он широко используется в большинстве зарубежных стран, имеющих высокоразвитые системы управления качеством образования. Впервые этот термин появился в литературе на русском языке в 2001 г., когда авторы книги «Педагогическое образование в университете: контекстно-биографический подход» попытались проанализировать трактовку понятия «эвалюация» с опорой на работы немецких ученых и педагогов [6]. Современная трактовка этого термина в образовании не отождествляет его исключительно с процессом получения оценок, как можно решить по результату прямого перевода (evaluation – оценка, оценивание), а рассматривает его гораздо шире, считая эвалюацию интегративной категорией оценочно-аналитической деятельности в различных проектах по управлению качеством образования [10].
За рубежом научный термин «эвалюация» получил распространение в конце 60-х – начале 70-х гг. XX в. и использовался сначала при анализе результативности экспериментальной деятельности на основе изучения эмпирических данных в социальных науках. За годы существования понятие «эвалюация» приобрело различные оттенки и определения. Иногда эвалюацией называли проверку эффективности осуществленной деятельности и степени ее соответствия поставленным целям. В других случаях она рассматривалась в контексте рационально-критического осмысления социально-педагогической значимости целей образовательной деятельности и сочетала контрольные функции с критическим анализом эмпирического опыта на фоне прогнозирования тенденций развития образовательного процесса, включая разработку и обоснование процедур оценивания качества и всех его компонентов. Под эвалюацией понимали также систематическое оценивание всех аспектов обучения и воспитания, включающее совокупность методов корректировочных воздействий для повышения качества образования. Иногда ее связывали с процессом развития образовательных учреждений, дискуссиями о качестве образования, разработкой программ развития школ. В этом случае эвалюация рассматривалась как инструмент самоуправления, самоорганизации, проектирования и развития школьной жизнедеятельности. В последнем контексте данные эвалюации предоставляли учителям возможность осуществлять рефлексию профессионального поведения, школьной администрации – контролировать и анализировать деятельность образовательного учреждения, родителям – выявлять индикаторы объективного и субъективного имиджа школы, органам управления образованием – принимать обоснованные управленческие решения.
