Виктор Звонников - Контроль качества обучения при аттестации: компетентностный подход
В отечественной и иностранной литературе существуют различные подходы к классификации педагогических тестов, зависящие от признаков, которые положены в основу демаркации видов. В соответствии с подходом, выбранным в качестве основополагающего, можно выделить нормативно-ориентированные и критериально-ориентированные тесты. По размерности конструкта педагогические тесты делятся на гомогенные (измеряющие только одну переменную и потому однородные по содержанию) и гетерогенные (измеряющие более одной переменной – случай многомерного конструкта).
Гетерогенные тесты бывают полидисциплинарные и междисциплинарные [42]. Полидисциплинарные тесты состоят из гомогенных субтестов по отдельным дисциплинам. Результаты студентов по субтестам объединяются для подсчета итоговых баллов по всему полидисциплинарному тесту. Для выполнения заданий междисциплинарных тестов требуется применение обобщенных, межпредметных, интегративных знаний и умений. Междисциплинарные тесты всегда многомерны, их разработка требует обращения к факторным методам анализа данных, математико-статистическим методам многомерного шкалирования и т.д.
По характеру измеряемых переменных выделяют тесты для проверки навыков, учебных умений, практических умений, а также компетентностные тесты. Иногда в отдельную группу выделяют скоростные тесты, требующие жесткого ограничения на время для выполнения каждого задания и всегда содержащие избыточное число заданий, не позволяющее никому дойти до конца теста. В зависимости от формы предъявления различают бланковые и компьютерные тесты, устные и письменные.
Наиболее общая классификация тестов в учебном процессе позволяет разделить их на две неравные группы: стандартизованные тесты, обладающие нормами выполнения, и не стандартизованные тесты, которых значительно больше, поскольку их делает каждый педагог для использования в повседневном учебном процессе. Не стандартизованные тесты нередко называют авторскими.
Если в качестве признака демаркации выбрать виды контроля и характер задач, решаемых преподавателем с помощью тестов, то классификация видов педагогических тестов имеет вид, приведенный на рис. 3.6.
Рис. 3.6. Классификация видов педагогических тестов по видам педагогического контроля
Анализ классификационной таблицы позволяет выделить в качестве основополагающих четыре вида педагогических тестов, среди которых наибольшую важность по сфере использования имеют итоговые нормативно-ориентированные тесты.
Увеличение влияния тестирования на принятие управленческих решений на основе данных мониторинга и анализа качества образования во многих странах в XXI в. привело к возникновению нового вида тестов административно-управленческого назначения (в англоязычной литературе – High-Stakes tests). Данные административно-управленческого тестирования служат важным информационным источником для анализа последствий образовательных реформ и инноваций в образовании, проведения сравнительных исследований качества подготовленности выпускников различных вузов России, процедур комплексной проверки деятельности учебных заведений при их аккредитации и т.д. [25, 27].
Единицей контрольного материала, входящей в тест, является тестовое задание, в котором определяется то, что однозначно считается правильным ответом, и определяется степень его полноты для случая самостоятельного конструирования ответа испытуемым.
Каждое тестовое задание должно иметь определенный порядковый номер, стандартную инструкцию по выполнению, эталон правильного ответа или стандартизованные правила по оценке результатов его выполнения и статистические оценки его системообразующих характеристик, удовлетворяющие определенным требованиям теории педагогических измерений. Обычно для выполнения этих требований проводят не менее 2–3 апробаций, по результатам которых ведется коррекция содержания, формы, трудности задания, его валидности и статистических свойств, характеризующих качество его работы в связке с остальными заданиями теста.
Анализ и коррекция характеристик тестового задания должны быть основаны на дескриптивной (описательной) статистике, дополняемой методами корреляционного и факторного анализа. Проведение такого анализа требует учета множества условий, в том числе целей разработки и вида теста при оценивании его надежности и валидности. Естественно, что в длительной апробации и коррекции на репрезентативной выборке обучаемых нуждаются в основном аттестационные итоговые тесты, используемые для принятия управленческих решений в образовании. Работа по коррекции аттестационного теста консолидирует систему тестовых заданий – постепенно нарастает внутренняя связь и целостность, интегративность системы, совершается переход от совокупности контрольных заданий к профессионально разработанному итоговому тесту для оценки учебных достижений студентов.
3.5. Инновационные измерители в контексте компетентностного подхода
Современные тенденции в трактовке качества результатов образования, связанные с компетентностным подходом, привели к появлению новых видов итоговых измерителей, выявляющих позитивную динамику изменений подготовленности, активность обучаемых в усвоении знаний, рост их компетентности, степень освоения коммуникативных и интеллектуальных умений. В частности, во многих странах стали использовать портфолио, значительно расширяющие возможности подготовки студентов к прохождению итоговой аттестации благодаря учету новых форм учебных достижений в течение определенного промежутка времени, оценки динамики прироста подготовленности и привлечения внешних источников информации о качестве подготовленности студентов, столь важных в компетентностном подходе.
Под портфолио понимают целевую подборку работ студента, раскрывающую его успехи и достижения в одной или нескольких учебных дисциплинах, оценивание умений самостоятельно решать проблемы различного содержания и проявлять логическое мышление при выполнении законченных практико-ориентированных работ, проектов и набросков, особенно значимых для поставленных целей обучения [9, 23, 32]. Подборка обязательно проводится с участием самого обучаемого и включает его лучшие работы, которые оцениваются на основе четко определенных критериев выставления баллов независимыми экспертами (преподавателями, сокурсниками и т.д.) и сопровождается свидетельствами самостоятельной работы обучаемого.
Сегодня в образовании сложилась определенная типология портфолио, представленная, в отечественных и зарубежных работах (рис. 3.7).
Рис. 3.7. Типология портфолио
Первый вид, известный в зарубежных публикациях под названием «рабочее портфолио», рассматривает подборку работ студента за определенный период времени, показывающую произошедшие изменения в его знаниях. Второй вид – протокольное портфолио – может содержать любые работы, отражающие в форме документов все виды учебной деятельности: от результатов участия в «мозговой атаке» до черновиков готовых работ. Третий вид, встречающийся в зарубежных публикациях – процессное портфолио – отражает достижения студента сообразно документированным фазам процесса обучения. Этот вид портфолио особенно полезен в документировании всего процесса обучения, поскольку может показать, как студент овладевает определенными знаниями и умениями на разных фазах учебного процесса. В дополнение к этому процессное портфолио неизбежно стимулирует формирование мнения студента относительно динамики процесса учения. Четвертый вид – итоговое портфолио – обычно используется для получения суммарной оценки знаний и умений студентов на основе интегрирования оценок, полученных по основным предметам учебной программы. Пятый вид – оn-line портфолио – специфичен, он сложился буквально в последние годы в связи с широким развитием дистанционного обучения [23]. Его структура представлена на рис. 3.8.
Рис. 3.8. Структура on-line портфолио
В общей структуре on-line портфолио можно выделить четыре основных компонента: материалы, подтверждающие достижение студентом основных задач курса; материалы, представляющие собственное видение студентом учебного материала; результаты осмысления проделанной им работы в рамках индивидуального плана; отчет о результатах выполнения завершающего проекта по осваиваемому курсу.
В рамках этой структуры он-лайн портфолио может принимать различные формы. Первая форма может быть создана студентом путем загрузки ряда документов в специально отведенную для этого часть общего сайта курса, предполагающую работу студента по заранее составленному шаблону. Вторая форма портфолио позволяет обучающемуся создать собственную веб-страничку и составить ответы в соответствии с собственным пониманием форм отчета по курсу обучения. Хотя первый из этих двух вариантов, несомненно, легче в освоении и использовании, второй вариант дает студентам больше свободы, позволяет работать более самостоятельно, проявляя в полной мере способности к творчеству по результатам обучения.