Результаты обучения в высшем образовании на национальном уровне на примере проекта «Оценка результатов обучения в высшем образовании» (CLA)

Измерение результатов обучения студентов необходимо и возможно. Необходимо для того, чтобы: оценить, насколько успешно идет процесс обучения студента в вузе, насколько результаты обучения согласуются с учебными целями; точнее сформулировать цели и задачи обучения в высшей школе и улучшить качество преподавания, организации учебной деятельности студентов и взаимодействия преподавателей и студентов. Возможность измерения результатов обучения в высшей школе показана многочисленными исследованиями в странах Европы, Австралии, Америки [6; 9; 11]. Однако в вопросах, что именно нужно измерять и каким образом, консенсус между исследователями и практиками пока не найден.

Цель статьи: проанализировать имеющиеся толкования понятия «результаты обучения» и возможности реализации исследований в данной области на примере проекта «Оценка результатов обучения в высшем образовании» (Collegiate learning assessment, CLA).

Исследовательский вопрос: каким образом понимаются и оцениваются результаты обучения в высшем образовании?

Охарактеризуем некоторые представления теоретиков и практиков образования о предмете и способах измерения результатов обучения студентов в вузе.

В современных исследованиях существует несколько вариантов трактовки термина «результаты обучения» (learning outcomes) студента в вузе. В данной статье мы будем фокусировать внимание на результатах, которые складываются как следствия обучения студентов в рамках высшего образования, и не будем принимать во внимание результаты, относящиеся к социально-коммуникативному развитию индивида и другим процессам развития, которые находятся вне контекста высшего образования.

В самом общем плане результаты учения в высшей школе охарактеризовал С. Оттер (S. Otter) [13], определивший результат как то, что студент знает или умеет делать в результате обучения. Дж. Аллан (J. Allan) полагает, что результат описывает реальные достижения студента на фоне того, чему должен был научить его вуз [1]. Многие авторы определяют результаты учения как нечто, что может быть наблюдаемо, продемонстрировано и измерено [10; 15]. Однако подобные определения задают лишь общие границы и мало­полезны для понимания сути результатов обучения.

П. С. Блум (P.S. Bloom) [2] полагает, что при оценивании результатов учения важно фокусироваться не на содержании, не на аспекте знаний, а на том, что студенты должны научиться делать с данным содержанием. По таксономии П.С. Блума (P.S. Bloom) [2] необходим выход за пределы фактического знания и понимания для того, чтобы включить в результаты учения такие навыки, как: понимание, применение знаний для решения проблем, синтез, анализ и оценка.

Д. Нуш (D. Nusche) [12] описывает типологию результатов учения студента вуза, основанную на классическом разделении между когнитивными и некогнитивными результатами обучения. Когнитивные результаты включают знания, развитие интеллектуальных способностей и навыков, а также узко специфические умения - навыки рассуждения и решения проблем [14]. В области знаний как результатов обучения Д. Нуш (D. Nusche) [12] предлагает различать результаты-знания и результаты-навыки. Результаты-знания включают знание общего содержания и знания специфической области или узко предметные знания. Результаты-навыки включают три компонента: когнитивные навыки, универсальные навыки и узко-предметные навыки. И те, и другие необходимы для полного представления результатов учения студента [12].

К когнитивным навыкам относят вербальное мышление, понимание, аналитические операции, критическое мышление, решение проблем, оценку новых идей. Вторая группа навыков - универсальные - характеризуется тем, что они не зависят от предмета и могут быть применены в любой предметной области. Их можно оценивать с помощью тестов, основанных не на знаниях, а на умении применить эти знания, т. е. на способности студентов решать интеллектуальные проблемы. И третья группа - узко-предметные навыки - понимаются как способы, паттерны размышления, присущие именно данной профессиональной области. И знания, и навыки имеют давние традиции оценивания, эти категории хорошо описаны и имеют инструменты для измерения [12].

К некогнитивным результатам Д. Нуш (D. Nusche) [12] относит такие компоненты, как: социальная активность, психосоциаль­ное развитие, понимаемое как определенные аспекты саморазвития: развитие идентичности и самооценки, развитие навыков межличностного общения, обретение индивидом автономии и зрелости, а также такой компонент, как установки и ценности личности, которые способствуют формированию мотивации учения и социальной ответственности. Измерение некогнитивных результатов основано на индивидуальном восприятии, оно менее объективно и может быть получено с помощью самоотчетов студентов, отчетов факультетов и образовательных учреждений, отчетов работодателей [12].

К. Винч (Ch. Winch) и Л. Фореман-Пек (L. Foreman-Peck) охарактеризовали более общую модель результатов учения - модель компетентности. Согласно авторам [8], компетентность лежит на пересечении действия, знаний, ценностей и целей в различных вариациях и соотношениях. Такая концепция результатов учения основана на идее, что типология результатов неадекватно схватывает суть интегрированного результата, который объединяет различные навыки в реальной деятельности [8]. Согласно этому объяснению, результаты учения должны быть определены и наблюдае­мы в контексте задач актуальной деятельности. При этом компетентность определяется как способность успешно справляться с задачами и содержит когнитивные и некогни­тивные компоненты. В рамках данной способности выделяются общие компетенции - широкий набор способностей, которые могут быть применены к широкому спектру ситуаций, и профессиональные компетенции - способность решать разнообразные профессиональные задачи.

А. Коул (A. Cole) [4] характеризует две наиболее общие концепции образовательных результатов: 1) формирование базовых навыков и базовых знаний; 2) формирование навыков высокого порядка и продвинутых знаний. Базовые навыки и базовые знания представляют собой простую демонстрацию отдельных навыков и знание общеизвестных фактов. Навыки высокого порядка и продвинутые знания включают комплексные знания, критическое мышление, решение проблем, понимание и способность к оценке, опознание ситуаций и условий для использования знаний, использование навыков саморегуляции [4].

С.П. Кляйн (S.P. Klein) и соавторы предлагают термин «широкие способности», понимаемые как комплекс когнитивных процессов. Широкие способности включают вербальное, количественное и пространственное мышление, понимание, решение проблем и принятие решений в максимально широкой области. Эти способности развиваются благодаря обучению и переносу навыков из общего опыта, повтору упражнений из профессиональной области в соединении с предыдущим учением и общими мыслительными способностями. Многие из значимых результатов высшего образования ассоциируются с развитием этих широких способностей [7].

Таким образом, представленные варианты трактовки результатов обучения студентов чрезвычайно разнообразны. В каждом подходе обосновывается свое понимание необходимых и важных результатов. Под результатами обучения понимается то, что студент знает или умеет делать в результате обучения [13]; реальные достижения студента [1]; нечто, что может быть наблюдаемо, продемонстрировано и измерено [10; 15]; академические навыки: понимания, применения знаний для решения проблем, синтеза, анализа и оценки [2]; базовые навыки и базовые знания, а также навыки высокого порядка и продвинутые знания [4]; навыки высокого порядка, представленные как совокупность навыков критического мышления, аналитического рассуждения, решения проблем и письменной коммуникации [14]; широкие способности, интерпретируемые как вербальное, количественное и пространственное мышление, понимание, решение проблем и принятие решений [7].

Не все представленные результаты обучения в высшем образовании принципиально могут быть измерены. Некоторые формулировки слишком абстрактны (например, навыки высокого порядка и продвинутые знания) или недостаточно операционализированы (например, вербальное, количественное и пространственное мышление). Однако можно выделить нечто, что объединяет многие подходы. Практически в каждом подходе в том или ином виде присутствуют так называемые мета-навыки, надпредметные умения, не зависящие от специфики профессионального образования, получаемого студентом, и обеспечивающие качественное взаимодействие с информацией. Именно взаимодействие, так как эффективный современный специалист должен уметь получить информацию, выделить существенное, структурировать существенное, компилировать необходимую и достаточную информацию, оформить ее в виде, понятном пользователю, и применить в подходящей ситуации.

В качестве примера оценки надпредмет­ных умений, получаемых студентом в результате обучения в высшем учебном заведении и обеспечивающих работу с информацией, может быть рассмотрен проект «Оценка результатов обучения в высшем образовании» (Collegiate learning assessment, CLA)[3], организованный Советом помощи образованию в США (Council for Aid to Education, CAE) [5]. Проект реализуется достаточно широко и имеет общедоступную базу данных. Кроме того, США является наиболее активным проводником инноваций и инициирования исследований в области образования, что позволяет говорить о данной стране как об одной из ведущих в области разработки исследований и внедрения результатов проектов.

В основу подхода проекта CLA положена оценка надпредметных умений: критического мышления, аналитического рассуждения, способности решения проблем, письменной коммуникации. Эти надпредметные умения отобраны как наиболее универсальные, не зависящие от профессиональной направленности обучения, и актуальные для современного специалиста.

Проект CLA включает непосредственное тестирование студентов, которое осуществляется с помощью блока заданий. На решение всего блока отводится 90 минут. Используются два типа заданий: задачи информационного анализа (the Performance Task) и задачи по работе с аргументами (the Analytic Writing Task).

Задачи первого типа представляют собой деятельность по анализу информации, собранной в документах. Студенту предлагается ответить на серию открытых вопросов по поводу гипотетической, но реалистичной ситуации, используя свои способности к анализу информации и рассуждение. В ответах должна содержаться ясная и очевидная законченная мысль. Кроме указаний и вопросов каждая задача имеет определенный набор документов, который включает письма, записки, резюме отчетов о научно-исследовательской работе, газетные статьи, карты, фотографии, графики, диаграммы, таблицы. Студентов инструктируют, как использовать эти материалы при подготовке ответов на задание.

Подобные задачи часто актуализируют умения студентов отличать рациональные доказательства от эмоциональных способов аргументации, мнения от фактов, понимать данные, представленные в таблицах и графиках, дают возможность изложить свое отношение к неадекватной или противоречивой информации. Студент должен найти информацию, которая соответствует или не соответствует поставленной задаче, проанализировать дополнительную информацию, которая может помочь в решении, должен взвешивать, организовывать и синтезировать информацию из различных источников для того, чтобы правильно выполнить поставленную задачу.

Задачи работы с аргументами делятся на два типа задач: аргументирование и критика. Задачи аргументирования (Make-an- Argument) заключаются в том, что студент должен в ответ на заданное утверждение написать «аргументирующее» эссе: определить собственную позицию по данному конкретному поводу, организовать, развить и выразить свои идеи, поддержать их соответствующими примерами или соображениями, ответить на ожидаемые контраргументы, при этом студент должен показать хороший уровень владения нормами письменного языка.

Задачи критики (Critique-an-Argument) актуализируют у студентов умение критически относиться к определенной информации и писать «критические» эссе: увидеть сомнительные аргументы и положения, недостатки информации, несогласованности. Студент должен объяснить недостатки точки зрения автора, организовать, развить и выразить свои идеи, подкрепить свои идеи аргументами или соответствующими примерами.

CLA использует прямое измерение навыков, которые должны быть применены студентами при выполнении когнитивных задач. CLA-задачи требуют, чтобы студенты объединили критическое мышление и навыки письменной коммуникации. Целостная интеграция этих навыков позволяет решать задачи мышления и письма, необходимые в жизни за пределами учебной ситуации. Качество навыков оценивается в баллах. Тип задач - вопросы с открытым ответом, которые требуют конструирования ответа. Каждое из трех заданий оценивается по нескольким категориям. Для каждой категории предусмотрено шесть уровней, отличающихся качеством выполнения.

Первый тип заданий - анализ информации различного типа - позволяет оценить четыре типа навыков, необходимых для его выполнения: аналитическое рассуждение и оценка, письменная эффективность, культура письменной речи, способность к решению проблем. Аналитическое рассуждение и способность к оценке трактуются как способность студента интерпретировать, анализировать и оценивать качество информации. Студент должен уметь идентифицировать информацию как соответствующую задаче, выбирать сходную или противоположную информацию, находить недостатки в логике или сомнительные рассуждения, объяснять, почему информация вероятна, ненадежна или ограниченна. Письменная эффективность понимается как способность конструировать и излагать структурированные и логично выстроенные доказательства, умение усиливать авторскую позицию с помощью фактов или идей. Культура письменной речи подразумевает владение студентом нормами письменной речи (грамматика, орфография, пунктуация, синтаксис как построение структуры предложения, а также выбор слова и его использование). Способность решения проблем расшифровывается как рассмотрение и взвешивание информации для принятия решений (формулировки выводов или принятия определенных мер), которые логически следуют из соответствующих аргументов, доказательств или примеров, как рассмотрение важности решения и предложение дополнительного исследования при необходимости.

Второй тип заданий - аргументирование - позволяет оценить три вида навыков: аналитическое рассуждение и способность к оце­ниванию, письменная эффективность, культура письменной речи. Аналитическое рассуждение и способность к оцениванию понимаются несколько иначе, чем в предыдущем задании. Здесь студенты должны актуализировать такие навыки, как формулировка позиции, обеспечение соответствующего рассуждения для поддержки позиции автора, демонстрация понимания комплексного использования рассуждений и возможности опровержения альтернативных точек зрения. Письменная эффективность и культура письменной речи понимаются так же, как и в предыдущем задании.

Третий тип заданий - критика - позволяет оценить аналогичные три вида навыков с поправкой на специфичность конкретной задачи. Аналитическое рассуждение и способность к оцениванию для данного типа задач, кроме интерпретации, анализа и оценивания качества информации, предполагают умение студента выделять противоречивую информацию, опознавать недостатки в логике, сомнительные аргументы, а также объяснять, почему информация возможна или ненадежна, или ограниченна. Письменная эффективность предполагает умение студента выстроить структурированные и логично связанные между собой доказательства, усиливая собственную позицию с помощью указания на недостатки автора в аргументации. Культура письменной речи понимается аналогично оце­ниванию в первом и во втором типах заданий.

В результате выполнения заданий студент получает «отметки» в баллах по надпредмет­ным навыкам: аналитическое рассуждение и оценка, письменная эффективность, культура письменной речи. Шесть уровней подробно описывают качество выполнения задания по каждому из критериев. Подобное качественное описание может прояснить, в каком направлении развития навыков нужно работать, и представляет собой средство обратной связи как для студентов, так и для преподавателей.

Итак, проект «Оценка результатов обучения в высшем образовании» выступает как пример реализации одного из подходов к оценке результатов обучения в высшем образовании. Данный подход базируется на теоретическом представлении о результатах обучения в колледжах США, а именно, о надпредметных навыках, которые должны быть сформированы в результате учения студента в колледже независимо от направления подготовки. К надпредметным навыкам, измеряемым в проекте CLA, отнесены такие навыки, как: аналитическое рассуждение и оценка, письменная эффективность, культура письменной речи, способность к решению проблем. Теоретическая рамка проекта воссоздает и обосновывает типы задач, решение которых требует актуализации измеряемых навыков.

Представленный теоретический обзор трактовок результатов обучения в высшем образовании свидетельствует о чрезвычайном разнообразии вариантов. В каждом подходе обосновывается свое понимание необходимых и важных результатов. Не все результаты обучения принципиально могут быть измерены. Примером эффективной оценки результатов обучения в высшем образовании выступает проект CLA, используемый в колледжах и университетах США, в рамках которого измеряются надпредмет­ные умения студентов, не зависящие от специфики профессионального образования и обеспечивающие качественное взаимодействие с информацией. Результаты измерения надпредметных навыков могут быть использованы колледжами или университетами для оценки уровня навыков первокурсников и анализа динамики уровня каждого студента в течение обучения, а также для оценки компетенций выпускников и анализа степени качественного прироста уровня исследуемых навыков за время обучения в колледже или университете.

В современном российском высшем образовании наиболее распространенным стал компетентностный подход, ориентирующий студентов не столько на получение знаний, сколько на приобретение компетенций - способностей применять собственные знания и умения в контексте знакомых или новых ситуаций, задач, проблем. Опыт проекта CLA может стать ценным материалом для организации оценки качества результатов обучения в высшем образовании в рамках компетентностного подхода.