Семантическое сходство вербальных обозначений и статических Emoji экспрессий базовых эмоций

Введение

Ключевым вопросом в экспериментально-психологических исследованиях проблемы познания и общения в парадигме когнитивно-коммуникативного подхода [8; 1; 2] является анализ эмоциональных состояний человека. В ситуации общения, эмоция выступает как индивидуальная оценка эмоционального события, имеет свою динамику во времени и влияние на субъектов общения [20]. В исследованиях эмоциональных состояний человека прежде всего изучаются два основных параметра — валентность (тон) и интенсивность (сила) эмоции. Валентность представляет собой параметр оценки объекта и/или ситуации в терминах принятия или непринятия с переживанием положительной либо отрицательной эмоции, в то время как интенсивность определяет уровень активации состояния — от спокойного до возбужденного (спокойствие/возбуждение). Исследователи также акцентируют внимание на том, что эмоциональный опыт воплощается в физиологической активности, запускает адаптационные механизмы, активирует двигательную систему, субъективные ощущения и проходит когнитивную оценку [28]. Когнитивная оценка включает субъективные эмоциональные переживания, относящиеся к самооценке или оценке партнера по общению. Для оценки каждого из компонентов эмоционального опыта исследователями разработаны определенные методические процедуры. Так, например, для оценки субъективных переживаний широко используются вербальные шкалы, измеряющие модальность и интенсивность переживаемых эмоций (например, «Шкала дифференциальных эмоций» К. Изарда). Чтобы оценить эмоции по таким шкалам, респонденты должны: 1) воспринимать собственные эмоции, 2) выполнять языковую концептуализацию и 3) конструировать вербальные ответы, передающие тонко дифференцированные аффективные характеристики. Однако процесс такого рода является весьма сложной задачей и для взрослого человека, не говоря уже о том, какие трудности он может представлять для детей младшего школьного возраста [29]. Возможность оценки эмоциональных состояний ребенка выступает отдельной проблемой, решение которой ставит перед исследователями ряд вопросов, требующих экспериментального исследования, основными задачами которого являются: как оценка динамики эмоциональных переживаний детей во взаимодействии с предметным окружением, в повседневных жизненных ситуациях и в процессе воспитания, так и анализ степени доступности содержания внутреннего мира ребенка, как для самооценки, так и для оценки специалистом-психологом.

В исследованиях способности детей к восприятию эмоций показано, что они способны воспринимать и распознавать эмоциональную валентность выражения лица, начиная с 6,5 месяцев, способны различать проявления эмоций в поведении [31] и различают базовые эмоции [25]. Развитие данной способности с возрастом происходит наряду с формированием способности контролировать самовыражение эмоций. В такого рода исследованиях сравнительный анализ эмоций основывается на дихотомических шкалах (например, радость/страх), причем основным измерением является различие по тону. Однако отсутствуют данные о том, что ребенок способен распознавать интенсивность любой из эмоций, как в пределах одного тона, так и эмоции разных тональностей (например, грусть/гнев). Результаты исследования Льюиса с коллегами, посвященные изучению способности детей младшего возраста к самооценке, указывают на более позднее ее развитие, в то время как первоначально детям требуется больше времени для перцепции вербальных значений эмоций и их тонких различий [22]. В многочисленных зарубежных исследованиях развития эмоционального ментального словарного запаса в раннем возрасте показано, что при поступлении в школу дети имеют специфическую лингвистическую компетентность для вербальной концептуализации, как своих эмоций, так и эмоций других людей [27].

Данные о недостаточной сформированности способности к вербальной концептуализации определили подход к оценке эмоций у детей дошкольного возраста, который заключался в использовании только невербальных графических шкал. Наиболее широко известна шкала «Self-Assessment Manikin» (SAM), разработанная Лангом и Брэдли [17]. Валидность SAM была подтверждена в многочисленных исследованиях с участием респондентов от раннего детского до более старшего возраста, как группы нормы, так и группы патологии. Методика SAM является простым и практичным методом оценки аффективных состояний и удобна в применении при работе с детьми. Но стимульный материал в виде графических человечков, лица которых выражают то или иное эмоциональное состояние, не является релевантным задаче различения дифференциальных характеристик эмоций, а потому возникает необходимость проведения дебрифинга в условиях недостаточно сформированного у детей словарного запаса, касающегося описания эмоций.

В исследовании эмоциональной сферы детей французскими психологами в качестве основного метода использовался диктант эмоционально насыщенного текста с целью оценки интенсивности и валентности переживаемых детьми положительных и отрицательных эмоций, а также изучения взаимосвязи эмоциональных и когнитивных процессов в обучающей среде. Дети оценивали свое состояние по 5 бальной шкале с использованием вербальных обозначений эмоций (счастливый, радостный, гордый, довольный, обеспокоенный, злой, грустный, неловкий, скучающий). Однако разработанный авторами метод также не позволяет преодолеть ограничения, связанные с еще недостаточно сформированным словарным запасом у детей в возрасте от 7 до  11 лет (18].

Наиболее известной вербальной шкалой является методика «Positive and Negative Affect Scale» (PANAS), разработанная Уотсоном с коллегами [30]. PANAS адаптирована для культурных групп взрослого населения: Великобритании, Испании, провинции Кордова в Аргентине, афроамериканского сообщества США, для Бразилии и России [11], — для детей в бразильской версии — от 7 до 16 лет, в США — от 9 до 14 лет, а также для детей с тревожными расстройствами. Специалисты в области психологии эмоций считают данную методику достаточно эффективной, однако указывают на ряд ограничений: методика основывается на самооценке, но поскольку существует тенденция, как к переоценке, так и к недоценке собственных чувств, то вызывает сомнения точность результатов диагностики; некоторые из пунктов шкалы отличаются неоднозначностью формулировки; и наконец, шкала не охватывает широкий спектр более сложных эмоциональных состояний [29].

Следующий вербальный опросник — Краткая интроспективная шкала настроения (BMIS) — обладает надежностью и достоверностью, часто применяется для оценки эмоциональных состояний в прикладных исследованиях [24], однако не имеет детского варианта.

Самостоятельным направлением в психологии эмоций выступают процедуры индукции эмоций с подбором соответствующего стимульного материала (фото, видео эталонов эмоциональных экспрессий). Так, например, Майер с коллегами разработали процедуры индукции для четырех базовых эмоций: гнева, грусти, радости и страха. .Метод включает предъявление визуальных эмоциональных стимулов с управляемыми изображениями в звуковом сопровождении [23]. Процедура выполняется в игровой форме, относится к категории неинтрузивных технологий и в наибольшей степени подходят для индукции эмоциональных состояний у детей.

Таким образом, можно сделать вывод о существенных ограничениях разных методов диагностики эмоциональных состояний у детей разного возраста и необходимости разработки методов оценки и анализа с учетом их возрастных особенностей. Имеющиеся вербальные шкалы изначально не были разработаны с учетом лексических особенностей детей, не всегда ясно понимающих тонкие различия эмоциональных характеристик; а существующие графические инструменты являются слишком обобщенными и не позволяют дифференцированно эксплицировать эмоциональный опыт ребенка.

В нашей работе была поставлена задача разработки методических приемов оценки эмоциональных состояний, предметов и объектов восприятия детей на основе невербального визуального материала, а также процедур индукции эмоциональных состояний детей младшего и среднего школьного возраста для создания фото- и видео-эталонов базовых эмоциональных экспрессий. Обе задачи осуществлялись при помощи создания анимационных динамических и статических стимульных изображений базовых эмоциональных экс­прессий, подготавливаемых при помощи цифровых технологий.

Подготовка стимульного материала

Для подготовки визуального стимульного материала использовалась программа «Animoji» смартфона «Apple», позволяющая создавать из имеющихся в ее базе идеограмм (Emoji) людей и животных (рис. 1) анимированные динамические видеоизображения (Animoji), передающие мимическую активность лица, изображение которого фиксировалось фронтальной камерой смартфона в реальном времени. Распознавание экспрессий лица, изображения которого накладывалось на идеограммы, осуществлялось с помощью фейсридера «Face ID», входящего в программное обеспечение iPhone-Apple (модельный ряд «X») с 2017 г.; по данным разработчиков, программа распознает более 50 различных выражений лица.

Рис. 1. Слева — сетка точек алгоритма сканируемой мимической активности лица, справа — Emoji панды с наложенными мимическими проявлениями (презентация технологии «Animoji» (Apple, 2017 г.))

В качестве исходного изображения было использовано изображение Emoji «малыша» в анфас без очевидных признаков гендерной принадлежности (рис. 2), на наш взгляд, наиболее подходящее для работы с детьми.

Рис. 2. Исходное Emoji «малыша», использованное для создания Animoji и Emoji экспрессий базовых эмоций

Процедура создания анимационных видеоизображений проводилась с участием опытного натурщика, владеющего навыком произвольного конструирования на своем лице экспрессий базовых эмоций и опирающегося на системы кодирования лицевых сигналов (FACS) П. Экмана [19] и актерского мастерства Станиславского [13]. Ранее этот же натурщик участвовал в подготовке базы эмоциональных экспрессий ВЕПЭЛ, на данный момент валидизированной и использующейся в исследованиях восприятия эмоций [6; 14]. Изображаемые натурщиком базовые эмоциональные экспрессии на лице снимались фронтальной камерой смартфона с расстояния 30—40 см. Изображение обрабатывалось программой «Animoji», которая создавала анимированные динамические видеоизображе­ния (Animoji), накладывая на исходное Emoji «малыша» мимические признаки базовых эмоций. Программа записи с экрана сохраняла видеоизображения в память смартфона. В результате были подготовлены динамические Animoji 9 базовых эмоций: радости, страха, удивления, печали, гнева, отвращения, смущения, презрения, вины [7]. Затем посредством покадрового просмотра видеозаписей в программе видеоредактора «Final Cut Pro X 10.4.6» из полученных видеоизображений экспертом отбирались отдельные кадры — Emoji экспрессии эмоций разной степени выраженности (слабая, средняя, сильная). В общей сложности было отобрано по три Emoji экспрессии 9 базовых эмоций (27 изображений). Затем при помощи графического редактора «Adobe Photoshop CS6» изображения выравнивались по размеру (400 х 400 pic, формат *png), по центру, по линии глаз, носа, рта. На некоторых изображениях допускались изменения фронтального наклона головы в соответствии с естественными движениями при переживании отдельных эмоций. Полученные изображения — Emoji (E) экспрессии базовых эмоций кодировались буквенно-цифровыми кодами с использованием названий эмоций в английском языке: гнев — EAg (anger); презрение — ECt (contempt); отвращение — EDg (disgust); страх — EFr (fear); вина — EGt (guilt); радость — EHp (happiness); грусть— ESd (sadness); стыд/смущение — ESh (shame); удивление — ESu (surprise). Степень выраженности — слабая, средняя, сильная — обозначалась цифрами 1,2, 3 соответственно (рис. 3).

Рис. 3. Emoji экспрессии эмоции гнева: Ag-1 — слабый; Ag-2 — средний; Ag-3 — сильный

Далее полученные Emoji экспрессии предстоит верифицировать на соответствие характеристикам базовых эмоций. На данный момент выполнен первый этап верификации с применением методической процедуры семантического дифференциала.

Метод исследования

Исследование соотношения оценок Emoji экспрессий и вербальных обозначений эмоций проводилось с использованием метода семантического дифференциала (СД) [26; 12; 9]. 27 Emoji экспрессий и вербальные обозначения 9 эмоций оценивались по 19 специально разработанным нами полярным шкалам СД на основании следующих характеристик: приятный—неприятный; активный—пассивный; мягкий—твердый; быстрый—медленный; сильный—слабый; холодный—теплый; добрый—жестокий; грубый—нежный; дружелюбный—враждебный; статичный—динамичный; открытый—закрытый; раздражающий—успокаивающий; свободный—скованный; устойчивый—неустойчивый; общительный—необщительный; тревожный—безмятежный; тупой—острый; напряженный—расслабленный; тихий—громкий.

Оценка по шкалам СД позволяет построить семантические профили объектов, провести сравнительный анализ их параметров, а также выявить взаимосвязи между ними. В нашем случае сходство семантических профилей и значимость полученных корреляционных связей будет свидетельствовать о конгруэнтности Emoji экспрессий базовых эмоций соответствующим эмоциям и возможности использования их в качестве стимульного материала в исследованиях эмоциональной сферы детей.

В исследовании приняли участие 61 человек — студенты московских вузов и взрослые с высшим образованием в возрасте от 18 до 52 лет (средний возраст 24,7 лет), 42,3% мужчин и 57,7% женщин. Все участники имели нормальное или скорректированное до нормального зрение.

Для анализа взаимосвязей семантических профилей применялся коэффициент корреляции p Спирмена при помощи статистического пакета SPSS-22.

Обработка и анализ данных

Оценки Emoji экспрессий и вербальных обозначений («V») базовых эмоций по шкалам СД позволили построить семантические профили и осуществить сравнительный анализ изучаемых показателей. На рис. 4 приведен пример семантических профилей Emoji экспрессии слабой степени выраженности (EHp-1) и оценок вербального обозначения эмоции радость (VHp) (p=,700; p<0,05).

Рис. 4. Семантические профили вербального обозначения (VHp) и Emoji экспрессии (EHp-1) эмоции радость; по оси абсцисс — номера семантических шкал, по оси ординат — значения показателей по шкалам СД 

Результаты проведенного анализа указывают на значительное соответствие вербальных обозначений эмоций с оценками Emoji экспрессий по шкале 16 — «тревожный—безмятежный» и меньшее соответствие по шкале 19 — «тихий—громкий».

В табл. 1 представлены результаты корреляционного анализа оценок семантического сходства и различия Emoji экспрессий и их вербальных обозначений.

Таблица 1

Коэффициенты корреляции по шкалам СД вербальных обозначений и Emoji экспрессий базовых эмоций (р-Спирмена)

Как следует из таблицы, при сравнении семантических оценок наиболее релевантными оказались Emoji экспрессии трех эмоций: радость, отвращение, печаль. Значимые корреляции получены между оценками вербальных обозначений и Emoji экспрессий данных эмоций по степени их выраженности — от слабой корреляции для экспрессии печали незначительной степени выраженности (ESd-1 — 0,555; p=0,014) до максимально высокого значения (практически единица) — для средневыраженной экспрессии радости (EHp- 2 — 0,999, p=0,000). Emoji экспрессии гнева имеют высокие коэффициенты корреляции с обозначением данной эмоции при средней (EAg-2 — 0,748; p=0,000) и значительной ее выраженности (EAg-3 — 0,782; p=0,000), в то время как при слабой выраженности такой взаимосвязи не выявлено. Emoji экспрессии удивления и их вербальное обозначение обнаруживают незначительные взаимосвязи при средней (ESu-2 — 0,498; p=0,030) и сильной (ESu-2 — 0,510; p=0,026) их выраженности и отсутствует при слабой. Emoji экспрессии презрения обнаруживают низкий уровень взаимосвязи с их вербальным обозначением в случае сильной выраженности (ECt-3 — 0,555; p=0,014), отрицательную корреляцию при средней выраженности (ECt-2 —0,917— p=0,000) и не имеют значимой корреляции при слабой.

Наименьшее соответствие оценок вербального обозначения и Emoji экспрессий эмоций обнаруживается при анализе эмоции страха — в случае слабой и средней выраженности получены значимые отрицательные взаимосвязи (EFr-1 —0,777; p=0,000; EFr-2 —0,539; p=0,000), при значительной выраженности взаимосвязи не наблюдается. Оценки Emoji экспрессии стыда и его вербального обозначения обнаруживают низкий уровень взаимосвязи при слабой (ESh-1 — 0,446; p=0,056) и сильной выраженности (ESh-1 — 0,499; p=0,030) эмоции и не обнаруживают при средней. Оценки Emoji экспрессий вины и ее вербального обозначения коррелируют только при значительной выраженности экспрессии (EGt-1 — 0,712; p=0,001).

Обсуждение результатов

В результате теоретического анализа проблемы наиболее общий вывод состоит в том, что способности детей младшего школьного возраста к самооценке эмоций с использованием вербальных опросников затруднены в связи с недостаточной лингвистической компетентностью, необходимой для перцепции тонких различий вербальных обозначений эмоциональных характеристик. В обзорно-аналитической работе О.В. Гордеевой по проблеме развития языка эмоций у детей приводятся данные ряда авторов, указывающих на возраст 18—20 месяцев как на начало обретения и использования обозначающих эмоции слов с посследующим быстрым ростом их числа в течение третьего года жизни. Исследователями также обнаружено, что между 13 и 36 месяцем дети научаются называть эмоции других настолько же успешно, как и собственные, обсуждать пережитые и предполагаемые эмоции, рассуждать о произошедшем и последующих эмоциональных состояниях. Также показано, что наиболее значительный скачок развития вербальной компетентности происходит у детей в период между 10 и 12 годами (результаты получены на возрастной группе 7—14 лет) [3]. Отмечается, что выраженная способность описывать эмоциональные переживания появляется у детей в возрасте 10—11 лет и связана, преимущественно, с возрастанием вербальных возможностей ребенка. В работах Карелиной И.О. показано, что дети 4—5 лет в целом способны понять и объяснить значение базовых эмоций «радость», «грусть», «страх», «злость» при описании эмоциогенных ситуаций, действий окружающих, состояния партнера по общению и содержание эмоциональных переживаний, опираясь при этом на эмоциональные модально специфичные признаки, объединенные в категории (радость — «комфорт», грусть — «дискомфорт», злость — «активность» («агрессия со стороны»), страх — «напряжение»). В то же время автор указывает на испытываемые дошкольниками трудности в семантической ориентировке на слово-стимул, обозначающее эмоциональное состояние при дифференциации отрицательных эмоций в связи с особенностями функционирования модели психического [5].