Клиническая и специальная психология
2024. Том 13. № 3. С. 100–122
doi:10.17759/cpse.2024130305
ISSN: 2304-0394 (online)
Восприятие пиктографических систем альтернативной коммуникации при расстройствах интеллектуального развития
Аннотация
Альтернативная коммуникация является вспомогательным инструментом общения для людей с коммуникативными нарушениями. Из-за разнообразия графической представленности символов альтернативной коммуникации актуальным представляется исследование классических и еще не изученных пиктографических систем с точки зрения эффективности для восполнения коммуникативных трудностей лицами с расстройствами интеллектуального развития. В статье рассматриваются особенности визуального восприятия и интерпретации понятий-существительных и понятий-глаголов как элементов пиктографической альтернативной коммуникации. Выборку исследования (N=92) составили ученики старших классов коррекционных школ в возрасте от 13 до 19 лет (M=15,5; SD=1,18), из которых 72% были мужского пола. Стимульный материал состоял из заданий на интерпретацию пиктограмм в вербальном контексте и включал понятия из трех языков альтернативной коммуникации: Blissymbolics, Pictogram и LoCoS ©. Анализ ассоциативных интерпретаций показал, что фактор принадлежности пиктограммы к пиктографической системе влияет на количество верных ответов обследуемых с расстройством интеллектуального развития легкой степени (p=0,008), а также на параметры глазодвигательной активности: количество возвратов взгляда на пиктограммы (p=0,007), количество фиксаций (p=0,018) и время просмотра (p=0,037). Делается вывод о том, что с учетом когнитивных особенностей учащихся с расстройством интеллектуального развития легкой степени, наибольшей эффективностью передачи информации обладают более простые графические формы, вне зависимости от части речи или степени схематичности.
Общая информация
Ключевые слова: нарушения , альтернативная коммуникация, восприятие, айтрекинг (eyetracking), методика «Пиктограмма», окулография, части речи
Рубрика издания: Эмпирические исследования
Тип материала: научная статья
DOI: https://doi.org/10.17759/cpse.2024130305
Финансирование. исследование выполнено за счет гранта Российского научного фонда № 24-28-01653, https://rscf.ru/project/24-28-01653/
Получена: 13.02.2024
Принята в печать:
Для цитаты: Белимова П.А., Защиринская О.В. Восприятие пиктографических систем альтернативной коммуникации при расстройствах интеллектуального развития [Электронный ресурс] // Клиническая и специальная психология. 2024. Том 13. № 3. С. 100–122. DOI: 10.17759/cpse.2024130305
Полный текст
Введение
Острой проблемой в коррекционной педагогике и психологии является эффективное использование специальных методов обучения, призванных восполнить коммуникативные трудности лиц с нарушением развития, возникающие в связи с низкой адаптацией не только индивида к среде, но и среды к особым потребностям индивида. Одной из наиболее уязвимых групп в контексте социального взаимодействия являются лица с расстройствами интеллектуального развития (РИР). Согласно Д.Н. Исаеву, нарушение интеллекта характеризуется не только недоразвитием высших психологических функций, но и снижением навыков, определяющих общий уровень интеллекта: моторики, языка, познавательных способностей [Исаев, 2003]. Коммуникативные трудности лиц с РИР связаны с целым комплексом когнитивных особенностей, оказывающих влияние на их социальную дееспособность. Экспериментальные исследования М.Е. Баблумовой указывают на несформированность коммуникативных навыков у детей с расстройствами интеллектуального развития, которая приводит к значительным трудностям в повседневном общении, обучении, и, как следствие, к слабой коммуникативной вовлеченности [Баблумова, 2013].
Более позднее начало вербального поведения, низкие темпы расширения пассивного и активного словаря, нарушения восприятия и построения развернутых синтаксических конструкций обуславливают трудности коммуникативного взаимодействия с помощью как устной, так и письменной речи [Емельянова, 2009]. Вовлеченность лиц с РИР в коммуникацию характеризуется слабой инициативностью и часто является ответом на проявление инициативы со стороны партнера [Ильина, 2017]. Особенности когнитивного, эмоционально-личностного и поведенческого компонентов отражаются на использовании и понимании средств невербального и экспрессивного общения [Защиринская, 2009; Солодков, 2016]. Вышеперечисленные аспекты оказывают влияние на коммуникативную сферу лиц с нарушениями интеллектуальной сферы даже во взрослом возрасте, затрудняя независимость и самообеспечение в повседневной жизни [Abbeduto, 2021]. Таким образом, коммуникативный дефицит является фактором риска для данной группы нарушений в контексте свободного, благополучного и безопасного функционирования в обществе.
Комплексный характер коммуникативного дефицита при расстройствах интеллектуального развития обуславливает необходимость научно обоснованных подходов к адаптации, развитию и расширению компенсаторных методологий, таких как альтернативная и дополнительная коммуникация. Методы, основанные на общении с помощью графических изображений (пиктограмм), кажутся многообещающими в перспективе замещения устной и письменной речи при различных психических и функциональных нарушениях [Amery, 2022]. Альтернативная и дополнительная коммуникация, призванная компенсировать коммуникативный дефицит лиц с особыми потребностями, требует тщательного анализа применяемых методологических компонентов через призму когнитивно-психологических характеристик целевых пользователей. Данное исследование посвящено изучению специфики визуального восприятия и интерпретации пиктограмм (символов как отдельных самостоятельных элементов пиктографических систем АДК) в группе подростков с расстройством интеллектуального развития легкой степени. Отдельное внимание уделено аспектам восприятия изображений предметов и действий (т.е. пиктограммам-существительным и пиктограммам-глаголам) как наиболее информативным и часто встречающимся элементам символьных систем.
Пиктографическая коммуникация как метод общения для лиц с расстройствами интеллектуального развития
Одним из методов восполнения речевых нарушений для людей с коммуникативным дефицитом является альтернативная и дополнительная коммуникация (АДК). АДК представляет собой обширный набор приемов и методик и подразумевает использование различных неречевых видов коммуникации, а также методологию их применения [Dada, 2021]. Исследования И.Б. Агаевой, К.М. Козловой, S. Tetzchner, C.R. Musselwhite, D.M. Russello, R.A. Sevcik, M.A. Romski, S. McNaughton и других авторов свидетельствуют в пользу улучшения коммуникативных навыков детей с расстройствами аутистического спектра, нарушениями опорно-двигательного аппарата, нарушениями интеллектуальной сферы посредством интервенций АДК. С развитием и масштабированием графической коммуникации как в общественной среде, так и в интернет-пространстве в качестве метода компенсации коммуникативного дефицита при расстройствах интеллектуального развития особый интерес представляют искусственные графические языки, которые могут использоваться в виде табличек, карточек или кнопок ассистивного интерфейса со схематичными изображениями вербальных понятий. Коммуникативными единицами в альтернативных вспомогательных языках выступают пиктограммы.
Пиктограммы (также называемые символами) широко используются в повседневной жизни как тип визуального языка. Среди общепринятых элементов знакового окружения можно перечислить знаки транспортных средств (аэропорт, железнодорожная станция и т.д.), дорожные знаки, символы ухода за одеждой, навигационные символы [Tijus, 2007]. Такие обозначения могут быстро и эффективно передавать информацию. Подразумевается, что их понимание не зависит от языка или навыков грамотности. Таким образом, использование символов может помочь людям с коммуникативными трудностями для понимания того, какую информацию хотят донести другие люди, а также для самовыражения.
Коммуникативная эффективность пиктограмм как элементов знакового окружения изучалась в рамках подготовки к Олимпийским играм в Токио в 2020 году. Был проведен сравнительный опрос, включавший людей с инвалидностью, цель которого заключалась в определении понятности пиктограмм JIS (японские промышленные стандарты; англ. Japan Industrial Standards) и ISO (Международная Организация по Стандартизации; англ. International Organization for Standardization). 19 взрослых с нарушениями интеллектуальной сферы оценивали понятность пиктограмм, в результате чего в каждой пиктограмме были выделены графические элементы, повышающие понимание. Исследование также показало связь между понятными графическими элементами и IQ. В частности, на понимание пиктограмм влияют пять графических элементов: а) человек, символизирующий местоположение; б) реальная ориентация; в) линия движения (линия эффекта, представляющая движение, акцент, звук и т.д.); г) элемент местоположения; д) стрелка, длина оси которой влияет на степень понимания [Kudo, 2022].
Исследование способности к интерпретации знаков общественных пространств лицами с расстройствами интеллектуального развития показало, что данная группа испытывает большие трудности в декодировании знаков по сравнению со сверстниками с нормативным интеллектом. При этом эффективная знаковая навигация обуславливается общепринятыми стандартами, а компоновка сложных элементов знака оказывает негативный эффект на декодирование информационно значимых стимулов [Белимова, 2023].
Возвращаясь к пиктограммам как элементам альтернативной и дополнительной коммуникации, стоит отметить отсутствие стандартов графического представления понятий в ассистивных символьных системах. Существует множество систематизированных наборов пиктограмм, доступных в виде печатных карточек или цифровых изображений. Различные наборы пиктограмм можно классифицировать с точки зрения наглядности, интуитивной понятности, гибкости, последовательности и визуальной сложности [Othman, 2021]. Например, в российской коррекционно-педагогической практике применяются различные пиктографические системы АДК, среди них наиболее популярными являются PECS и Макатон [Козлова, 2018].
Система обмена изображениями PECS — это эффективный метод альтернативной коммуникации для улучшения навыков общения у лиц с расстройствами аутистического спектра и интеллектуальными нарушениями [Denche Gil, 2023; Tamanaha, 2023; Zhang, 2023]. Система PECS представляет собой метод общения, основанный на использовании карточек и предметов для обмена информацией. Она была создана в 1985 году американскими исследователями Э. Бонди и Л. Фрост. Они подчеркивают, что дети с социально-коммуникативными особенностями редко инициируют общение, предпочитая избегать взаимодействия, что приводит к тому, что их общение происходит только при прямом указании. В рамках PECS ребенку необходимо научиться взаимодействовать с партнером, выбирая изображения желаемых предметов, чтобы получить их в реальности. Система обычно включает шесть последовательных фаз обучения:
- Моторный ответ — на этом этапе формируется ответ ребенка, сформированный системой подсказок;
- Расстояние и настойчивость — фаза включает обучение новому навыку от пробы к пробе;
- Распознавание карточек — этот этап включает несколько шагов: привлечь внимание ребенка, выбрать картинку и получить желаемый предмет;
- Структура предложения — цель этой фазы заключается в обучении детей формировать предложения с использованием картинок, а также предметов;
- Фаза «Что ты хочешь?» — на данном этапе ребенок учится спонтанно выбирать предмет в ответ на вопрос: «Что ты хочешь?»;
- Комментирование — на этом этапе ребенку предлагается выбрать предмет и дать ему описание, включая характеристики, внешний вид и назначение [Андрусенко, 2023].
Вышеописанный алгоритм обучения PECS может быть эффективным при освоении любой системы пиктографической альтернативной коммуникации в рамках подхода естественных развивающих поведенческих вмешательств (ABA-терапия) [Pope, 2024].
Таким образом, PECS предоставляет детям возможность участвовать в общении и получать конкретные результаты в социальных контекстах. Хотя PECS доказала свою эффективность в различных условиях, включая домашнюю и школьную среду [Lendio, 2023], остаются проблемы с освоением более поздних фаз и расширением массивов символов для более сложной коммуникации [Forbes, 2024]. Несмотря на эти ограничения, PECS остается ценным инструментом для повышения коммуникативных компетенций у людей со сложными коммуникативными потребностями.
Чтобы глубже понять механизм реакции лиц с расстройствами интеллектуального развития на различные категории вмешательств АДК, необходимо рассмотреть их с точки зрения долгосрочных результатов. Например, в лонгитюдном исследовании оценивалась эффективность АДК для группы из семи молодых мужчин с диагнозом ДЦП и различным уровнем интеллектуального развития (в возрасте от 19 до 23 лет), которые использовали системы АДК в течение не менее 15 лет, начиная с дошкольного возраста. Уровень интеллектуальной дисфункции и условия вмешательства были проанализированы как потенциальные факторы, влияющие на эффективность систем АДК на основе картинок, таких как PECS, и устройств, генерирующих речь. Обе категории методов АДК оказались эффективными в улучшении речевых результатов, но анализ данных показал более высокую эффективность устройств, генерирующих речь, у пациентов с ДЦП без сопутствующих интеллектуальных нарушений [Lund, 2007]. В этом же исследовании качественные интервью использовались для выявления контекстуальных факторов, которые могли повлиять на результаты. Факторы, которые препятствовали положительным результатам, включали: межличностные барьеры, культурные различия, технологические барьеры и ограничения в доступе. Вклад в положительные результаты внесли: поддержка сообщества, поддержка родителей и семьи, личные характеристики и высокое качество средств АДК [Lund, 2007].
Качество средств АДК напрямую зависит от свойств их компонентов. Наиболее важным критерием выбора пиктограмм как компонента АДК является узнаваемость, т.е. воспринимаемость символа в правильном значении без дополнительных подсказок или обучения [Mizuko, 1987]. Исследования показывают, что лучший эффект узнаваемости демонстрируют наглядные (иконичные) символы, т.е. изображения, визуально соответствующие своему вербальному референту или обозначаемому предмету [Mizuko, 1987; Musselwhite, 1984]. Кроме того, выделяют переменные, которые влияют на иконичность графических символов. Эти переменные могут быть сгруппированы в символьные, референтные, обучающие, а также индивидуальные эффекты [Dada, 2013].
С точки зрения графической представленности пиктограмм АДК основную роль играют символьные и референтные эффекты. Символьные эффекты включают в себя графическую структуру символа, материал, на котором символ напечатан, контур и форму символа, цвет, мотивационное значение, понятность, сложность, сходимость набора или системы символов, из которых он состоит, а также анимацию. Например, исследования анимированных и статичных изображений позволяют сделать вывод о том, что анимация повышает эффективность обучения детей с нарушением интеллекта. Кроме того, было обнаружено, что чем ниже возраст лингвистического развития, тем эффективнее анимированные подсказки помогают усвоить статичные визуальные символы [Fujisawa, 2011]. Однако не все средства пиктографического общения позволяют имплементировать эффект анимации — общественные знаки, аналоговые устройства АДК и коммуникативные книги с бумажными карточками остаются ограничены лишь статичными средствами отображения.
Референтные эффекты подразумевают конкретность, или простоту, с которой символ предлагает изображение своего референта [Schlosser, 2002]. При этом важную роль играет часть речи, к которой относится вербальный референт символа. Предполагается, что графические символы, представляющие существительные, могут быть более иконичными, чем символы, представляющие другие части речи [Haupt, 2002].
Таким образом, разнообразие графической представленности понятий в существующих пиктографических системах АДК обуславливает актуальность выявления наиболее эффективных средств графического выражения для лиц с расстройствами интеллектуального развития с учетом эффектов, влияющих на иконичность символов. Особый вклад данного исследования заключается в анализе регистрируемых параметров глазодвигательной активности при восприятии пиктограмм, которые могут раскрыть особенности когнитивных процессов у лиц с расстройством интеллектуального развития при взаимодействии с АДК.
Исследования альтернативной коммуникации с применением метода окулографии
Метод окулографии позволяет регистрировать координаты и временные характеристики направления взгляда и получать ценную информацию о процессе восприятия. Одним из регистрируемых параметров является фиксация взгляда, представляющая остановку сканирования визуального пространства для удержания узкой области фокусировки, что отражает процесс сбора обследуемым подробной информации о предмете восприятия. Фиксации взгляда являются мерой внимания и предоставляют важную информацию о восприятии, эмоциональном отклике и понимании зрительной информации [Dube, 2014; Vakil, 2011; Wilkinson, 2011].
Данные о фиксациях взгляда предоставляют важную информацию об элементах, привлекающих и удерживающих визуальное внимание, а также о том, что вызывает отвлечение внимания и может быть источником ошибок при восприятии АДК (например, области, на которые обследуемый не обращает внимания, но должен; или области, на которые обследуемый обращает внимание, но не должен). Изучение различных систем АДК с помощью метода окулографии может быть полезно для улучшения дизайна отдельных элементов или комплекса элементов системы АДК путем акцентирования внимания на важной информации и минимизации отвлекающих факторов, которые могут препятствовать обработке и снижать эффективность коммуникации [Light, 2014].
В исследованиях восприятия визуальных стимулов с помощью окулографии было показано, что параметр количества фиксаций на стимуле положительно коррелирует со сложностью представленного стимула [Gliga, 2009]. Четкость визуального стимула играет важную роль при восприятии и оказывает влияние на количество фиксаций у лиц с нарушением интеллектуальной сферы: закономерное ухудшение в восприятии и понимании стимулов учащимися с нарушением интеллекта легкой степени наблюдалось при восприятии текста и сюжетных картинок различной степени размытия [Защиринская, 2016]. Сравнительные исследования систем АДК продемонстрировали, что трудность интерпретации пиктограмм системы Blissymbolics сопряжена с увеличением количества фиксаций у обследуемых с РИР, что свидетельствует о когнитивной сложности данной системы [Защиринская, 2022].
Различия в узнаваемости и усваиваемости пиктограмм, выражающих отдельные части речи (прилагательные, существительные, глаголы), изучалось относительно систем АДК еще в конце XX века. На выборке с нормативным интеллектом было показано, что иерархия интуитивного понимания символов пяти пиктографических систем (Blissymbolics, PIC, Rebus, PCS, Picsyms) для различных частей речи одинакова [Mizuko, 1987]. Более поздние исследования с участием обследуемых с нарушением интеллектуального развития обнаружили более низкий уровень понятности символов-существительных системы Blissymbolics по сравнению с десятью другими системами АДК [Mirenda, 1989]. В настоящее время представляет интерес изучение паттернов зрительного восприятия пиктограмм из различных систем АДК, выражающих различные части речи, для выявления коммуникативного эффекта, наиболее соответствующего когнитивным возможностям лиц с нарушением интеллекта.
Графическая репрезентация действий в системах альтернативной коммуникации варьирует от схематичного представления (стрелка или вектор) до конкретного образа (человеческая фигура, совершающая действие). Так, в системе Blissymbolics понятие «падать» обозначается стрелкой, направленной вниз, с дополнительными семантическими элементами, свойственными данной системе. В графической системе Pictogram практически все пиктограммы-действия содержат человеческую фигуру. Окулографические исследования восприятия визуальных сцен на выборке с нарушением интеллекта (люди с типичным развитием, аутизмом, синдромом Дауна и другими нарушениями умственного развития) показывают, что человеческие фигуры разного размера, расположенные рядом с другими интересными и потенциально отвлекающими элементами, достаточно быстро (в течение 1,5 секунд) привлекают внимание обследуемых. При этом пропорции общего количества фиксаций и времени просмотра стимула оказываются одинаковыми во всех группах [Wilkinson, 2014].
Основными задачами проведенного нами исследования являются выявление паттернов глазодвигательной активности и оценка успешности интерпретации пиктограмм-глаголов и пиктограмм-существительных детьми с расстройством интеллектуального развития легкой степени. Новизной данного исследования является включение в стимульный материал системы альтернативной коммуникации, не изучавшейся ранее, а именно LoCoS ©.
Методы и материалы
Общее количество участников эмпирического исследования составило 92 учащихся старших классов коррекционных школ с нарушением интеллекта легкой степени (клинический диагноз «F70, умственная отсталость легкой степени по МКБ–10»), из них 66 юношей и 26 девушек, средний возраст 15,5 ± 1,18 лет. Критериями включения являлись: а) нормальное или скорректированное до нормального зрение; б) наличие навыков чтения и экспрессивной речи. Критерием исключения являлось наличие опыта специального обучения пиктографическим языкам альтернативной коммуникации у участников.
Критерий наличия навыков чтения и экспрессивной речи обуславливался исследовательской задачей изучения механизма активации лексической обработки при восприятии пиктограмм, а также необходимостью сбора данных в виде вербальных ответов, отражающих операционный компонент мышления при восприятии пиктограмм.
Критерий отсутствия у участников опыта обучения языкам альтернативной коммуникации был обусловлен исследовательской задачей сравнения трех систем альтернативной коммуникации (Blissymbolics, LoCoS ©, Pictogram) по степени интуитивной понятности в условиях первого знакомства с символами с учетом различной степени иконичности изучаемых систем.
Исследование проводилось в дневное учебное время на территории школ, в специально предоставленных администрацией помещениях с условием исключения отвлекающих факторов. У всех обследуемых было получено информированное согласие на участие в исследовании. Информированное согласие родителей было получено с помощью педагогов-психологов, которые являлись сотрудниками школ.
Сессии исследования проводились индивидуально с каждым участником, преимущественно во время уроков, чтобы не ограничивать участников в отдыхе на перемене. С каждым участником была проведена одна исследовательская сессия. Среднее время взаимодействия обследуемых с набором стимульного материала составляло 15 минут. Использовался персональный компьютер (ноутбук), окулограф (айтрекер), диктофон, бланки регистрации ответов. Рабочее место адаптировалось под индивидуальные потребности каждого участника.
Ассоциативный метод использовался для исследования интерпретаций обследуемых с нарушением интеллекта пиктограмм из трех систем альтернативной коммуникации: Blissymbolics, Pictogram и LoCoS ©. Пиктограммы всех трех систем представляют собой черные изображения на белом фоне, что исключило влияние цвета на их восприятие и позволило сконцентрировать внимание на влиянии иконичности/схематичности символов при первом знакомстве с ними. В настоящее время недостаточно исследований, подтверждающих повышение коммуникативных компетенций у людей с интеллектуальными нарушениями с помощью исследуемых систем (в отличие от таких систем, как PECS или Макатон), следовательно, они представляют особый интерес для исследования.
Система Blissymbolics — семантический генеративный графический язык, который был разработан Ч. Блиссом в 1949 г. Язык состоит из более чем 5000 пиктограмм и с начала 1970-х гг. используется в качестве графической системы коммуникации для лиц с ограниченными возможностями здоровья и нарушениями речи, нуждающихся в альтернативных средствах коммуникации [Jennische, 2015]. Пиктограммы данной системы являются наиболее схематичными из всех трех систем за счет преобладания геометрических фигур, стрелок и условных обозначений.
Язык Pictogram представляет собой базу графических символов (пиктограмм), которая разрабатывается специалистами Национального агентства по образованию для детей с особыми потребностями (National Agency for Special Needs Education and Schools) в сотрудничестве с пользователями, учителями, психологами, логопедами и трудотерапевтами, имеющими большой опыт работы с альтернативной и дополнительной коммуникацией. Данная система представляет собой функциональный визуальный язык, разработанный специально для людей с когнитивными нарушениями. В настоящее время база Pictogram включает в себя около 2000 черно-белых изображений. Данная система является наиболее иконичной из трех, так как ее пиктограммы наглядно изображают референты реального мира.
Графический язык LoCoS © был разработан в 1964 г. японским графическим дизайнером Юкио Ота, занимающимся вопросами стандартизации знакового окружения (International Organization for Standardization). LoCoS ©, так же, как Blissymbolics, обладает свойством генеративности: его символы могут комбинироваться, образуя другие понятия. В настоящее время LoCoS © не применяется как средство АДК в коррекционно-педагогической практике и поэтому представляет интерес для исследования. Данная система может быть определена как промежуточная между иконичной системой Pictogram и схематичной Blissymbolics за счет того, что в ней фигурируют стрелки и геометрические фигуры, но графическая репрезентация более проста, чем Blissymbolics, так как отсутствуют условные обозначения, которые могут перегружать восприятие.
Вышеописанные пиктографические системы были положены в основу стимульного материала, который предъявлялся обследуемым на экране персонального компьютера с одновременной регистрацией глазодвигательной активности. Серия стимулов предполагала спонтанный перевод пиктограммы, заменяющей одно слово в предложении из трех слов. Обследуемым предлагалось прочитать предложение вслух, озвучивая по смыслу слово, которое, по его мнению, заменяет пиктограмма.
Серия состояла из 36 смен экрана. Стимулы включали 6 существительных и 6 глаголов, представленных тремя вышеописанными системами АДК. Таким образом, каждое предложение из группы встречалось по 3 раза в виду того, что в каждом случае оно содержало пиктограмму из разных систем (Blissymbolics, LoCoS ©, Pictogram). Для редуцирования эффекта узнаваемости одинаковых предложений пиктограммы в каждом случае были переставлены местами с сохранением семантического смысла. Пиктограммы каждой системы встречались с одинаковой частотой: по 4 раза на каждой из 3-х позиций.
Существительные и глаголы русского языка были подобраны в соответствии со следующими критериями: а) существительные не являются абстрактными понятиями; б) глаголы являются действиями и процессами, которые может совершать человек или живое существо; в) все понятия могут быть закодированы каждой из пиктографических систем; г) все понятия входят в Частотный словарь живой устной речи и обладают частотой ipm (instances per million words) выше 85.
В ходе исследования подсчитывалось количество правильных интерпретаций пиктограмм той или иной систем. Под «правильными интерпретациями» здесь и далее понимаются семантические значения, соответствующие или приближенные к значениям, которые присвоены пиктограммам авторами той или иной системы альтернативной коммуникации.
Регистрация глазодвигательной активности производилась с помощью айтрекера (окулографа) Gazepoint GP3 с частотой дискретизации 60 Гц.
Для изучения влияния пиктографической системы на количество правильных интерпретаций использовался однофакторный дисперсионный анализ Фишера и апостериорный тест Тьюки. Анализ влияния системы АДК на параметры глазодвигательной активности был проведен с помощью непараметрического однофакторного дисперсионного анализа (критерий Краскела-Уоллиса) и метода попарных сравнений Двасс-Стил-Кричлоу-Флингера за счет ненормальности распределения. Сравнение количества правильных ответов и параметров глазодвигательной активности в зависимости от воспринимаемой части речи (существительное или глагол), к которой относится вербальный референт пиктограмм различных систем АДК, анализировалось с помощью t-теста Стьюдента.
Результаты
Одной из задач исследования была проверка предположения о том, что система альтернативной коммуникации влияет на эффективность интерпретации пиктограмм обследуемыми с расстройством интеллектуального развития легкой степени. Однофакторный дисперсионный анализ показал, что фактор принадлежности пиктограммы к системе АДК (LoCoS ©, Pictogram, Blissymbolics) влияет на количество верных ответов обследуемых с РИР, критерий Фишера: F(2,33)=5,67; p=0,008. Достоверно меньшее количество правильных интерпретаций обследуемые давали при восприятии пиктограмм системы Blissymbolics, чем пиктограмм системы Pictogram (p=0,006).
Изучение влияния пиктографической системы АДК на параметры глазодвигательной активности дало статистически значимые результаты в отношении параметров количества возвратов взгляда на пиктограмму, количества фиксаций взгляда на пиктограмме и общее время визуального восприятия пиктограммы (табл. 1).
Таблица 1. Влияние фактора принадлежности пиктограммы к одной из трех систем АДК на параметры глазодвигательной активности обследуемых с нарушением интеллекта
Параметр |
χ² |
df |
p |
ε² |
pкорр |
Количество возвратов |
10,1 |
2 |
0,007 |
0,437 |
0,012 |
Количество фиксаций |
8,0 |
2 |
0,018 |
0,348 |
0,017 |
Время просмотра |
6,6 |
2 |
0,037 |
0,288 |
0,025 |
Примечание: результаты представлены с применением поправки на множественную проверку гипотез Холма-Бонферрони при α=0,05.
Методом попарных сравнений было обнаружено, что количество возвратов взгляда на пиктограммы системы Blissymbolics статистически достоверно больше по сравнению с пиктограммами системы LoCoS © (W=3,86; p=0,017). Количество фиксаций взгляда на пиктограммы системы Blissymbolics статистически достоверно больше по сравнению с пиктограммами системы LoCoS© (W=3,56; p=0,031). Наконец, время просмотра пиктограмм системы Blissymbolics статистически достоверно больше по сравнению с пиктограммами системы LoCoS© (W=3,42; p=0,042). Графики влияния системы АДК на вышеописанные параметры представлены на рисунке 1.
Рис. 1. Влияние системы АДК на количество правильных интерпретаций пиктограмм и количество фиксаций на пиктограммах обследуемых с РИР
В ходе исследования были получены визуализации траекторий движения взгляда обследуемых с РИР легкой степени, которые позволили проанализировать паттерны глазодвигательной активности при восприятии пиктограмм систем Blissymbolics и LoCoS © (рис. 2).
Рис. 2. Траектории движения взгляда при восприятии пиктограммы-глагола «падать» системы Blissymbolics (слева) и LoCoS © (справа) обследуемых с РИР
Исходя из качественного анализа траекторий взгляда видно, что пиктограмма системы Blissymbolics требует большего количества фиксаций за счет своей когнитивной сложности, а именно наличия дополнительных семантических элементов (условных обозначений). Данный факт находит свое отражение в меньшем количестве правильных интерпретаций пиктограмм этой системы. Графическая структура языка LoCoS © более проста, тем не менее не оказывает негативного влияния на интерпретацию пиктограмм исходя из того, что значимых различий в эффективности ее интерпретаций по сравнению с системой Pictogram не было обнаружено.
Сравнение количества правильных ответов в зависимости от воспринимаемой части речи (существительное или глагол), к которой относится вербальный референт пиктограмм различных систем АДК, показало отсутствие значимых различий (p=0,761). Сравнение параметров глазодвигательной активности (количества возвратов взгляда на пиктограмму, количества фиксаций взгляда на пиктограмме и общего времени визуального восприятия пиктограммы) в зависимости от части речи также не дало статистически значимых результатов (p=0,544; p=0,444; p=0,254).
Обсуждение
В современной российской коррекционно-педагогической практике используются различные высоко- и низкотехнологичные системы на основе изображений для восполнения коммуникативных трудностей лиц с различными нарушениями развития, в том числе с расстройствами интеллектуального развития [Козлова, 2018]. Такие пиктографические системы как PECS и Макатон могут применяться в виде коммуникативной книги с распечатанными на отдельных карточках изображениями, либо в виде программного пользовательского интерфейса на компьютере. Данные системы могут включать различную графическую представленность изображений, а также фотографии — в зависимости от индивидуального запроса пользователя альтернативной коммуникации и от подхода педагога или родителя. В рамках персонифицированного подхода к обучению необходимо учитывать возможные ситуации, когда изображение оказывается непонятно для пользователя АДК, таким образом препятствуя эффективной коммуникации. Когнитивные затраты на распознавание образа и запоминание символического значения изображения могут замедлить процесс обучения и общения с помощью АДК, а также негативно сказаться на мотивации обучающегося. Именно поэтому основной задачей данного эмпирического исследования стало раскрытие механизмов восприятия и интерпретации графических символов с учетом критериев графического представления, таких как степень иконичности или схематичности, и с учетом когнитивной сферы лиц с нарушением интеллектуального развития: сниженная способность к восприятию абстракций, недоразвитие познавательных способностей, нарушение понимания и порождения речи [Баблумова, 2013; Емельянова, 2009; Исаев, 2003].
Условие наличия навыков чтения и экспрессивной речи у обследуемых соблюдалось для решения исследовательской задачи изучения механизма активации лексической обработки при восприятии пиктограмм в вербальном контексте. Кроме того, эти условия были необходимы для сбора данных в виде вербальных ответов, отражающих операционный компонент мышления при восприятии пиктограмм у обследуемых с нарушением интеллекта легкой степени. Возникает вопрос о том, насколько полученные в эксперименте данные будут коррелировать с особенностями восприятия и интерпретации пиктограмм учащимися с нарушением интеллекта, не обладающими навыками чтения и устной речи.
Несмотря на то, что речевое и когнитивное развитие тесно связаны, они также могут быть относительно автономными. В исследованиях отмечается, что четкой корреляции между степенью интеллектуальных нарушений и уровнем речевого развития нет, поскольку дети со схожими когнитивными дефицитами могут демонстрировать разные речевые способности [Мамедова, 2022]. За счет того, что существует сложная связь между речевыми и интеллектуальными нарушениями, сложно сделать однозначный вывод о корреляции результатов данного исследования и данных, которые могли бы быть получены на выборке обследуемых с тяжелыми речевыми нарушениями. Дальнейшие исследования могут быть направлены на изучение различий в восприятии пиктограмм разной степени иконичности детьми с разной степенью речевых нарушений.
Данное исследование показало, что пиктограммы систем LoCoS© и Pictogram демонстрируют наибольшую коммуникативную эффективность по сравнению с системой Blissymbolics за счет большего количества верных интерпретаций и наименьших когнитивных усилий, затрачиваемых при восприятии. Кажется очевидным, что параметры количества возвратов взгляда на пиктограмму, количества фиксаций взгляда и общее время визуального восприятия взаимосвязаны друг с другом, однако в совокупности они отражают когнитивную нагрузку, которую испытывает пользователь АДК в процессе восприятия пиктограмм той или иной системы.
Интуитивная понятность или узнаваемость, т.е. воспринимаемость символа в правильном значении без дополнительных подсказок или обучения, остается одним из основных критериев подбора корпуса изображений для пользователей альтернативной коммуникации [Mizuko, 1987; Musselwhite, 1984]. В практическом смысле интуитивно понятные символы облегчают понимание и использование, что позволяет пользователям быстрее осваивать систему и самостоятельно применять ее в повседневной жизни [Андрусенко, 2022]. Понятные символы позволяют быстрее передавать мысли и идеи, что делает общение более эффективным и продуктивным, а также уменьшают вероятность неправильного понимания или интерпретации, что важно для точности коммуникации [Мёдова, 2018; Judge, 2023].
Результаты исследования показали, что конкретность и простота пиктографического изображения оказывает положительный эффект на восприятие и понимание символов учащимися с нарушением интеллекта, тогда как сложная графическая структура символов Blissymbolics препятствует интуитивной интерпретации и требует больших когнитивных затрат, выражающихся в большем количестве фиксаций, возвратов взгляда и большем времени просмотра. Несмотря на то, что система LoCoS© также имеет схематичное представление, как и система Blissymbolics, эффективность ее интерпретации и когнитивные затраты статистически не отличаются от системы Pictogram. Результаты не противоречат ранее полученным при исследовании пиктографических систем [Musselwhite, 1984], однако основной вклад данного исследования заключается в определении места систем Pictogram и LoCoS© в иерархии читаемости пиктограмм.
Эффектов влияния части речи (существительное или глагол), к которой относится референт пиктограмм, не было обнаружено в данном исследовании. Данный результат также перекликается с полученными ранее и подтверждает гипотезу о том, что иерархия интуитивного понимания символов пиктографических систем для различных частей речи одинакова [Mizuko, 1987].
Ограничением данного исследования является тот факт, что коммуникативная эффективность символов трех систем АДК изучалась в рамках контролируемого одномоментного исследования, что не позволяет сделать вывод о долгосрочных результатах использования данных систем АДК и их влиянии на развитие коммуникативных компетенций обследуемых. Тем не менее, результаты позволяют расширить представления о графических свойствах символов, влияющих на их интуитивную понятность при нарушениях интеллекта.
Таким образом, эмпирические данные не противоречат ранее полученным результатам исследований языков пиктографической коммуникации с учетом включения в экспериментальный дизайн новых пиктографических систем, не изучавшихся ранее в данной перспективе (Pictogram и LoCoS©). Особым вкладом данного исследования является анализ глазодвигательной активности при восприятии пиктограмм различных систем АДК, позволивший выявить когнитивный компонент, выраженный в визуальной сложности символов.
Заключение
Альтернативная и дополнительная коммуникация представляет собой многообещающий инструмент для компенсации речевых нарушений. Анализ литературных источников показал, что пиктографические средства коммуникации, а именно системы АДК, включающие в себя графические изображения, отражающие вербальные референты предметов и действий, могут эффективно использоваться для восполнения коммуникативных трудностей лиц с расстройствами интеллектуального развития. Путем имплементации доступных знаковых (пиктографических) средств в общественную и цифровую среду, а также индивидуально-ориентированного подбора графических коммуникативных средств для общения в повседневной жизни, системы альтернативной коммуникации могут повысить коммуникативную компетентность, самостоятельность и независимость данной группы. Несмотря на это, не все графические средства обладают одинаковой эффективностью донесения информации, а также могут перегружать внимание, что является предпосылкой для исследований и анализа различной графической представленности знаков. Проведенное контролируемое одномоментное исследование было направлено на изучение особенностей восприятия пиктограмм как компонентов АДК при интеллектуальных нарушениях легкой степени. С учетом графической представленности символов предметов и действий рекомендуется акцентировать внимание на индивидуальных потребностях пользователя альтернативной коммуникации, выбирая подходящие иконичные или схематичные пиктографические элементы в соответствии с когнитивными возможностями конкретных пользователей. При этом предпочтение рекомендуется отдавать более простым формам пиктограмм, таким как пиктограммы систем Pictogram и LoCoS©, избегая сложных форм и семантической нагруженности. Результаты исследования могут быть полезны в коррекционно-педагогической практике для создания корпуса пиктографических понятий для общения и обучения лиц с расстройствами интеллектуального развития легкой степени.
Литература
- Андрусенко В.М., Попова Е.А., Римская Т.О. Использование альтернативных средств коммуникации с помощью предметного PECS в рамках обучения детей с ДЦП с применением основ Аba-терапии // Северо-Кавказский психологический вестник. 2023. Том 21. №2. С. 27–36. DOI: 10.21702/ncpb.2023.2.3
- Андрусенко В.М., Римская Т.О. Основное общее образование у детей, использующих систему альтернативной коммуникации PECS // Северо-Кавказский психологический вестник. 2022. Том 20. № 3. С. 5–16. DOI: 10.21702/ncpb.2022.3.1
- Баблумова М.Е. Экспериментальное изучение уровня сформированности коммуникативных умений у дошкольников с умеренной умственной отсталостью // Вестник Череповецкого государственного университета. 2013. Том 1. № 4 (51). С. 162–164.
- Белимова П.А. Способность лиц с нарушением интеллекта к интерпретации общественных знаков // Психология и Психотехника. 2023. № 2. С. 101–109. DOI: 10.7256/2454-0722.2023.2.40902
- Емельянова И.А. Особенности коммуникативных умений и навыков и пути их формирования у младших школьников с нарушением интеллекта // Образование и наука. 2009. № 1. С. 86–94.
- Защиринская О.В., Белимова П.А. Нарушение интерпретации пиктографических систем подростками с легкой умственной отсталостью // Российский психиатрический журнал. 2022. № 1. С. 46–54. DOI: 10.47877/1560-957Х-2022-10106
- Защиринская О.В., Горбунов И.А. Эмоции в контексте невербальной коммуникации нормально развивающихся подростков и их сверстников с нарушением интеллекта // Вестник Санкт-Петербургского университета. Социология. 2009. № 3–2. С. 174–185.
- Защиринская О.В., Николаева Е.И., Шелепин Е.Ю. Понимание подростками с различным уровнем интеллектуального развития жанровых картин и текстов // Психофизиологические и нейролингвистические аспекты процесса распознавания вербальных и невербальных паттернов коммуникации / Под науч. ред Т.В. Черниговской. СПб.: ВВМ, 2016. С. 191–202.
- Ильина Ю.С. Исследование коммуникативных навыков младших школьников с задержкой психического развития // Коррекционная педагогика: теория и практика. 2017. № 1. С. 38–43.
- Исаев Д.Н. Умственная отсталость у детей и подростков. СПб.: Речь, 2003. 391 с.
- Козлова К.М. Обзор способов альтернативной коммуникации, применяемых в отечественной практике специального образования // Проблемы современного педагогического образования. 2018. № 58–4. С. 120–127.
- Мамедова Л.В. Нарушения речи и их коррекция у умственно отсталых детей младшего школьного возраста // Управление образованием: теория и практика. 2022. Том 12. № 11. С. 38–42. DOI: 10.25726/z2659-2699-2466-u
- Мёдова Н.А., Рудин И.В. Современный подход к формированию альтернативной коммуникации у детей со сложной структурой нарушения развития // Вестник Томского государственного педагогического университета. 2018. № 1. С. 9–14. DOI: 10.23951/1609-624Х-2018-1-9-14
- Солодков А.С., Защиринская О.В., Малахова А.Н., Ятманов А.Н. Навыки невербальной коммуникации как фактор социальной адаптации школьников с легкой умственной отсталостью // Ученые записки университета им. П.Ф. Лесгафта. 2016. № 1 (131). С.323–327. DOI: 10.5930/issn.1994-4683.2016.01.131.p323-327
- Abbeduto L., Klusek J., Taylor J.L. et al. Concurrent associations between expressive language ability and independence in adolescents and adults with fragile X syndrome // Brain sciences. 2021. Vol. 11. № 9. Art. 1179. DOI: 10.3390/brainsci11091179
- Amery R., Wunungmurra J.G., Bukuḻatjpi G. et al. Designing augmentative and alternative communication systems with Aboriginal Australians: vocabulary representation, layout, and access // Augmentative and Alternative Communication. 2022. Vol. 38. № 4. P. 221–235. DOI: 10.1080/07434618.2022.2129782
- Dada S., Flores C., Bastable K., Schlosser R.W. The effects of augmentative and alternative communication interventions on the receptive language skills of children with developmental disabilities: A scoping review // International Journal of Speech-Language Pathology. 2021. Vol. 23. № 3. P. 247–257. DOI: 10.1080/17549507.2020.1797165
- Dada S., Huguet A., Bornman J. The iconicity of picture communication symbols for children with English additional language and mild intellectual disability // Augmentative and Alternative Communication. 2013. Vol. 29. № 4. P. 360–373. DOI: 10.3109/07434618.2013.849753
- Denche Gil S., Morán Pallero N., Felipe Castaño E. Intervención mediante un sistema alternativo-aumentativo de comunicación en discapacidad intelectual y del desarrollo: diseño de caso único // International Journal of Developmental and Educational Psychology. 2023. Vol. 2. P. 241-259. DOI: 10.17060/ijodaep.2023.n1.v2.2513
- Dube W.V., Wilkinson K.M. The potential influence of stimulus overselectivity in AAC: Information from eye tracking and behavioral studies of attention with individuals with intellectual disabilities // Augmentative and Alternative Communication. 2014. Vol. 30. № 2. P. 172–185. DOI: 10.3109/07434618.2014.904924
- Forbes H.J., Travers J.C., Vickers Johnson J.A. Systematic review of acquisition and mastery of skills taught using the Picture Exchange Communication System // Augmentative and Alternative Communication. 2024. Vol. 40. № 2. P. 100–114. DOI: 1080/07434618.2024.2302154
- Fujisawa K., Inoue T., Yamana Y., Hayashi H. The effect of animation on learning action symbols by individuals with intellectual disabilities // Augmentative and Alternative Communication. 2011. Vol. 27. № 1. P. 53–60. DOI: 10.3109/07434618.2011.553245
- Gliga T., Elsabbagh M., Andravizou A., Johnson M. Faces attract infants' attention in complex displays // Infancy. 2009. Vol. 14. № 5. P. 550–562. DOI: 10.1080/15250000903144199
- Haupt L., Alant E. The iconicity of picture communication symbols for rural Zulu children // South African Journal of Communication Disorders. 2002. Vol. 49. № 1. P. 40–49.
- Jennische M., Zetterlund M. Interpretation and construction of meaning of Bliss-words in children // Augmentative and Alternative Communication. 2015. Vol. 31. № 2. P. 97–107. DOI: 10.3109/07434618.2015.1036117
- Judge S., Murray J., Lynch Y. et al. Attributes of communication aids as described by those supporting children and young people with AAC // International Journal of Language & Communication Disorders. 2023. Vol. 58. № 3. pp. 910–928. DOI: 10.1111/1460-6984.12833
- Kudo M. Graphic design of pictograms focusing on the comprehension of people with intellectual disabilities–The next step in standardization: Pictogram design and evaluation methods // Visible Language. 2022. Vol. 56. № 3. P. 58–85.
- Lendio J.G., Teves S.M., Catalan D.S. Picture exchange communication system and its effectivity to the communication of learners with autism spectrum // Cognizance Journal of Multidisciplinary Studies. 2023. Vol. 3. № DOI: 10.47760/cognizance.2023.v03i03.007
- Light J., McNaughton D. From basic to applied research to improve outcomes for individuals who require augmentative and alternative communication: Potential contributions of eye tracking research methods // Augmentative and Alternative Communication. 2014. Vol. 30. № 2. P. 99–105. DOI: 10.3109/07434618.2014.906498
- Lund S.K., Light J. Long-term outcomes for individuals who use augmentative and alternative communication: Part II — Communicative interaction // Augmentative and Alternative Communication. 2007. Vol. 23. № 1. P. 1–15. DOI: 10.1080/07434610600720442
- Mirenda P., Locke P.A. A comparison of symbol transparency in nonspeaking persons with intellectual disabilities // Journal of Speech and Hearing Disorders. 1989. Vol. 54. № 2. P. 131–140. DOI: 10.1044/jshd.5402.131
- Mizuko M. Transparency and ease of learning of symbols represented by Blissymbols, PCS, and Picsyms // Augmentative and Alternative Communication. 1987. Vol. 3 (3). P. 129–136. DOI: 10.1080/07434618712331274409
- Musselwhite C.R., Ruscello D.M. Transparency of three communication symbol systems // Journal of Speech, Language, and Hearing Research. 1984. Vol. 27. № 3. P. 436–443.
- Othman A. Tawsol Symbols 3D — Towards an innovative Picture Exchange Communication Systems PECS // Nafath. 2021. Vol. 6 (18). P. 18–22. DOI: 10.54455/MCN.18.04.041418
- Pope L., Light J., Laubscher E. The effect of naturalistic developmental behavioral interventions and aided AAC on the language development of children on the autism spectrum with minimal speech: A systematic review and meta-analysis [Electronic resource] // Journal of Autism and Developmental Disorders. 2024. DOI: 10.1007/s10803-024-06382-7
- Schlosser R., Sigafoos J. Selecting graphic symbols for an initial request lexicon: Integrative review // Augmentative and Alternative Communication. 2002. Vol. 18. № 2. P. 102–123. DOI: 10.1080/07434610212331281201
- Tamanaha A.C., Olivatti D.O.F., Silva S.C.D. et al. Picture Exchange Communication System (PECS) Implementation Program for children with autism spectrum disorder // CoDAS. 2023. Vol. 35 (4). Art. e20210305. DOI: 10.1590/2317-1782/20232021305en
- Tijus C., Barcenilla J., Cambon de Lavalette B., Meunier J.-G. The design, understanding and usage of pictograms // Written documents in the workplace / Eds. D. Alamargot, P. Terrier, J.-M. Cellier. Leiden: Brill, 2007. P. 17–31.
- Vakil E., Lifshitz H., Tzuriel D. et al. Analogies solving by individuals with and without intellectual disability: Different cognitive patterns as indicated by eye movements // Research in Developmental Disabilities. 2011. Vol. 32. № 2. P. 846–856. DOI: 10.1016/j.ridd.2010.08.006
- Wilkinson K.M., Light J. Preliminary investigation of visual attention to human figures in photographs: Potential considerations for the design of aided AAC visual scene displays // Journal of Speech, Language, and Hearing Research. 2011. Vol. 54. № 6. P. 1644–1657. DOI: 10.1044/1092-4388(2011/10-0098)
- Wilkinson K.M., Light J. Preliminary study of gaze toward humans in photographs by individuals with autism, Down syndrome, or other intellectual disabilities: Implications for design of visual scene displays // Augmentative and Alternative Communication. 2014. Vol. 30. № 2. pp. 130–146. DOI: 10.3109/07434618.2014.904434
- Zhang Y., Zhang J., Zhang J. et al. Teaching Requesting Skills to Children with Visual Impairment and Intellectual Disability by Using Picture Exchange Communication System Combined with Tangible Symbols // International Journal of Disability, Development and Education. 2023. pp. 1-21. DOI: 1080/1034912X.2023.2295911
Информация об авторах
Метрики
Просмотров
Всего: 58
В прошлом месяце: 11
В текущем месяце: 47
Скачиваний
Всего: 18
В прошлом месяце: 5
В текущем месяце: 13