КАРТОЧКА ПРОЕКТА ФУНДАМЕНТАЛЬНЫХ И ПОИСКОВЫХ НАУЧНЫХ ИССЛЕДОВАНИЙ,
ПОДДЕРЖАННОГО РОССИЙСКИМ НАУЧНЫМ ФОНДОМ
Информация подготовлена на основании данных из Информационно-аналитической системы РНФ, содержательная часть представлена в авторской редакции. Все права принадлежат авторам, использование или перепечатка материалов допустима только с предварительного согласия авторов.
ОБЩИЕ СВЕДЕНИЯ
Номер проекта 22-28-01754
НазваниеИсследование экономии когнитивных ресурсов человека при интерпретации медиа текстов: Разработка Мультимодального Корпуса Окулографических Реакций MultiCOR
Руководитель Киосе Мария Ивановна, Доктор филологических наук
Организация финансирования, регион федеральное государственное бюджетное образовательное учреждение высшего образования "Московский государственный лингвистический университет" , г Москва
Конкурс №64 - Конкурс 2021 года «Проведение фундаментальных научных исследований и поисковых научных исследований малыми отдельными научными группами»
Область знания, основной код классификатора 08 - Гуманитарные и социальные науки; 08-453 - Языкознание
Ключевые слова корпус, ресурс открытого доступа, поисковые системы, окулография, медиа тексты, когнитивные параметры, лингвистические параметры, параметры изображения, семиотические параметры, глазодвигательные параметры
Код ГРНТИ16.21.33
ИНФОРМАЦИЯ ИЗ ЗАЯВКИ
Аннотация
Проект нацелен на решение проблемы экономии когнитивных ресурсов человека при интерпретации визуальной медиа информации, которая на современном этапе развития знания и технологий передается все более сложными семиотическими форматами. Решение проблемы требует повышения достоверности и доступности прогностической оценки в отношении интерпретации гетеросемиотических медиа форматов, например, текста и изображения, текстов с включенными иносемиотическими (иностилевыми, инодискурсивными) фрагментами. Для осуществления прогностической оценки разрабатывается алгоритм параметрического анализа медиа текстов, который реализуется в Мультимодальном корпусе окулографических реакций MultiCOR. Корпус будет размещен в открытом доступе и позволит установить специфику глазодвигательного поведения человека в отношении различных типов текстов и текстов с изображениями. Контент MultiCOR – более 1000 образцов глазодвигательного поведения, полученных при анализе переключений участников экспериментов, воспринимающих информацию гетеросемиотических медиа форматов. Поиск в MultiCOR осуществляется по зонам интереса с использованием разметки параметров когнитивного конструирования (тип события, тип участников, тип перспективы), лингвистических параметров, параметров изображения, семиотических параметров, а также глазодвигательных параметров (наличие / отсутствие возвратных саккад, диапазон продолжительности фиксаций и саккад, диапазон продолжительности первых фиксаций в зонах интереса).
Научная новизна Проекта состоит в разработке интегративного подхода к анализу особенностей интерпретации медиа текстов, в основе которого – принцип универсальности параметров когнитивного конструирования, которые проявляют активность в разных гетеросемиотических форматах; и принцип сопряженности параметров конструирования и паттернов глазодвигательного поведения. Опора на данные принципы позволяет выстроить на единых основаниях систему параметрической разметки разных типов текстов и сопряженных с ними глазодвигательных реакций для последующего осуществления поиска по необходимому набору параметров. Надежная и доступная прогностическая оценка интерпретации таких текстов необходима для решения теоретических задач, связанных с верификацией значимости когнитивного конструирования и установлением когнитивных оснований психофизиологических реакций, и прикладных задач, связанных с разработкой контента разного рода. Применение принципов интегративного подхода при реализации и внедрении MultiCOR позволит специалистам предложить эффективные варианты организации визуальных медиа, учитывающих возможности повышения их конструкционной вариативности и одновременно снижения глазодвигательной нагрузки, осуществляя более экономное расходование когнитивных ресурсов человека.
ОТЧЁТНЫЕ МАТЕРИАЛЫ
Публикации
1.
Киосе М.И., Измалкова А.И.
Event-modelling Framework: How does verbal automaticity affect text and image construal in gaze and speech?
Вопросы когнитивной лингвистики, Вып. 3. С. 17-30. (год публикации - 2022)
10.20916/1812-3228-2022-3-17-30
2.
Киосе М.И.
Gaze costs in nonimaginistic idioms perception. Are they modified by embodiment and entrenchment factors?
Вестник Московского государственного лингвистического университета. Серия: Гуманитарные науки., Вып. 2 (857). С. 56-64. (год публикации - 2022)
10.52070/2542-2197_2022_2_857_56
3.
Киосе М.И., Ржешевская А.А., Измалкова А.И.
Gaze behavior in single-page monomodal and cross-modal switches as affected by event construal
Компьютерная лингвистика и интеллектуальные технологии. По материалам ежегодной международной конференции «Диалог» (2022), Выпуск 21. Дополнительный том, 2022. P. 1078-1088. (год публикации - 2022)
10.28995/2075-7182-2022-21-1087-1097
4.
Ржешевская А.А., Измалкова А.И.
Novel metaphor recognition in L1 and L2 as mediated by syntactic foregrounding: an eye movement study
Voprosy Kognitivnoy Lingvistiki, Vol. 4. P. 83-91. (год публикации - 2022)
10.20916/1812-3228-2022-4-83-91
5.
Киосе М.И., Ярикова В.А.
Novel metaphors recognition in reading. Do we face priming effects?
Vestnik of Moscow State Linguistic University. Humanities, Iss. 6(861). P. 48-56. (год публикации - 2022)
10.52070/2542-2197_2022_6_861_48
Публикации
1.
Киосе М.И., Ржешевская А.А., Измалкова А.И., Макеев С.Д.
Text and metatext event in the gaze behavior of impulsive and reflective readers
Research Result. Theoretical and Applied Linguistics, Research Result. Theoretical and Applied Linguistics. T.1, Iss. 7, pp. 115-135 (год публикации - 2023)
10.18413/2313-8912-2023-9-1-0-8
2.
Киосе М.И.
Mapping models in novel metaphors and their effect on gaze behavior and default interpretations in native and target languages
Russian Journal of Linguistics, Russian Journal of Linguistics. Vol. 27(2). P. 297-315. (год публикации - 2023)
10.22363/2687‐0088‐30055
3.
Киосе М.И., Ржешевская А.А., Измалкова А.И., Макеев С.Д.
Foregrounding and accessibility effects in the gaze behavior of the readers with different cognitive style
Computational Linguistics and Intellectual Technologies. Papers from the Annual International Conference “Dialogue”, Computational Linguistics and Intellectual Technologies. Papers from the Annual International Conference “Dialogue” (2023), Issue 22, 2023. P. 225-232. (год публикации - 2023)
10.28995/2075-7182-2023-22-225-232
4. Ржешевская А.А. Конструирование субъекта в драматургическом дискурсе: перспектива автора и персонажа Когнитивные исследования языка, Когнитивные исследования языка. Вып. 5 (56). С. 284-289. (год публикации - 2023)