Тема: ЭФФЕКТЫ КРОССМОДАЛЬНОГО ВЗАИМОДЕЙСТВИЯ ВЫСОТЫ ТОНА И РАЗМЕРА ОБЪЕКТА В ПРОЦЕССАХ КОГНИТИВНОЙ ОБРАБОТКИ ОБЪЕКТОВ И ЛЕКСЕМ, ОБОЗНАЧАЮЩИХ ВИЗУАЛЬНО ВОСПРИНИМАЕМЫЕ ПРЕДМЕТЫ (ВКЛЮЧАЮЩИХ СЕМАНТИЧЕСКИЙ КОМПОНЕНТ «РАЗМЕР»)
Закажите новую по вашим требованиям
Представленный материал является образцом учебного исследования, примером структуры и содержания учебного исследования по заявленной теме. Размещён исключительно в информационных и ознакомительных целях.
Workspay.ru оказывает информационные услуги по сбору, обработке и структурированию материалов в соответствии с требованиями заказчика.
Размещение материала не означает публикацию произведения впервые и не предполагает передачу исключительных авторских прав третьим лицам.
Материал не предназначен для дословной сдачи в образовательные организации и требует самостоятельной переработки с соблюдением законодательства Российской Федерации об авторском праве и принципов академической добросовестности.
Авторские права на исходные материалы принадлежат их законным правообладателям. В случае возникновения вопросов, связанных с размещённым материалом, просим направить обращение через форму обратной связи.
📋 Содержание
Глава 1 Проблемы и методы исследования кроссмодального взаимодействия аудиальной и визуальной модальностей 14
1.1 Теория воплощенного познания 14
1.2 Кроссмодальное взаимодействие 17
1.2.1 Зрительное восприятие 20
1.2.2 Слуховое восприятие 21
1.2.3 Эффекты взаимосвязи аудиальной и визуальной модальностей 23
1.2.4 Влияние кроссмодального восприятия на обработку информации 24
1.3 Экспериментальные исследования в психолингвистике: принципы
реализации 27
1.4 Восприятие визуально представленного слова 31
Выводы по главе 1 35
Глава 2 Кроссмодальное взаимодействие аудиальной и визуальной
модальностей в процессах когнитивной обработки объектов и лексем 37
2.1 Программа исследования 37
2.2 Выявление базовых эффектов кроссмодального взаимодействия.
Эксперимент 1 38
2.2.1 Дизайн 38
2.2.2 Процедура 39
2.2.3 Стимулы 42
2.2.4 Участники 43
2.2.5 Полученные результаты 44
2.2.6 Обсуждение результатов 45
2.3 Выявление эффектов кроссмодального взаимодействия на материале вербальных стимулов, характеризующих размер. Эксперимент 2 49
2.3.1 Дизайн 49
2.3.2 Процедура 50
2.3.3 Стимулы 51
2.3.4 Участники 51
2.3.5 Полученные результаты 52
2.3.6 Обсуждение результатов 53
2.4 Выявление эффектов кроссмодального взаимодействия на материале вербальных стимулов, содержащих семантический компонент «размер». Эксперимент 3 58
2.4.1 Дизайн 58
2.4.2 Процедура 59
2.4.3 Стимулы 62
2.4.4 Участники 65
2.4.5 Полученные результаты 65
2.4.6 Обсуждение результатов 66
Выводы по главе 2 68
ЗАКЛЮЧЕНИЕ 70
СПИСОК ИСПОЛЬЗОВАННЫХ ИСТОЧНИКОВ И ЛИТЕРАТУРЫ .... 72
ПРИЛОЖЕНИЕ А. Информационное согласие респондента 79
ПРИЛОЖЕНИЕ Б. Стимульный материал, использованный в третьем эксперименте
📖 Введение
Наша работа посвящена изучению эффектов кроссмодального взаимодействия, мы рассмотрели это взаимодействие на примере сочетания аудиальных и визуальных стимулов, а точнее сочетания различных по высоте тонов и «размера» (это мог быть семантический компонент лексемы или фактический размер объекта).
Данная работа находится на стыке таких дисциплин, как экспериментальная лингвистика, когнитивная психология и психолингвистика, что указывает на ее междисциплинарность. Актуальность этой тематики обуславливается интересом когнитивной науки к устройству и работе мозга, к тому как наш мозг воспринимает и обрабатывает информацию в различных ситуациях; интересом психолингвистики к тому, насколько семантическая информация, заложенная в слове, может повлиять на восприятие; интересом к экспериментальному методу для изучения особенностей восприятия и обработки информации. Поэтому исследователи до сих пор более детально изучают взаимодействие стимулов в различных условиях . Нас же конкретно интересуют влияние одного типа стимулов на категоризацию стимулов другого типа. Такое влияние наблюдается при кроссмодальном взаимодействии. Начиная с 30-х гг. прошлого века ученые проявляют интерес к изучению взаимодействия модальностей. На основании того, что существуют подтвержденные соответствия между стимулами разных модальностей, а именно соответствие между высотой тона и размером , мы строим наш исследовательский вопрос.
Наш исследовательский вопрос:
Существует ли сокращение времени реакции испытуемых, при проигрывании конгруэнтных визуальных и аудиальных стимулов и увеличение - в ситуации проигрывания инконгруэнтных?
В качестве конгруэнтных стимулов в нашем исследовании выступают следующие пары визуальных и аудиальных стимулов: высокий тон+маленькое изображение, низкий тон+большое изображение для первого эксперимента; высокий тон+слово с семантикой малого размера, низкий тон+слово с семантикой большого размера для второго и третьего экспериментов;
Наша гипотеза: наличие конгруэнтного изображения или конгруэнтного вербального стимула с семантикой размерности будет ускорять категоризацию тона, а инконгруэнтное изображение или инконгруэнтный вербальный стимул с семантикой размерности будет замедлять осуществление категоризации респондентом.
Объект исследования - межмодальное взаимодействие аудиальных и визуальных стимулов.
Предмет исследования - влияние семантического компонента «размер» в словах или изображений разного размера на обработку аудиальных стимулов.
Цель - выяснить, влияет ли размер объекта или семантический компонент стимула на категоризацию аудиальных стимулов.
Для достижения поставленной цели мы необходимо решить следующие задачи:
• Изучить научную литературу по воплощенному познанию и кроссмодальным взаимодействиям, а также уже имеющиеся исследования, связанные со взаимодействием аудиальных и визуальных стимулов.
■ Исследовать влияние размера, визуально воспринимаемых стимулов на категоризацию аудиальных стимулов, противопоставленных по высоте тона:
A) Разработать дизайн эксперимента
Б) Подобрать стимулы для решения этой задачи, а именно визуальные стимулы, противопоставленные по размеру и аудиальные стимулы противопоставленные по высоте тона
B) Провести экспериментальную сессию с привлечением респондентов (не менее 40 человек)
■ Исследовать влияние семантического компонента «размер» стимулов- лексем (с разным уровнем выраженности семантического компонента «размер») на категоризацию аудиальных стимулов, противопоставленных по высоте тона:
A) Разработать два дизайна экспериментов
Б) Подобрать стимулы-лексемы, включающие компонент «размер», противопоставленные по размеру
B) Провести экспериментальную сессию с привлечением респондентов для каждого эксперимента (не менее 40 человек)
■ Провести статистическую обработку результатов экспериментов;
■ Проинтерпретировать результаты экспериментов;
■ Сравнить степень кроссмодального взаимодействия при обработке предметных символов и языковых
Материалом исследования являются визуальные и аудиальные стимулы. В качестве визуальных стимулов представлены стимулы-изображения в формате .jpg для первого эксперимента (большой и маленькой круг) и вербальные стимулы для второго и третьего экспериментов (36 слов со семантическим компонентом «размер»). В качестве аудиальных стимулов представлены два тона: 1500 Hz - «высокий», другой, 1000 Hz - «низкий». В результате проведения первого эксперимента было получено 5440 реакций, в результате второго - 5440 реакций, в результате третьего - 2728 реакций.
Теоретической основой работы послужили
• работы, в которых формулируются общие теоретические положения когнитивного подхода к анализу языка;
• положения общей теории воплощенного познания (Л. Барсалу, Э. Рош, Дж. Лакофф и др.);
• работы, посвященные кроссмодальному взаимодействию (Э. Сепир, И.Х. Бернстайн, Б.А.Эдельстайн, К.Эванс, Э. Трэйсман и др.);
• данные о визуальном восприятии (А. Р. Лурия и др.);
• данные об аудиальном восприятии (Б.Ф. Ломов и др.);
• теория психолингвистического эксперимента (В.В. Левицкий, И.А.Стернин).
Методы, использованные в нашем исследовании:
В качестве базового метода мы использовали эксперимент.
Психолингвистический эксперимент - это активный метод эмпирического познания процессов речевой деятельности, как правило, в искусственно созданных условиях с привлечением испытуемых и под контролем экспериментатора . Мы использовали:
• предварительное тестирование при помощи анкетирования с применением шкалирования Ликерта, для отбора стимулов для третьего эксперимента.
• психолингвистический аппаратный эксперимент с измерением скорости реакции испытуемых на предъявляемые объекты, выполненный с помощью ПО E-prime, для проведения первого и второго экспериментов.
• онлайн эксперимент с помощью программы OpenSesame 3.3.2 Lentiform Loewenfeld
• методы статистического анализа - критерий для сравнения двух независимых выборок (критерий Манна - Уитни), апостериорный анализ (критерий Бонферони), апостериорный анализ для оценки значимости эффектов (критерий Фишера), дисперсионный анализ с повторными измерениями (ANOVA), критерий Стьюдента (t-тест) для сравнения выборок.
Новизна исследования заключается в привлечении языкового материала русского языка, что позволит выяснить есть ли влияние семантического компонента «размер» у вербальных стимулов на категоризацию аудиальных стимулов. А также в получение новых результатов.
Теоретическая значимость работы заключается в пополнении знаний о взаимодействиях аудиальной и визуальной модальностей, а также влиянии семантического компонента размерности на базовые эффекты взаимодействия модальностей.
Практическая значимость работы состоит в том, чтобы повысить эффективность обработки сигналов внешнего мира, поступающих из разных каналов восприятия.
Структура работы. Работа состоит из введения, двух глав, заключения, списка использованной литературы и приложений.
Во введении будут обозначены квалификационные параметры исследования: определен объект, предмет, теоретическая значимость и новизна.
В первой главе представлены теоретические предпосылки исследовательской работы: обозначены основные принципы концепции воплощенного познания, рассмотрено понятие кроссмодального восприятия, а также особенности восприятия визуально и аудиально представленного стимула и требования к проведению экспериментального исследования.
Во второй главе описывается ход и результаты анализа трех проведенных экспериментов по изучению влияния слов с семантическим компонентом «размер» или изображений разного размера на обработку аудиальных стимулов.
В заключении обобщаются результаты исследования.
В приложении приведено информационное согласие на участие в эксперименте и стимульный материал третьего эксперимента.
✅ Заключение
В центре исследования настоящей работы находятся явления кроссмодального типа, предполагающие наличие влияния информации из одного перцептивного канала на когнитивную обработку информации, поступающей посредством другого канала восприятия.
Взаимодействие модальностей изучается в рамках теории воплощенного познания, которая постулирует о важности моторного и перцептивного опыта. Наличие нерешенных проблем и незаполненных лакун в изучении кроссмодального восприятия, а также большое количество статей по этой тематике, обуславливают актуальность данной работы и всего направления исследований кроссмодальных взаимодействий.
Мы провели три экспериментальных исследования на выявление кроссмодальных аудиовизуальных эффектов, в частности, эффекта конгруэнтности. В первом эксперименте в качестве визуальных стимулов использовались изображения маленького и большого размера.
Результаты анализа первого эксперимента в серии продемонстрировали эффект конгруэнтности для изображений малого размера: высокий звук в паре с маленьким изображением категоризовался респондентами быстрее, нежели высокий звук в паре с большим изображением.
Согласно теории перцептивных символов воплощенного познания, семантика слова может моделировать в том числе и перцептивную информацию.
Поэтому для второго и третьего экспериментов в серии мы использовали вербальные визуальные стимулы с размерным компонентом семантики: большой и маленький. (разной степени выраженности) продемонстрировали эффект конгруэнтности для слов с семантикой малого размера: высокий звук в паре со словом «маленький» категоризовался респондентами быстрее, нежели высокий звук в паре со словом «большой».
На основе полученных результатов, мы решили проверить это взаимодействие на стимулах, требующих более сложную когнитивную обработку. Это были стимулы, где семантический компонент размер, не является основным дифференциальным компонентом семантической структуры. Получив и проанализировав данные третьего эксперимента, мы пришли к выводу, что если такое взаимодействие и существует, то она не настолько явное, как в предыдущих экспериментах. Возможно мы не смогли увидеть статически значимой разницы между реакциями на разные сочетания стимулов, кроссмодальная ассоциация, которых была уже доказана, потому что выборка респондентов была недостаточно велика или же данное взаимодействие не работает на наших стимулов. Наша работа завершена тем, что мы получили данные о взаимодействии аудиальных и визуальных стимулов. Несмотря на то, что наша гипотеза не подтвердилась в полной мере, мы не можем отрицать наличие кроссмодального взаимодействия аудиальных стимулов, различающихся по высоте тона, и визуальных стимулов, различающихся по размеру или по выраженности семантического компонента «размер».
Подобные результаты являются весомым свидетельством жизнеспособности концепции перцептивных символов и теории моделирования перцептивного опыта при восприятии языковых единиц.



