Институт языкознания РАН и Центр когнитивных исследований филологического факультета МГУ имени М.В. Ломоносова
15 ноября 2013 г. проводят семинар
«Мультимодальная коммуникация: теоретические и эмпирические исследования»
Рассматривая человеческую коммуникацию с точки зрения мультимодального подхода, можно выделить три основных информационных канала – вербальный, просодический и визуальный (Кибрик 2010). Традиционная лингвистика ограничивается изучением вербальных языковых явлений, однако принципиальной разницы между вербально передаваемой информацией и информацией, передаваемой посредством несегментных (=просодических) и невокальных (в частности, жестовых) средств, не существует. Основная цель семинара состоит в объединении усилий исследователей, занимающихся изучением различных аспектов мультимодальной коммуникации.
Тематика семинара включает, с одной стороны, такие исключительно важные для языковой коммуникации просодические явления, как акценты, паузацию, темп, степень редукции и под. (см., в частности, работы Николаева Т.М. 2008, Кодзасов 2009, Янко 2008, Кибрик и Подлесская (ред.) 2009, Podlesskaya 2010). С другой стороны, в рамках семинара предполагается обсудить разнообразные составляющие визуального канала – жестикуляцию, направление взора, мимику и другие особенности «языка тела» (Крейдлин 2002, Бутовская 2004, Николаева Ю.В. 2004, Крейдлин и Переверзева 2013, Гришина 2011, Гришина 2012, Гришина 2013). Кроме этих двух основных блоков – просодического и визуального – планируется уделить внимание важной современной составляющей мультимодального изучения языковой коммуникации – мультимедийным корпусам (Гришина 2009, Котов 2013, см. также проект «Рассказы о сновидениях и другие корпуса звучащей речи»), а также исследованиям, в которых оценивается относительный вклад информационных каналов (Kibrik and Èl’bert 2008, Kibrik and Molchanova 2013) и взаимосвязь между паузацией и жестами (Сухова 2008), вербальным и жестовым каналами (Федорова и др. 2011, Николаева Ю.В. 2012).
По материалам семинара планируется публикация сборника статей.
В настоящее время состав докладчиков в основном сформирован; в него войдут: Е.А. Гришина, А.А. Кибрик, А.А. Котов, Г.Е. Крейдлин, Ю.В. Николаева, Е. Павлова, В.И. Подлесская, И.В. Утехин, О.В. Федорова, Алан Ченки.
Мы приглашаем всех желающих принять участие в конференции в качестве слушателей и участников обсуждения.
Организаторы семинара: А.А. Кибрик, Ю.В. Николаева, О.В. Федорова. Семинар пройдёт в Институте языкознания РАН.
Литература
- Бутовская М.Л. Язык тела: природа и культура (эволюционные и кросскультурные основы невербальной коммуникации человека). М.: Научный мир, 2004.
- Гришина Е.А. Мультимедийный русский корпус (МУРКО): проблемы аннотации // Национальный корпус русского языка: 2006–2008. Новые результаты и перспективы. СПб.: Нестор-История, 2009, 175–214.
- Гришина Е.А. Закрытые глаза: жестикуляция, пунктуация, акцентуация // Филология, 2011, 2. С. 39–56.
- Гришина Е.А. Указания рукой как система (на материале Мультимедийного русского корпуса) // Вопросы языкознания, 2012, 3. C. 3–50.
- Гришина Е.А. Указания головой как система // Вопросы языкознания, 2013, 3. С. 119 –159.
- Рассказы о сновидениях: Корпусное исследование устного русского дискурса / Под ред. А.А. Кибрика и В.И. Подлесской. М.: ЯСК, 2009.
- Кибрик А.А. Мультимодальная лингвистика // Когнитивные исследования – IV. М.: ИП РАН, 2010. С. 134–152.
- Кодзасов С.В. Исследования в области русской просодии. М.: ЯСК, 2009.
- Котов А.А. Компенсация коммуникативных стимулов в эмоциональном диалоге // Компьютерная лингвистика и интеллектуальные технологии. По материалам ежегодной международной конференции «Диалог» / Под ред. В.П. Селегей и др. М.: РГГУ, 2013. С. 332–341.
- Крейдлин Г.Е. и Переверзева С.И. Тело и его части в разных языках и культурах (итоги наунчого проекта) // Компьютерная лингвистика и интеллектуальные технологии. По материалам ежегодной международной конференции «Диалог» / Под ред. В.П. Селегея и др. М.: РГГУ, 2013. С. 332–341.
- Крейдлин Г.Е. Невербальная семиотика. М.: НЛО, 2002.
- Николаева Т.М. Почему лингвисты не любят «про интонацию»? // Фонетика и нефонетика / Под ред. А.В. Архипова и др. М.: ЯСЛ, 2008. С. 43–52.
- Николаева Ю.В. Функциональные и семантические особенности иллюстративных жестов в устной речи (на материале русского языка) // Вопросы языкознания, 2004, 4. С. 48–67.
- Николаева Ю.В. Жестикуляция рассказчика и структура нарратива // Когнитивные исследования, вып. 5 / Под. ред. А.А. Кибрика, Т.В. Черниговской, А.В. Дубасовой. М.: Институт психологии РАН, 2012.
- Сухова Н.В. Способы взаимодействия пауз колебания и кинетических фраз // Компьютерная лингвистика и интеллектуальные технологии. По материалам ежегодной международной конференции «Диалог» / Под ред. А.Е. Кибрик и др. М.: ИПИ РАН, 2008. С. 511–518.
- Федорова О.В. Павлова Е., Фейн А. Центральность референта в дискурсе (на материале последовательных пересказов «Рассказов о грушах» У. Чейфа) // Материалы Пятого междисциплинарного семинара "Анализ разговорной русской речи", 2011. С. 42–47.
- Янко Т.Е. Интонационные стратегии русской речи в сопоставительном аспекте. М: ЯСК. 2008.
- Kibrik A.A. and Èl’bert E.M. Understanding spoken discourse: the contribution of three information channels // Materials of the 3 International Conference on Cognitive Science / Eds. Yu. I. Alexandrov et al., 2008. Р. 82–84.
- Kibrik A.A. and Molchanova N.B. Channels of multimodal communication: Relative contributions to discourse understanding. Cognitive Science conference, Berlin, 2013.
- Podlesskaya V.I. Parameters for typological variation of placeholders. // Fillers, pauses and placeholders / Eds. N. Amiridze, B.H. Davis, and M. Maclagan, 2010. P. 11–32.