И все же в подавляющем большинстве жанров и актов устной коммуникации телесный код и другие невербальные знаковые системы тесно взаимодействуют с речью и языком, так что коммуникация людей без участия соматических знаков часто выглядит либо странной, либо неполноценной. Отсюда следует, что полное описание того, как протекает устная коммуникация, невозможно без анализа механизмов, моделей, способов и инструментов взаимодействия естественного языка и соответствующего ему языка тела 5 5 См. появившиеся в последнее время многочисленные работы, посвященные механизмам и правилам взаимодействия вербальных и невербальных кодов в диалогическом общении. Эти работы ведутся по разным направлениям. Помимо исследований общего характера, выделим физиологические, психологические, социологические и компьютерные разработки. Из публикаций лингвосемиотического направления особо отметим книги и статьи (McNeil 1992; Kendon 2004; Cienki, Müller 2008; Федорова, Кибрик 2014).
.
Проблема описания взаимодействия естественного языка и других знаковых кодов, в частности языка тела, получила в лингвистической и семиотической литературе название проблемы мультимодальности 6 6 Термины модальность и мультимодальность используются в этом и похожих контекстах не в лингвистическом, а в психологическом смысле, то есть как обозначения отдельного канала или нескольких каналов восприятия. Так, говорят о зрительной (визуальной) модальности, слуховой (аудиальной) модальности, тактильной модальности и др.
. А сравнительно недавно лингвисты и специалисты в области невербальной семиотики заговорили о мультимодальной лингвистикекак об отдельной науке, изучающей мультимодальную коммуникацию 7 7 Сегодня многие исследователи, отмечая значительные сходства жестов и естественно-языковых единиц, даже рассматривают жесты и язык как часть единого знакового кода, см., например, работы (Kendon 1994; McNeil 1992; McNeil, Duncan 2000). В чаcтности, Надия Хамруни (Nadia Hamrouni) в своей рецензии (Hamrouni 2014, 137) на сборник работ «Gesture and Multimodal Development» («Жест и мультимодальная коммуникация»), вышедший в 2012 году (см. (Colletta 2012)), пишет: «Все больше исследователей подчеркивают, что жесты не следует рассматривать как «паралингвистическое дополнение» к <���естественному> языку, напротив, в совокупности с языком они формируют единую систему коммуникации» (здесь и далее перевод наш. – Авторы).
.
Задача описать то, как в коммуникативных актах невербальные семиотические коды взаимодействуют с естественным языком и друг с другом, становится еще более актуальной и важной, когда мы обращаемся к межъязыковой и межкультурной коммуникации людей. В этом случае приходится учитывать различие не только естественных языков, но также телесных и других знаковых кодов. Так, для правильного перевода на английский язык фразы Она сидела на корточках надо знать, что сочетание сидеть на корточках в английском языке обычно передается одним словом – глаголом to squat. А если мы захотим перевести на японский язык такой простой диалог, как – У тебя все хорошо? – Она ответила ему жестом «ОК» , то столкнемся с более серьезными трудностями. Дело в том, что одним переводом слов и грамматических конструкций естественного языка, как в первом примере, нам здесь не обойтись. Нужно еще знать, что в традиционной японской культуре жест, имеющий форму кольца, образованного большим и указательным пальцами руки, сходную с формой жеста « ОК», имеет совсем другой смысл, а именно он означает ‘деньги (разговор о деньгах) в ситуации купли-продажи’ (цит. по (Крейдлин 2002, 135–136)).
Подводя промежуточный итог, отметим, что все коммуникативные акты, встречающиеся в живом потоке устной речи, и все высказывания в этих актах можно разделить на три класса.
В первый класс попадают те акты и высказывания, в которых используется только естественный язык (их, как мы говорили выше, не так уж много). Во второй класс, и таких актов и высказываний большинство, попадают те, в которых используются сразу оба кода – языковой и невербальный телесный код (а возможно, и какие-то другие знаковые коды). Наконец, в третий класс входят высказывания, которые целиком основываются на телесном коде. Такие высказывания иногда называют жестовыми сообщениями, а сами акты – жестовыми актами(часто, характеризуя высказывание, вместо прилагательного жестовый используется прилагательное невербальный ).
Читать дальше