Стремясь найти целостный подход к языку, который не может существовать изолированно, с одной стороны, от когниции и коммуникации, а с другой – от технических средств и цифровых медиа, передающих сообщение, современная лингвистика взаимодействует с другими дисциплинами, образуя, в частности, такие междисциплинарные направления, как медиалингвистика и полимодальные исследования.

Рассматривая особенности полимодальных исследований современного художественного дискурса, и в частности – поэтического дискурса, обратимся к базовому для этого цикла дисциплин термину «модальность» («модус»; от лат. modus ‘мера, способ, образ, вид’). Истоки его употребления восходят, в частности, к психологии и информатике, где он обозначает внешний раздражитель, воспринимаемый сенсорной системой человека, прежде всего через зрение и слух. В современной отечественной лингвистике распространены два термина: «мультимодальность» (от лат. multum «очень, весьма; много») или «полимодальность» (от др.-греч. πολύς «многочисленный»), которые употребляются как синонимы.

Хотя феномен полимодальности изучался с древних времен [см. Logan 2000], этот термин приобрел свое нынешнее значение в конце ХХ и в XXI веке в связи с развитием цифровых технологий. В современной лингвистике распространено расширенное понимание полимодальности, основанное на тесной связи между модальностями (семиотическими ресурсами), которые интегрируются по сенсорным каналам: визуальному, аудиальному, ольфакторному, тактильному, кинетическому и пр. [O’Halloran 2011]. Полимодальность включает в себя семантическое, коммуникативное и социальное измерения, когда «различные средства смыслообразования не обособляются, а почти всегда выступают вместе: изображение с письмом, речь с жестом, математическая символика с письмом и т. д.», они сочетаются в «интегрированное, мультимодальное целое» [Jewitt, Bezemer, O’Halloran 2016: 2]. Согласно О. К. Ирисхановой, «модальность» соответствует понятию кода и поликодового текста в семиотике, а также каналам коммуникации: вербальному, визуальному, аудиальному, тактильному и др., а полимодальность «указывает на способность сочетать в едином акте коммуникации несколько модальностей» [Ирисханова 2021: 19].

Если «любое использование языка неизбежно полимодально» (согласно [Scollon 2006: 386]), то справедливо, что поэзия носила полимодальный характер, начиная с ее истоков[25]. Тем не менее современная «мультимодальная литература» (в терминологии [Gibbons 2012: 2]) стремится расширить свои творческие возможности посредством цифровых технологий, задействуя языковые механизмы концептуализации, такие как «мультимодальная метафора» [Gibbons 2012], или создавая новые литературные жанры, такие как видеостихи, аудиовизуальное повествование или инсталляции разных видов медиаискусства [Benthien, Lau, Marxsen 2019].

Специфика полимодальной природы современной поэзии основана на базовых изменениях, характерных для электронной (цифровой, онлайн или устно-письменной) коммуникации. Основные подходы к исследованию литературы в этой области опираются на семиотику, конверсационный анализ, исследования языка жестов и когнитивную лингвистику. Социально-семиотический подход Г. Кресса и Т. Ван Леувена [Kress, Van Leeuwen 2001], направленный на рассмотрение различных модусов восприятия с точки зрения функционирования языка, получил дальнейшее развитие в аспекте лексической или грамматической организации семиотических ресурсов [Machin 2007: 5]. Полимодальные исследования разных типов художественного дискурса развиваются в работах [Зыкова 2021; Логинова 2021; Карпенко 2021 и др.].