Проектирование визуально-звуковой композиции в дизайне мультимедиа

У каждого времени своя версия мира, которую создает культура. Именно культура определяет способы поведения и психологическую основу личности. Любая человеческая личность стремится каким-либо адекватным способом создать себе простую, ясную картину окружающего. Это необходимо не только для того, чтобы нонять мир, но и для того, чтобы в известной мере попытаться заменить его переосмысленной и созданной картиной. «Человек не может существовать иначе, чем в том, в чем он себя выражает».1.

Современное общество в своем развитии шагнуло на новую ступень формирования и сохранения впечатлений и знаний, общей и научной информации об окружающем на основе компьютерных технологий. Основными признаками этого процесса является распространение сетей ЭВМ, широкомасштабное использование мультимедийных технологий, которые дизайнерам раскрыли новую возможность применения профессиональных навыков в области дизайна мультимедиа. Мультимедийные технологии активно используются в подготовке учебных, научных, коммерческих презентаций. В связи с этим у людей разных специальностей, а тем более у тех, чьей профессиональной деятельностью является дизайн, возрастает желание разрабатывать понятные электронные информационные документы на высоком эстетическом и общекультурпом уровне.

Для дизайнера важным является тот факт, что компьютерные технологии позволяют использовать в мультимедийном издании графические изображения, фото-, видеоматериалы, выполняющие разные функциии при этом включать в композицию звуковое сопровождение. В мультимедийном издании используется синтез разных выразительных — визуальных и звуковых средств. В результате для дизайнера открылась возможность применения профессиональных навыков, связанных с решением такой задачи, как осуществление визуально-звукового синтеза. При этом важным остается основное требование к результату: в мультимедийном издании должна создаваться такая виртуальная среда, в которой человеку комфортно, которая отвечает его представлению о правильно организованном информационном пространстве.

Рассмотрение мультимедийного издания как объекта проектирования в дизайне без выхода в мир смежных искусств, в мир общей эстетики не может дать верного представления об особенностях композиционной структуры этого экранного произведения. Разные виды искусства не развивались и не развиваются изолированно. Каждый из видов пользуется художественным опытом и достижениями другого. Многогранная содержательная палитра визуально-звукового синтеза позволяет отобразить и создать огромное разнообразие чувствеппо-эмоциональпых образов.

Дизайну свойственно внимательное изучение выразительных средств из разных областей визуальных искусств (графики, живописи, скульптуры, архитектуры). Он заимствует их визуальный язык и их логику. В настоящем исследовании поставлена задача нахождения и организации органичного сочетания выразительных визуальных и звуковых средств в единой визуально-звуковой композиции мультимедийного издания. Вопросы истории развития каждого вида искусств достаточно глубоко осознаны и разработаны в искусствоведческой и музыкальной литературе. Во «Всеобщей истории искусств», в примерах конкретных произведений всегда приводится анализ используемых выразительных средств в отображении окружающего мира, характера моделировки форм предметов, характера их расположения и взаимодействия в художественном пространстве. Аналогичный анализ приводится в исследованиях, посвященных музыке, где также прослеживается стилистическое единство выразительных средств этого вида искусства в их историческом становленииформулируются принципы, лежащие в основе гармонии, полифонии и формообразования. Перед дизайном, в связи с возрастающим количеством продукции, объединяющей разные виды искусства в едином проекте, встала общая цель: установление научного, логического и, в то же время, творческого подхода к процессу проектирования мультимедийного издания, в задачи которого входит создание визуально-звукового синтеза композиционного решения. На поиск пути решения этой задачи и направлено па-стоящее исследование.

В первой главе рассматриваются вопросы, связанные с историей развития научной мысли в области визуально-звукового синтеза: кто, в какое время и как осуществлял синтез визуального и музыкального образов.

Краткий обзор охватывает исторический период от XVII века, когда И. Ныотон предложил провести аналогию спектр — октава между звуком и спектром, до взаимовлияния выразительных средств в искусстве XX века.

Подробнее рассматривается, каким образом знание основ музыкального искусства оказало воздействие на создание произведений средствами другого вида искусства в начале XX века. В качестве примеров приведены и проанализированы графические и живописные произведения П. Клее, М.-К. Чюрлениса — художников, имеющих профессиональное музыкальное образование. Также в качестве примера, приводится архитектурное сооружение Я. Ксенакиса, в основу проектирования которого композитор положил композиционный замысел своего музыкального произведения «Метастазис». Изучение и переосмысление результатов их творческой деятельности явилось оправданием целесообразности проведения сопоставления композиций визуальных искусств (на примере живописи) и музыки во второй главе исследования для разработки научно-методической основы проектирования мультимедийных изданий, в задачи которых входит создание визуально-звукового синтеза.

Кроме этого, в первой главе освещаются вопросы решения проблемы взаимодействия выразительных средств в произведениях искусств, предназначенных для показа на экране. Известно, что еще в искусстве кино С. Эйзенштейн ставил задачу найти ключ к соответствию между «куском» музыки и «куском» изображения такой продолжительности, которая позволила бы сочетать «по вертикали», то есть в одновременности, каждую фразу пробегающей музыки с каждой фразой параллельно пробегающих фрагментов пластического развития сюжета — кадров. Визуально-звуковые сочетания выдвигали в вопросах монтажа в кино необходимость разрешения новой для своего времени проблемы в области композиции. В своих поисках кинорежиссер пришел к разработке методики того, каким образом выстраиваются соответствия изображения и музыки при конкретно поставленной задаче. В настоящей диссертации разрабатывается метод общего подхода к решению задач, связанных с созданием визуально-звукового синтеза в дизайне мультимедийных изданий уже па начальной стадии проектирования, когда есть еще только общие пожелания к стилю и образу проекта.

Основные отличительные черты мультимедиа изданий — наличие разветвленной структуры организации информации, иптерактивпости документа. Дизайнеру необходимо думать не только о визуальном композиционном единстве экранов, о взаимодействии в компьютерной среде разноплановой визуальной (графической текстовой) и звуковой информации, но о разнообразии композиционных изменений (визуальных и звуковых) как следствия интерактивного взаимодействия, о характере динамичной смены экспозиций экранов, о разном функциональном назначении информации. Для обретения творческой свободы обращения с таким разнообразным материалом в динамической, развивающейся во времени композиции необходимо знание не только характера и особенностей создания произведений визуальных искусств (живописи, графики, дизайна), но и музыки.

Хотя некоторые примеры аналогий выразительных средств приводятся в исследованиях, посвященных как теории изобразительных искусств, так и теории музыки, однако не было проведено целенаправленных исследований, раскрывающих общность стилистических черт, композиционных принципов визуальных искусств и музыки разных исторических стилей для использования полученных результатов в проектировании объектов дизайна. Пет и общей системы понятий, ясно сформулированных единых принципов, позволяющих проводить анализ композиционной структуры произведений пространственного и временного видов искусств, относящихся к одному времени, одному стилю в их историческом развитии. В то же время, при разработке эскизов, поиске соответствий визуального и музыкального решений, задача дизайнера состоит не только в том, чтобы опираться на спонтанно возпикающие ассоциации, сколько умело учитывать и использовать знания особенностей создания соответствующего образа средствами смежного искусства музыки.

Основываясь на приведенных доводах, во второй главе настоящего исследования было проведено сопоставление и согласование основных понятий и терминов композиции визуальных искусств и музыки. Затем проведен анализ и сопоставление композиций произведений пе только живописи, но и музыки, соответственно историческому стилю. Такой анализ оказалось возможно провести согласно методу исследования произведений пластических искусств (живописи), разработанному известным искусствоведом Г. Вельфлиным. В начале XX столетия, «искусствознанию надо было научиться анализировать картины, скульптуры и архитектурные композиции, а не вдаваться в умные отвлеченные рассуждения в духе академического филол софствования и старой Венской школы». В связи с этим, Г. Вельфлин предложил таблицу из следующих понятий, позволяющих анализировать композицию произведений живописи: 1) линейность — живописность, 2) плоскостность — глубина, 3) замкнутая форма — открытая форма, 4) тектоническое начало — атектоническое начало, 5) безусловная ясностьнеполная ясность. Такой систематичный, обозримый, имеющий высокую степень абстрагирования подход, позволил четко выявить общие композиционные черты произведений визуальных искусств (на примере живописи) и музыки, относящихся к одному историческому стилю.

В результате проведенного исследования были разработаны схемы, отражающие общность (аналогичность) композиционных принципов организации пространства в произведениях визуальных искусств и музыки. Разработанные схемы используют условные обозначения, отражающие основную суть взаимодействия элементов композиции, отличающие произведения искусства одного исторического стиля от другого. Использование их в процессе проектирования позволяет активизировать творческую мысль в поисках новых форм организации информационно-графического и звукового материала, а также стимулирует объединение в одном проекте произведений разных видов искусств.

В настоящей диссертации приводится система доказательств о том, что знание общих композиционных принципов необходимо в процессе работы над проектом, ради того, чтобы разработанное мультимедийное издание выполняло не только функции сохранения и передачи собранной информации, но вызывало определенное эмоциональное отношение, способствуя лучшему запоминанию содержания. Это объясняется тем, что, мультимедийные информационные интерактивные среды позволяют задействовать два вида мышления — образное и логическое, что является дополнительным фактором к активному восприятию и запоминанию сообщений.

Результаты исследования второй главы положены в основу разработки научно-методической базы проектирования мультимедийных изданий изложенной в третьей главе. Методика состоит из четырех ступеней и включает изучение выводов, полученных в результате анализа, проведенного во второй главе диссертации. Сопоставление терминов и понятий, а также общие черты и различия в композиции произведений живописи и музыки предлагается осваивать на первой ступени знакомства с методикой создания визуально-звукового синтеза в дизайне мультимедиа.

На первой ступени излагаются общие принципы композиции произведений искусства живописи и музыки, представленные во второй главе настоящего исследования.

На второй ступени предлагается выполнить задания, способствующие освоению методики создания визуально-звукового синтеза. Составной частью любой мультимедийной системы является графический интерфейс. Современные компьютерные технологии раскрывают широкие возможности для проектирование композиции экрана мультимедийного издания, использующего графические изображения в качестве интерактивных элементов интерфейса, для динамических изменений информационного пространства экрана, (расширения, свертывания, изменения точки зрения, варьирования как отдельных элементов, так и групп элементов композиции) — а также возможности согласования визуального решения со звуковым. При этом возможности гипертехнологии позволяют предлагать задачи разной степени сложности, решение которых позволяет проверить работоспособность методики создания визуально-звукового синтеза.

В мультимедийном издании звуковое сопровождение может иметь разную степень зависимости от визуального решения. Например: звук/музыкальный фрагмент включен в качестве фона, не мешающего восприятию содержания мультимедийного изданияили выбор звукового сопровождения определяется требованиями соответствия характеристикам времени, стиля, места, для создания атмосферы действия, или создание синтеза па основе единого композиционного решения, единой визуально-звуковой композиции. Метод создания визуально-звукового синтеза в мультимедиа-технологии направлен па формирования навыков представления содержания мультимедийной презентации или издания и подбора звукового сопровождения таким образом, чтобы привести к соответствию не только образные характеристики, но согласовать композиционную структуру визуально-звукового решения.

Степень сложности задания второй ступени предполагает создание мультимедийной композиции с линейной структурой раскрытия содержания. Линейная структура проста для выполнения и с точки зрения освоения и применения на практике композиционных принципов, и с точки зрения технологии реализации. В то же время на примере линейной композиции можно увидеть отличие композиций, выраженное в выборе выразительных средств и логике представления содержания, свойственных произведениям искусств, относящихся к разным историческим стилям. В дальнейшем можно использовать полученные результаты и приобретенные при их выполнении навыки и знания при создании мультимедиа продукта с более сложной структурой.

На третьей ступени рассматриваются мультимедийные проекты, в которых применение знаний общих композиционных принципов двух искусств, способствует созданию визуально-звукового синтеза в дизайне не только простых линейных мультимедийных композиций, но и электронных изданий, имеющих сложную гипертекстовую структуру содержания. Структурная и композиционная схема взаимодействия разделов содержания мультимедийного издания предполагает свободную систему перекрестных ссылок. Возможность многооконного представления информации с одной стороны, позволяет структурировать разнородную информацию на экране (каждая в своем окне), манипулировать и управлять ею, а с другой стороны, способствует созданию целостного представления об объекте, представленном с помощью текстов, разнообразной графики, фото-, видео-, аудиоматериалов. Рассматриваются примеры учебных мультимедийных проектов, отражающие логические связи между навыками, полученными при выполнении первого блока заданий и проектированием практического мультимедийного издания. Рассматриваются варианты преобразования структурных схем из линейных в нелинейные, смешанные, при выполнении условия сохранения логики распределения функций частей содержания. Акцентируется внимание на том, что при создании визуально-звукового синтеза после проведения общего структурирования материала мультимедийного издания важен как общий сценарий раскрытия информации, так и разыгрывания каждой отдельной ситуации.

На четвертой ступени задание направлено па закрепление полученной информации о предложенных принципах создания визуально-звукового сип-теза в композиции мультимедиа, осмысление того, в каких случаях оправдано следование разработанной методике.

В процессе разработки паучно-методологической основы создания визуально-звуковой композиции в дизайне мультимедиа были выявлены основные принципы проектирования, такие как: принцип целостного формообразования объекта, принцип системной информативности, принцип формализованного содержания, принцип динамического развития.

Результаты методики, включающей разработанные схемы и выявленные принципы проектирования, анализируются на примерах внедрения на разных стадиях учебного и практического проектирования, с 2001 но 2006 г. Они также приводятся в третьей главе исследования. Здесь описываются учебные и практические проекты, которые на разных стадиях диссертационного исследования определяли направление поиска, это: Учебный проект «Мелодии Летнего сада», коммерческий проекты: проектирование учебного мультимедийного издания «История дизайна», электронной визитной карточки «Международного фонда канцлера A.M. Горчакова». Вопросы, появляющиеся в процессе проектирования, позволили конкретизировать постановку задачи настоящего диссертационного исследования, связанной с сопоставлением принципов организации композиций пластических искусств и музыки.

Также в третьей главе приводится анализ аналога существующего мультимедийного издания, соответствующего теме диссертационного исследования и демонстрирующего вариант реализации визуально-звукового сип-теза, решение которого созвучно теме настоящего диссертационного исследования. Это мультимедийное издание «l'Essentiel de la Musique du Baroque au Romantisme» — «Сущность музыки. От барокко до романтизма», выпущеное во Франции Infogrames Multimedia — Montparnasse Multimedia в 1997 году.

Кроме этого дается информация о программном обеспечении, с помощью которого велось проектирование мультимедийных изданий. Так как мультимедийные информационные интерактивные среды позволяют задействовать два вида мышления — образное и логическое, то для решения задач, связанных с синтезом и разрабатывалась предложенная методика, которая позволяет согласовывать визуально-звуковое решение, не только на основе синхронного соответствия, а на уровне концептуального замысла мультимедийной композиции. Поиск пути проектирования, который давал бы возможность создавать мультимедийные издания, отвечающие высокому эстетическому и общекультурпому уровню, — задача, которая наряду с освоением современной технологии и непосредственно осуществлением проектной работы с помощью современного инструмента — компьютера, в настоящее время является одной из основополагающих в дизайне. Здесь уместно будет отметить следующее: «философский взгляд на мультимедиа добавляет следующий элемент в его определение: мультимедиа — это интеграция технологий и идей. Именно идеи делают мультимедиа-системы многосторонними, добавляя третье измерение — развитие во времени, но не хаотичное, а заложенное и продуманное человеком».3.

Таким образом, научная новизна исследования определяется объектом исследования — современными мультимедиа изданиямипостановкой задачисоздания визуально-звукового синтеза в мультимедийном издании, как объекте проектирования дизайна, а также результатами — в процессе работы был предложен единый системный подход к анализу визуальных произведений и музыкипроведен анализ смыслового соответствия терминов визуального и музыкального рядаопределена терминология, позволяющая анализировать произведения визуального и музыкального ряда с единых позицийвыработаны новые подходы к разработке проектов, в задачи которых входит осуществление синтеза визуальных и звуковых средств.

ЗАКЛЮЧЕНИЕ

.

Проблема взаимодействия изображения и звука, задачи синтеза выразительных визуальных и звуковых средств, на протяжении длительного исторического времени занимали людей разных областей науки и искусства. В настоящее время их решение получило новое воплощение и развитие, в связи с совершенствованием современных технологий. Этим обоснована актуальность выявленной проблемы.

В теоретическом плане проведено согласование основных понятий и терминов. Проанализированы композиции произведений живописи и музыки на соответствие композиционных принципов. В процессе сравнительного анализа установлены общие композиционные принципы организации художественного пространства произведений живописи и музыки. На основе проведенного анализа разработаны схемы, отражающие общие принципы организации материала визуальной и звуковой композиции произведений, относящихся к одному историческому стилю. Предложен научный подход к созданию визуально-музыкальных композиций в процессе обучения проектированию мультимедийных изданий. Выработаны следующие основные принципы проектирования, способствующие осуществлению эстетического единства визуально-звуковой композиции в дизайне мультимедиа:

Сделаны выводы о том, что осуществление эстетического единства визуально-звуковой композиции способствует следующее.

1) Предложен единый системный подход к анализу произведений живописи и музыки.

2) Проведение анализ смыслового соответствия используемых терминов.

3) Определение терминология, позволяющая анализировать композиции произведений визуальных искусств и музыки с единых позиций.

4) Предложение нового подхода к разработке объекта проектированиямультимедийного издания, в задачи которого входит осуществление синтеза визуальных и звуковых средств.

В методическом плане результатом исследования является разработанная методика проектирования визуально-звуковой композиции в дизайне применительно к мультимедийным изданиям. Методика следования формальным единым композиционным принципам наглядно представляет преимущества ее использования: быстрота выбора необходимой структурной схемы, точное соответствие стилевым требованиям, соответствие образного строя визуальной и звуковой композиции. Метод получил практическое применение. За счет обобщения широкого круга исследованного материала, позволяет ставить и решать конкретные проектные задачи не только в практике, но и учебном процессе.

В экспериментальном плане разработан и проведен ряд учебных заданий, проверяющих и подтверждающих работоспособность теории формирования гармоничного образа мультимедийного издания, создания визуально-звукового синтеза проекта, па основе следования формальным композиционным принципам. Предложена постановка новых задач в проектировании мультимедийных изданий, основанная па выводах теоретического исследования и проведенном эксперименте.

Таким образом, в теоретическом плане диссертационная работа дополняет и расширяет раздел теории дизайна, посвященный синтезу визуальных и звуковых средств и имеющиеся представления о синтезе визуального искусства и музыки в современной дизайнерской деятельности.

Обширный материал исследования, впервые обобщенный применительно к дизайну, ориентирован на практическое применение в новых компьютерных технологиях и включает в научный оборот новые данные о визуально-звуковой композиции в дизайне.

Полученные в исследовании результаты использованы в учебном процессе и позволяют сформулировать следующие выводы: 1) В мультимедиа дизайнеру приходится сталкиваться с решением новых для него задач, связанных непосредственно с визуально-звуковым синтезом. Смысл и методология синтеза, создаваемого в композиции экрана мультимедийного издания, обнаруживается в технологии и творческом решении воссоединения пространства и времени, изображения и звука. Дизайн мультимедиа объединяет выразительные средства пространственных и временных искусств, которые пе просто взаимодействуют, оставаясь самостоятельными феноменами, но существуют неразрывно.

2) Создание синтеза в дизайне мультимедиа требует особой формы мышления, позволяющей осуществлять единство визуально-звукового компози-циоп-ного решения па чувственном и концептуальном уровнях проектирования. Подход к проектированию мультимедийных изданий на основе единства композиционных принципов позволяет выявить возможные формообразующие приемы и, исходя из этого, прогнозировать варианты предъявления всего разнообразия информации, содержащейся в мультимедийном издании.

3) Мультимедиа издания имеют специфическую особенность — интерактивность. В условиях роста спроса на мультимедийную продукцию возрастает роль дизайнера в разработке мультимедийных изданий. Помимо определения художественно-эстетического образа всего издания, в задачи дизайнера входит разработка функционального интерфейса. Кроме того, дизайн-решение должно соответствовать эргономическим требованиям, предъявляемым к электронным изданиям, предназначенным для просмотра на экране монитора.

4) Применение теоретических знаний из области музыки приводит к появлению нестандартных творческих решений в дизайне мультимедиа.

5) Систематизация методов и путей решения задач, связанных с визуально-звуковым синтезом в дизайне мультимедиавыбор нового композиционного решения, поиск динамики соединения разделов (частей) композиционной формы, а также построение драматургии развертывания сюжета мультимедийных изданий — все это является результатом использования единого подхода в исследовании композиционных принципов произведений дизайна и музыки.

6) Выявление взаимосвязи и взаимовлияния визуального и музыкального искусства на значительном отрезке истории позволяет увидеть всю сложность проблем современного дизайна в области визуально-звукового синтеза и имеет немаловажное значение для последующего развития данного направления в дизайне.

Проблемы создания синтеза, безусловно, не ограничиваются только методом следования определенным принципам построения композиции. Однако анализ реализованных проектов показал работоспособность предложенной методики, а также выявил ряд вопросов, требующих дополнительного исследования:

1) отражение национального колорита, его соответствие интонационным особенностям составления звуковой гармонии;

2) создание звуковой атмосферы исторического времени не ограничивается только инструментальными формами музыкальных произведений, выбранными в настоящем диссертации согласно границам исследуемой области. Поэтому эти границы исследования могут быть уточнены или расширены.

3) В теоретическом плане требует дальнейшей разработки и уточнения вопрос о получении новых результатов в создании визуально-звукового синтеза через проведение экспериментов с возможностями технологии. Необходимых также более углубленное исследование возможностей современных технологий (программ по обработке изображений и звука).

4) Необходима постановка и проведение экспериментов по согласованию композиционных и технологических аспектов.

5) Исследование возможностей взаимодействия не только музыки, по и голоса, шума и всего разнообразия представляемых природных и искусственных звуков, а также их моделирования и обработки.

Рассмотренные в данной работе проблемы представляют несомненный интерес для перспективных теоретических и экспериментальных научных исследований. Кроме мультимедийных технологий результаты исследования могут быть использованы при разработке дизайн проектов полиграфических изданий, посвященных теме музыки, где необходимо создать определенный музыкальный образ средствами графики.