Original size 2480x3500

Резонанс восприятия: звуковые и световые ландшафты

This project is a student project at the School of Design or a research project at the School of Design. This project is not commercial and serves educational purposes
The project is taking part in the competition

Раздел 1. Введение.

Тема, контекст, постановка исследования

Свет и звук обычно воспринимаются раздельно, как отдельные режимы восприятия. Разделение, а не соощущение или схожее влияние на пространство и атмосферу во многом связано с привычкой рассматривать свет в преимущественно визуальной парадигме, а звук — в музыкальной или акустической. В своём исследовании я хочу пронаблюдать за тем, как они проявляются как два типа вибрационных потоков, формирующих атмосферу и структуру пространств, а не пытаться синхронизировать их или сводить одно к другому.

В рамках исследования мне хотелось бы рассмотреть именно эту совместную ткань восприятия — то, как свет и звук похожим образом могут ощущаются в пространстве. При этом важно не сводить одно к другому: искусственный свет не должен становиться визуализацией звука, а звук — иллюстрацией света (как плавающие изображения под музыку в десктопных медиа-проигрывателях 2000х). Планирую опираться на идею Кристофа Кокса о том, что попытки синестезийных соответствий обедняют оба явления, превращая их в набор дешёвых аналогий. Поэтому в исследовании постараюсь избегать прямых сопоставлений «частота — цвет» или «яркость — громкость».

Я предлагаю смотреть на свет и звук, как на два вида вибрационных процессов, существующих в среде. Оба они обладают ритмами, пульсациями, областями плотности, участками затухания, шумовыми структурами.

Исследование включает серию визуальных наблюдений за этими четырьмя ландшафтами: фотографирование естественных световых ситуаций, фиксация искусственного света в помещениях и городских пространствах, фиксация звуков природных сред и звуковых структур искусственного происхождения: от звука трассы до звуков бытовых приборов. Эти наблюдения я рассматриваю как своего рода «визуально-звуковые прогулки»: метод, в котором важно дать проявиться явлению через внимание и длительное присутствие.

Я анализирую собственные полевые записи (звук леса, трассы, бытовых приборов) и фотонаблюдения света, преобразуя их в вибрационные профили — RGB-гистограммы света и спектрограммы звука. Задача — не поиск аналогий, а выявление структурных сходств и различий: плотностей, распределений, шумности, пиков, градиентов, импульсности.

Наблюдения за бытовым светом и техническим звуком

Гипотеза

Свет и звук не являются разрозненными сенсорными каналами — они образуют общий вибрационный ландшафт, который делится в нашем субъективном восприятии на потоки так же разительно, как сетчатка отличается от барабанной перепонки, в котором естественные и искусственные явления проявляют себя через сходные процессы.

Original size 1920x2560

Аудиовизуальные прогулки

Актуальность и исследовательское основание.

Свет может проявляться не только как квалиа-опыт. Звук представляет собой распределение интенсивности в среде, то же делает и свет. В данном исследовании особое внимание уделено анализу вибрационных полей.

Гудман в «Sonic Warfare» пишет, что вибрации следует рассматривать как онтологическое основание чувств — они первичны по отношению к модальностям. Кахн критикует чрезмерно универсальные вибрационные космологии, но подчёркивает ценность локальных вибрационных анализов — когда исследователь работает с конкретным материалом, а не с абстракциями.

Мой проект находится именно в этой промежуточной позиции: я не пытаюсь сводить свет и звук к единой визуализации. Я анализирую их как два набора вибрационных структур. Спектрограмма звука — это распределение энергии аудиоматериала. RGB-гистограмма света — это спектр распределения энергии кадра. Метод исследования объединяет две структуры через физику интенсивностей.

Схематичное изображение звуковых волн.

Original size 2508x344

Схема длины волны видимого спектра света.

Проблема синестезии и её критика.

Кристоф Кокс в главе своей книги «Sonic Flux» «Audio/Visual: Against Synesthesia» предлагает отказаться от представления, что звук и свет должны быть сопоставлены по принципу «частота — цвет», «громкость — яркость» или любой другой прямой аналогии. Это те модели, которые исторически делали звук подчинением визуальному режиму. Они удобны, но не отражают реальную материалистическую динамику.

Вместо этого я буду использовать структурный подход: сравнивать распределения энергии. RGB-гистограмма показывает, как «пульсирует» световой поток — где он плотнее, где слабее, где возникают пики, спектрограмма звука показывает то же для звуковых волн (но шире, добавлена ось времени). Эти свойства света и звука человек способен воспринимать чувственно. Возможные корреляции между ними, в таком случае, будут аналитическими, а не буквальными. Это позволяет исследовать вибрации как феномены пространства.

«Однако упускается из виду, что сделать их такими [идентичными и взаимозаменяемыми] можно только через посредников — произвольные картографирующие формулы, определенные заранее. Вместо того чтобы показать нам, как в эстетическом либо физиологическом плане работают чувства, дискурс синестезии размывает границы между ними, оставляя в тени специфичность как слышания, так и видения, чтобы подчинить аудиальное правилам визуального.»

К. Кокс, Звуковой поток

Наблюдение как метод.

Лес, трасса, квартира — три разных вибрационных экосистемы, каждая из которых проявляет себя через свой световой и звуковой профиль.

Я использую видео и фото света в тех же местах (или в очень близких от тех), где записывал звук. Таким образом я рассчитываю добиться сопряженности аудиального и светового поля. Анализ

Original size 2560x1920

Маршрут аудио-визуальной прогулки.

Раздел 2. Концептуальная рамка.

Стив Гудман

Гудман рассматривает вибрации как фундаментальную силу, предшествующую сенсорной дифференциации. Свет и звук — лишь разные диапазоны вибрационной материи. Световое поле — это энергетическое распределение в оптическом диапазоне; звуковое — в акустическом. Оба феномена существуют до перцептивного разделения и могут быть анализированы как структурные интенсивности.

Это важная теоретическая точка: RGB-гистограмма — это не «просто инструмент фотографа», а карта распределения вибрационной энергии в оптическом спектре. Спектрограмма — карта распределения вибраций в звуковом спектре. Сопоставление таких карт — метод исследования вибраций как формы существования среды.

Дуглас Кан

Кан предупреждает о риске чрезмерной универсализации вибраций: когда исследователь пытается «объяснить всё через вибрации», теряется материальность конкретных случаев. Он настаивает на необходимости возвращения к локальному, конкретному, телесному.

В моей работе это учтено следующим образом: - RGB-гистограмма и спектрограмма — физические следы реальных событий, которые может физически ощущать человек и на которые у него может происходить реакция.

Почему цвет — основной вибрационный параметр света?

В этом исследовании цвет становится главным аналитическим параметром. Цвет — это распределение энергии по длинам волн. RGB-гистограмма показывает, как красный, зелёный, синий каналы «вибрируют» в кадре: где свет более тёплый, где холодный, где распределён равномерно, а где обнаруживает резкие скачки.

Это даёт возможность анализировать свет так же, как звук: не по форме, а по структуре распределения. Цвет не превращается в эквивалент высоты звука; он сохраняет свою физическую автономию, но становится читабельным как поле вибраций.

Раздел 3. Методология визуального анализа.

Спектрограмма звука.

Спектрограмма — это визуализация распределения энергии звука по частотам и времени. Она показывает: - шумовые участки; - низкочастотные массы; - высокочастотные импульсы; - пульсации; - ритмические фрагменты; - разрывы.

Original size 1056x348

Пример спектрограммы.

RGB-гистограмма света как комплементарный инструмент.

RGB-гистограмма — это диаграмма распределения энергии светового поля. Она показывает: - плотность света; - импульсы (пики); - однородность или шумность; - провалы; - динамику каналов.

По сути, любая гистограмма — это «вибрационный профиль» света. В исследовании используется совмещённая RGB-гистограмма. Гистограмма становится тем же, чем является спектрограмма для звука: картой того, как энергия распределена по диапазону.

Original size 664x456

Пример гистограммы.

Типология вибрационных структур

В каждой паре (свет+звук) анализируется:

- плотность; - импульсность; - уровень хаотичности; - энергия канала; - наличие повторов; - градиентность - распределённость.

Раздел 4. Визуальный анализ.

Квартира 1 (днем + стиральная машина)

Original size 3024x4032

Фиксация ситуации.

Квартира 1 (днем)
1 min

Звук [Работала стиральная машина] Спектрограмма показывает мягкий фон бытового пространства: широкополосный шум, без выраженных вертикальных импульсов. Низкие частоты устойчивы, верхние — редкие и разрозненные. Звуковая среда больше напоминает атмосферный слой, чем событийную структуру.

Свет Дневной свет формирует распределённое поле с несколькими яркими акцентами. Гистограмма растянута на весь диапазон, с мягким куполом средних тонов и небольшим пиком в светах — отражение солнечных пятен на поверхностях. Тени представлены холодными каналами, а средние — тёплыми. Световое поле стабильное, скользящее, без резких провалов.

Сравнение структуры Световая и звуковая среды квартиры днём сходны по характеру распределённости: обе стабильны, мягки, без жёстких импульсов, несмотря на вмешательство бытового прибора. Психологическое ощущение асинхронности присутствует.

Квартира 2 (вечером)

Original size 4032x3024

Фиксация ситуации.

Квартира 2 (вечером)
1 min

Звук Спектрограмма насыщена вертикальными полосами — множество импульсных событий кухни. Звук фрагментирован, ритмичен, наполнен мелкими всплесками.

Свет Гистограмма смещена в сторону тёмных и тёплых зон. Локальный источник формирует «островные» световые пятна. Свет слабо распределён: присутствуют две области — тёплый локальный свет и глубокие тени.

Сравнение структуры Свет — локальный, статичный, тёплый. Звук — импульсный, фрагментированный, событийный. Это демонстрирует асинхронность медиумов: одна среда — два разных вибрационных сценария. Психологическое ощущение асинхронности отсутствует.

Квартира 3 (чайник)

Original size 4032x3024

Фиксация ситуации.

Квартира 3 (чайник)
1 min

Спектрограмма и гистограмма положения.

Звук Спектрограмма — равномерный широкополосный шум бытового прибора. Минимум событий, максимум стабильности.

Свет Гистограмма почти полностью в темноте, с одним мощным пиктом красного канала — индикатор чайника. Свет — предельно локализованная энергия.

Сравнение структуры Свет — точечная вспышка. Звук — равномерное поле. Это иллюстрирует, как одна вибрационная причина создаёт разные медиальные формы. Психологическое ощущение асинхронности отсутствует (но только по причине того, что я вижу чайник не впервые).

Квартира: групповой вывод

Три случая показывают движение от диффузного к локализованному свету и от человеческой событийности к машинной стабильности. Квартира — мультивибрационная бытовая среда.

Лес 1

Original size 3024x4032

Фиксация ситуации.

Лес 1
1 min

Звук Звуковая среда «Лес 1» имеет характер амбиентного рассеянного поля. На спектрограмме наблюдается широкополосный шумовой слой: — устойчивые низкие частоты (ветер, дальние резонансы), — равномерное заполнение средних частот (хвоя, трение снега, микрозвуки окружающей среды), — редкие и мягкие вспышки в верхнем диапазоне (отдельные шорохи, птицы). Вертикальная структура ровная, без ритмических импульсов. Это не событийный, а атмосферный звук.

Свет Световая среда «Лес 1» образована рассеянным дневным снеговым светом. Гистограмма показывает плавный, непрерывный «куполообразный» подъём, без выраженных провалов и резких пиков. Характерно широкое распределение яркостей — от мягких теней до светлых участков снега. Цветовая структура уравновешена: — холодные синие/зелёные тени, — нейтрально-светлые зоны снега, — немного тёплых оттенков древесины. Такой характер гистограммы указывает на равномерное оптическое поле, где свет не концентрируется, а мягко распределяется.

Сравнение структуры И свет, и звук в «Лес 1» организованы как непрерывные вибрационные поля. В свету нет локальных пиков — только мягкая волнообразная гистограмма. В звуке — аналогично: нет импульсных «столбов», только распределённое шумовое облако. Структуры распределений в обоих медиумах показывают высокую степень равномерности и атмосферности. Это случай, где природная среда в обоих каналах проявляется максимально близко. Психологическое ощущение асинхронности отсутствует.

Лес 2

Original size 3024x4032

Фиксация ситуации.

Лес 2
2 min

Спектрограмма и гистограмма положения.

Звук Спектрограмма «Лес 2» сочетает распределённый шумовой фон с множеством мелких импульсов. Видны: — непрерывная низко-средняя шумовая подложка (ветер, окружающие звуки), — частые вертикальные всплески (шаги, хруст снега, микрособытия воздуха и веток). Эти вспышки формируют штриховой вибрационный профиль, где мелкие события рассеяны по времени, но не образуют регулярного ритма.

Свет Гистограмма «Лес 2» имеет выраженную двухгорбую структуру: — тёмно-синие и зелёные зоны — лесные тени, — светлые жёлтые и красноватые зоны — солнечные участки. Эта форма гистограммы — признак сильного светового контраста, характерного для леса при низком солнечном угле. Между двумя «горбами» есть провал — показатель того, что средних тонов в сцене немного: распределение света делится на тени и проблески света.

Сравнение структуры Световое и звуковое поля в «Лес 2» демонстрируют сходную тенденцию: — свет делится на тени и солнечные пятна — структурная ритмичность, — звук разделён на фон и частые микроимпульсы — акустическая ритмичность. Эта пара показывает, как в лесу возникает двойная ритмическая организация: световая — за счёт чередования тени/солнца, акустическая — за счёт шагов/хруста. Энергия распределена неравномерно, но закономерно. Это среда естественной вариативной импульсности. Психологическое ощущение асинхронности отсутствует.

Лес 3

Original size 3024x4032

Фиксация ситуации.

Лес 3
1 min

Спектрограмма и гистограмма положения.

Звук Звуковое поле — одно из самых плотных: — низкие частоты устойчивы, — средние плотны, — множество мелких вспышек «размазаны» по всей длительности, — верхние частоты присутствуют как мягкий шум ветра и хвои. Спектрограмма напоминает «густое облако» — без больших пауз и провалов. Это состояние плотной природной вибрационной среды.

Свет Гистограмма «Лес 3» широко растянута и насыщена: здесь много средних и светлых тонов, почти нет глубоких теней. Цветовая структура обогащена: — синие каналы (небо), — зелёные/жёлтые (листва и стволы), — тёплые красные (почва, древесина). Это самая «полная» световая среда среди трёх лесных случаев. Гистограмма показывает максимальную заполненность и разнообразие.

Сравнение структуры Свет и звук в «Лес 3» максимально сходны по структуре: — оба медиума образуют почти непрерывные, богатые текстурой распределения, — нет резких границ и импульсов, — энергия занимает очень широкий диапазон. Это пример насыщенной органической атмосферы, где вибрации распределены равномерно по двум медиумам. Психологическое ощущение асинхронности отсутствует.

Лес: групповой вывод

Три лесных случая показывают постепенное увеличение структурной сложности:

Лес 1 — равномерная мягкая атмосфера

Лес 2 — ритмический свет и штриховой звук

Лес 3 — насыщенное поле без пауз

Общий вывод: Лес — это среда, где свет и звук наиболее взаимосогласованы по принципу организации. Оба медиума ведут себя как пространственно-временные распределённые вибрационные поля, с разной степенью заполненности.

Трасса 1

Original size 3024x4032

Фиксация ситуации.

Трасса 1
2 min

Спектрограмма и гистограмма положения.

Звук Звуковая среда представлена чередованием автомобильных проездов. Спектрограмма демонстрирует: - плотный басовый слой (низкие частоты от дороги) - регулярные вертикальные столбы — всплески энергии при проездах машин - среднечастотный шумовой фон — резонанс дороги, ветер, окружающие звуки Звук здесь — ритмизованная инфраструктурная вибрация. Наблюдается повторяемость, но без жёсткого темпа — поток транспортных событий создаёт «пульсации».

Свет Световая среда «Трасса 1» строится на прямом дневном освещении с выраженной геометрией дороги и инфраструктурных объектов. RGB-гистограмма показывает многофакторную структуру: - сильный пик в светах — облака и яркое небо - большая масса средних тонов — асфальт, обочина, лес - цветовые пики в синем канале — небо - желто-зелёные — отражения от снега/растительности

Это световая среда высокой контрастности и линейной структурированности: перспективные линии дороги усиливают визуальный ритм.

Сравнение структуры Свет и звук совпадают по принципу регулярной событийности: - свет — линейная структурная перспектива дороги - звук — повторяющиеся вертикальные всплески от проездов

Оба медиума демонстрируют «инфраструктурное ритмическое поведение», хотя свет — пространственный, а звук — временной. Здесь видно, как один и тот же феномен (движение транспорта) формирует два независимых, но структурно близких вибрационных поля. Психологическое ощущение асинхронности отсутствует.

Трасса 2

Original size 4032x3024

Фиксация ситуации.

Трасса 2
1 min

Спектрограмма и гистограмма положения.

Звук Спектрограмма демонстрирует один из самых насыщенных звуковых пейзажей среди всех девяти пар: - плотный низкочастотный слой (дорожный бас) - множественные вертикальные всплески в среднем диапазоне - минимальные паузы —инфраструктурные шумы - ворона - голоса

В этом кейсе энергия распределена почти без провалов, но достаточно интересно.

Свет Гистограмма «Трасса 2» имеет выраженные контрастные пики: - яркие области — блики - плотный массив средних тонов — дорожная полоса, автомобили - глубокие тени в нижних каналах

Цветовое распределение смешанное, без доминирования теплоты или холода — это типично нейтральная инфраструктурная сцена. Световое поле здесь более «распиленное» по диапазону из-за множества отражений и сложной геометрии дороги.

Сравнение структуры Свет и звук в «Трасса 2» усиливают друг друга по степени заполненности: - свет — бликовый, многослойный, контрастный - звук — плотный, почти непрерывный

Это пример среды максимальной вибрационной насыщенности в рамках инфраструктуры. Характер поля — «спрессованная» среда, где энергия концентрируется в отдельных точках и временных импульсах. Психологическое ощущение асинхронности отсутствует.

Трасса 3 (ночь)

Original size 4032x3024

Фиксация ситуации.

Трасса 3 (ночь)
1 min

Спектрограмма и гистограмма положения.

Звук Звук «Трасса 3» также характеризуется «островностью»: - плотный низкочастотный фон - редкие, но мощные всплески — проезды отдельных машин - долгие спокойные промежутки между ними

Спектрограмма показывает эти импульсы как высокие вертикальные столбы, выбивающиеся из общего фона.

Свет Гистограмма «Трасса 3» смещена в тёмный диапазон — ночные условия. Выраженные пики в средне-высоких значениях соответствуют фонарям, отражениям, световым пятнам.

Структура света «островная»: - тёмный фон - локальные вспышки высокой оптической энергии

Это типичная картина ночной дороги: контрастные пятна света на фоне темноты.

Сравнение структуры «Трасса 3» демонстрирует уникальную вибрационную синхронность медиумов: - свет — отдельные яркие пятна среди тьмы - звук — отдельные громкие проезды среди тишины

Оба поля имеют контрастную разреженность, что отличает ночную инфраструктурную среду от дневной: здесь не поток, а серия редких событий. Психологическое ощущение асинхронности отсутствует.

Трасса: групповой вывод

Три трассовых кейса формируют последовательную модель вибрационного поведения инфраструктуры:

Трасса 1 — ритм, основанный на регулярных событиях

Трасса 2 — плотная насыщенность и непрерывность

Трасса 3 — разреженность и контрастные вспышки

Вместе они образуют трёхступенчатую шкалу инфраструктурной вибрационной динамики: от ритма к вибрационной перегрузке и к событийной тишине.

Кроссгрупповой анализ

Сопоставление квартиры, леса и трассы показывает, что каждая среда формирует собственную вибрационную структуру, зачастую похоже читаемую и в световых гистограммах, и в звуковых спектрограммах. Паттерны света и звука внутри одной среды совпадают по логике.

Квартира — среда локальных импульсов. Гистограммы показывают отдельные пики бытовых источников света и лучей солнца; спектрограммы, в основном — редкие акустические вспышки (шаги, стуки) на фоне тишины, но при вмешательстве бытовых приборов в квартире синхронность ломается. В основном вибрации неожиданные эпизодические.

Лес — среда равномерного фонового поля. Световые гистограммы плавные, без сильных контрастов; спектрограммы состоят из множества слабых, но постоянных микрошумов. Вибрации распределены, не имеют центрального источника и складываются в непрерывное состояние.

Трасса — среда направленной высокой мощности. Гистограммы фиксируют яркие контрастные пики (фары, фонари, блики), а спектрограммы — сильный низкочастотный фундамент с регулярными всплесками машин. В основном вибрации ритмичны.

Свет и звук в каждом случае подтверждали бы один и тот же характер среды, если не вмешательство человека.

Раздел 5. Выводы.

Проведенный визуальный анализ показывает, что спектрограммы и гистограммы действительно фиксируют структуру общей среды, но делают это со своими ограничениями.

При сравнении трех локаций становится ясно, что свет и звук не совпадают буквально, но корреляции есть, они отражают один и тот же пространственный порядок (в базе, если нарочито его не нарушать звуком динамика или стиральной машинки на кухне или искусственной концертной сценой в лесу). Это говорит о том, что акустические и визуальные поля, порождаемые одной и той же реальностью связаны, но проявляются в разных модальностях.

Данные отчасти подтверждают гипотезу — звук и свет нельзя рассматривать как полностью отдельные каналы. Параллели между ними присутствуют в каждой из трех локаций, но так же есть и ассинхронность из-за фактора недетерминированности (по крайней мере верхнеуровневой) человеческого поведения. Но, в основном, в данной выборке, как всихологической, так и аналитической асинхронности не наблюдалось.

Фактически, гипотеза не подтверждается однозначно. Свет и звук действительно формируют взаимосогласованный вибрационный ландшафт, но это согласование не отменяет разницы медиумов. Между ними нет тождества, но они и не разорваны, они рождены общей средой и разъединены возможностями нашего восприятия, но чем больше между ним пропасть, тем больше возникает психологического диссонанса.

Bibliography
1.

Cox, C. Sonic Flux: Sound, Art, and Metaphysics., (Использованы материалы главы: «Audio/Visual: Against Synesthesia».) (дата обращения: 24.11.2025)

2.

Goodman, S. Sonic Warfare: Sound, Affect, and the Ecology of Fear. Cambridge, MA: MIT Press, 2010. (дата обращения: 24.11.2025)

3.

Kahn, D. On Vibrations: Sound and the Ontology of the Material World. (дата обращения: 24.11.2025)

Image sources
Show
Резонанс восприятия: звуковые и световые ландшафты
We use cookies to improve the operation of the website and to enhance its usability. More detailed information on the use of cookies can be fo...
Show more