В процессе восприятия и реакции на окружающую среду, человек каждый раз попадает в петлю усиливающегося эхо, где свойственная реакция организма вначале, создаёт в последующем необходимость воспринимать мир уже изначально изменённым, дополненным самой реакцией человека.
Это может выражаться как в объективной части, общедоступной, так и части связанной с искаженным, видимым и слышимым самим человеком и только им, являясь проблемой приборов записи сигналов из вне. Уже вторичная реакция на заведомо искаженный сигнал как раз и создаёт подобие эхо, каждый раз реакция на небольшую долю может искажаться, накладываясь уже на искаженную реакцию, похожее на непрерывную речь в пространстве с голыми стенами.
Как пример внутреннего искажение сигнала, приборами записи, чаще остального приводят зрительный нерв на сетчатке глаза, который изначально даёт пустое пятно на воспринимаемой глазом картине видимого. Уже внутри мозг, заклеивает недостающий участок воображаемой средой, схожей со средой окружающей этот участок, грубо говоря мозг не даёт нам увидеть или посмотреть конкретно в эту точку не зрения, перед собой. Также обработке подвергается и всё зрение в целом, мозг переворачивает картину воспринимаемым нашим глазом, уже внутри нашего сознания, изначально прибор записывает всё в перевернутом виде, примерно также как линза и матрица в фотоаппарате.[1]
Подобные и другие особенности только в редких случаях могут создавать неудобства и дискомфорт для человека, в отличии от слухового канала фиксации среды. Слух больше других подвержен наибольшей вариативностью возможных искажений записи среды во время попытки её фиксации человеком, а также больше других уязвим к всякой попытки повлиять на человека из вне. Самым очевидным и интересным негативным влиянии является сердцебиение, а именно последующая реакция на страх, в виде усиления ритма сердца, и идущей после неё реакцией страха на сам факт сильного пульса, что зачастую у некоторых людей может дойти до паники или тахикардии, что случается, как в момент реальной угрозы, так и может произойти в момент случайной, неправильной реакции на искаженную запись самим присутствием человека в пространстве записи.
Целью исследования является анализ и сравнение эндогенных звуков с приёмами и заимствованиями этих звуков внутри саунд дизайна современных медиа. А именно попытка понять, как авторы использует эти приёмы для контроля зрителя, влияния на страх и спокойствие, общее эмоциональное состояние. Отдельным вопросом является раскрытие важности и особенности эндогенных звуков для человека, опыт наблюдения и попытка логически понять природу влияния исходных внутренних звуков на человека.
Сравнение звуков через визуальную призму или в сочетании с визуальными интерпретациями куда богаче и точней описывает опыт слушателя, и позволяет с большой точностью проводить параллели и выстраивать взаимосвязи между эндогенными звуками и способностью внешних звуков подменять их.
Материалом для визуального анализа будут спектрограммы, полученные из медицинских записей звуков работы внутренней среды человека и спектрограммы выбранных клипов из медиа, подходящих на первый взгляд по типу на имитирование биоакустики человека. Спектрограммы будут получены посредством программы Adobe Audition, важным аспектом будет нахождения исходных паттернов в большом слое звуков медиа, отделение по частотам и поиск схожих элементов спектрограме.
Рубрикатор: 1. Специфика и особенности слуха 2. Биоакустика 3. Визуальный анализ спектра
Специфика и особенности слуха
Важно понимать, что в отличии от зрения, которое использует порядка четырнадцати миллионов датчиков в обоих глазах, называемых колбочками и 120 миллионов, называемых палочками, которые преобразуют свет в нервные сигналы для мозга.[1] У слуха есть в распоряжении всего около 30 тысяч слуховых волосков, сигналы на которые проходят через преобразования колебаний двух барабанных перепонок, что значительно меньше и в своём роде является лишь фильтрацией колебания перепонки, а не восприятием всех звуковых волн и плотности звука как воспринимают свет датчики в сетчатке глаза. Подобная разница наблюдается и с количеством рецепторов обоняния, вкуса и осязания.[2]
У человека нет буквальной шторки, которая может отделять, подобно векам глаз, нас от восприятия звука, в крайней форме можно попытаться закрыть уши руками, но это нас не избавит от звука, наоборот всё что происходит внутри нас, будет слышно куда отчётливей.
Shisa kanko (指差喚呼) — японская система предотвращения ошибок, зародившаяся на железных дорогах в начале XX века
В подтверждении того что восприятие в зависимости от поступающих сигналов изменчиво, хорошо говорит пример с экспериментом на железной дороге в Японии. Теория строилась на том, что человеку нужно перед осуществлением действия, показать пальцем на объект взаимодействия, после громко произнести название этого объекта или осуществляемый над ним процесс, и уже после выполнять действие. Данный эксперимент, вылился в общее правило для всё индустрии Японии, так как показал свою эффективность. На восемьдесят пять процентов уменьшилось количество ошибок или так называемого случаев негативного влияния человеческого фактора. Это дополнительно даёт уверенность в тезисе о том, что эндогенные звуки, например, биение сердца, может дополнительно стимулировать человека к ещё большей реакции и фокусировки, как следствие негативное влияние на эмоциональное равновесие человека.[3]
Адоптированный Западный метод под названием pointing and calling
Биоакустика
Помимо звуков сердца, в организме существуют бесчисленные источники внутренних звуков, которые можно классифицировать по пяти пунктам, объединённым в общую систему эндогенной акустики человека или его Биоакустики.
Классификация:
- Дыхательный ритм
- Сосудистые ритмы
- Скрип суставов и мышечный гул
- Ритмы ниже уровня слышимости
- Ритм Сердца
Примеры стетоскопов и микрофонов для сбора звуков лёгких, кишечника и суставов.
Эндогенная канонада звуков как правило воспринимается организмом как белый шум, постепенно исключая всю совокупность звуков из слышимой и ощущаемой части, напротив возвращение чувствительности чётко обозначает важность их для организма, являясь дополнительными маркерами восприятия. Сама ограниченность слуховой системы, вынужденная выстраивать многомерный звуковые внешние сигналы через призму двух входящих каналов, позволяет с помощью внешних средств с лёгкостью обманывать восприятие человека, куда эффективней и проще чем попытка обмана восприятия через зрения человека.
Мы не всегда отдаём четкое представление тому что мы слышим, мы можем легко перепутать внешний источник с внутренним.
Медиа с появления в кино аудиальной части, экспериментировали с сочетанием звука и влияния его на зрителя. Современные же медиа продвинулись в понимании звука и влияние его на человека гораздо дальше. Саунд дизайн сейчас куда чаще пытается не создать у человека прямую реакцию на звук, будь то резко отличающийся от фона импульс или наоборот согласованность и спокойное звучание, а попробовать влиять на него через каналы имитирования и искусственного моделирована внутренних звуков тела, а именно множественное сочетание этих звуков. Подобная методика направлена на прямой обман мозга зрителя и ставит цель направленно погрузить его в состояния психоэмоционального шока, от индуцированной страха и эффекта транса до суггестивного эффекта присутствия.
Визуальный анализ спектра
Спектрограмма первого отрывка из фильма «127 часов» 2010 г. в Adobe Audition
Первыми фрагментами аудиозаписи фильма служат пара отрезков из фильма 2010 года «127 часов». Для всех записей в исследовании, были отобраны моменты, где режиссёр помимо акцента на драматургической части, создаёт многоканальное медиа сопровождение, приоритетом выступали фрагменты где явно были слышны звуки сердцебиения или схожие с ним пульсации, а также фрагменты, создающие особое эмоциональное вовлечение или интерес, посредством аудио. Звуковые дорожки были записана через программу OBS Studio и воспроизводились в программе Adobe Audition, для просмотра спектрограммы.
Визуально анализирую спектрограмму записи и сравнивая её с чистой записи биения сердца, мы сразу можем заметить визуально схожие участки на низких частотах, в наиболее чистом моменте записи, когда другие звуки уходят на время из аудио дорожки, видны идентичные пики двух тактов биения сердца и основной басовой части ударов.
Спектрограмма биение сердца в отрезке из фильма и медицинской записи в Adobe Audition
Используя встроенные инструменты Adobe Audition, можно также технически отфильтровать биение сердца от других звуков, спустившись на нужную частоту, не выше 20 — 300 герц. На большей части записи, также фиксируя пики, параллельно прослушивая аудиодорожку.
Само по себе биение сердца не представляет большого интереса, интерес именно в работе сердца исходит из предположения о том, что автор намерено берёт такт нездорового сердца. Обратившись к набору записей на сайте «Университета Вашингтона Департамента медицины», внутрь программы также были заведены и проанализированы записи при различных отклонениях работы сердца, что интересно одна из аудио дорожек, как и по графику так и по звучанию, больше остальных напоминала фрагмент из фильма, особенность этой записи была болезнь Ранняя стадия аортального стеноза.
Спектрограмма биение сердца в отрезке из фильма и медицинской записи биения сердца с ранней стадией аортального стеноза в Adobe Audition
Нельзя однозначно определить отталкиваясь на собственные ощущения, на сколько сильно такая разница способна придавать больший эффект для слушателя, но как минимум можно резюмировать что современные режиссеры и звукооператоры, прибегают к попытке как минимум использования более сложных записей сердцебиения, вероятной целью чего является увеличение эффекта напряжения для зрителя, попытка создать это внутренние ощущение через подмену биоакустики человека.
Спектрограмма дыхания в отрезке из фильма и медицинской записи естественного дыхания в Adobe Audition
Помимо очевидных ударов сердца, используя фильтрацию спектрограммы, отделяя самые низкие частоты и частоты среднего и верхнего спектра, можно услышать скрытое дыхание персонажа, оно тяжелое, также оно не следует логики сцены, оно нарочно добавлено, как и биение сердца поверх, отчетливо также можно видеть дыхание и на спектрограмме, оно выделяется двумя плавными волновыми пиками, которые находится в частоте выше биения сердца, но ниже частоты голоса.
Спектрограмма бурление в отрезке из фильма и медицинской записи болезненного дыхания при Бронхоэктатической болезни в Adobe Audition
Завершающим акцентом, добавленным звукорежиссёром в данную сцену, служат звуки на первый взгляд не выраженного бурления воды, сравнивая спектрограмм из банка медицинских записей, идентичное звучание удалось найти при записи выдоха и вдоха у человека с Бронхоэктатической болезней, идентичное внутренне бурление, также вызывает ощущение надрывистого и протяжного дыхания, формы спектрограмм которых полностью совпадают.
Спектрограмма второго отрывка из фильма «127 часов» 2010 г. в Adobe Audition
Второй фрагмент аудиозаписи из фильма «127 часов», является интерпретацией биения сердца, адаптированной под мелодию песни. Важно, что пульсация прежде всего работает с эмоциональной составляющей сцены и зрителя, биение замедлено до неестественно спокойного ритма, что полностью гармонирует с драматургией сцены. Разница между ударами составляет около 5 секунд, а разница между двумя пиками самого биения сердца составляет 1 секунду.
Визуальное наблюдение пиков, выстроено в чёткую последовательную цепочку, повторяющегося такта, сам же визуальный характер отдельного удара также состоит из двух пиков, но при этом звукорежиссёр намерено обрезал верхушки, поэтому удары получились намного глубже, чем можно ощущать в реальности, визуально напоминает два пенька, при этом при прослушивании двух дорожек только на низкой частоте, сразу приходит осознание того, что взят изначально именно звук биения сердца.
Такой интересный подход в сравнение с прошлой динамичной и экстремальной частью фильма, как в ощущении, так и в визуальном сравнении спектрограмм, представляет нам разные эмоционально нагруженные по внутреннему восприятию сцены. Пробуя смотреть эти же отрывки без звука, такой разницы в ощущении сцен, нельзя заметить. В большей степени упор был сделан именно на музыку, и она конкретно для примера этого фильма заставляет зрителя как почувствовать себя ближе к герою, так и прочувствовать по-настоящему эмоцию в моменте, полностью находясь под влиянием автора, сделавшим большой упор именно на эндогенную музыку и вариации её использования, зашитой глубоко в общее аудио произведения.
Спектрограмма первого отрывка из фильма «Гравитация» 2013 г. в Adobe Audition
Второй фильм для рассмотрения удостоился 7 статуэток Оскар, самое главное, что фильм получил награду за лучший звук, лучший звуковой монтаж и лучшую музыку. Практически с самого начала, на шестой минуте фильма, нам показывают продолжительную сцену работы космонавтов в открытом космосе, с земли приходят тревожные новости, но пилоты поддерживают вполне эмоционально положительный тон беседы. Большой же контраст создаёт низкочастотный, но при этом довольно заметный гул. Его можно проследить помимо прослушивания, посмотрев на спектрограмму, на низких частотах лежит довольно высокая и непрерывная линия гула, заметно выделенная своей целостностью, среди других объектов спектра. Если мы обратимся к биоакустике организма, подобный гул люди слышат довольно часто, его причиной служит напряжение мышечных волокон, а именно сильней всего звук передаётся от мышц челюстей, так как те расположены вплотную к органам слуха. Всё что нужно для воспроизведения идентичного гула из фильма, находясь в состоянии относительной тишины, нужно сильно сомкнуть челюсть.
Первоначальной реакцией зрителя, без каких-либо объяснений, является тревожность, вызванная ярким диссонансом образа и звука. Не сразу можно заключить, то что гул является воспроизводством понятных для нас звуков, но, когда мы локализуем конкретно механический способ создание звука, а конкретно в примере это сокращение мышц, мы сразу логически понимаем, что бессознательно воспринимаем как ошибку, спокойный образ человека и его сильную напряжённость.
Этот пример, говорит нам как об осознанной работе авторов, так и о том, что эндогенные звуки воспринимаются прежде всего интуитивно, человек в моменте не строит прямые цепочки взаимосвязи, он внутренне чувствует то, что заставил его почувствовать автор, также надо понимать, что проводить параллельно просмотру фильма, исследование о том, как разные приёмы влияют на зрителя, большинство не будет, это контрпродуктивно если задача стоит посмотреть фильм.
Спектрограмма второго отрывка из фильма «Гравитация» 2013 г. в Adobe Audition
Второй отрывок сочетает в себе все прошлые примеры, а именно мышечный гул, ритм сердца, ритм дыхания. Весь отрезок поделён на две части посередине, до и после захода в шаттл космического корабля. Первая часть встречает оглушительным гулом, в этот раз на спектре гул занимает ещё большее пространства рисунка спектра, растягиваясь от самых низких и плотных частот, до частот на уровне дыхания и разговора. Прямое продолжение прошлых сцен, сохраняется подсознательное ощущение напряжения, но усиленно и нарочито понятно зрителю. Другой момент с ритмом сердца и дыханием. Дыхание полностью отсутствует, а сердце бьётся слишком быстро, его ритм практически непрерывный, на спектрограмме четких сигналов как было видно раньше, не наблюдается, всё превратилось в сплошной непрерывный поток.
Первая половина спектрограммы второго отрывка из фильма «Гравитация» 2013 г. в Adobe Audition
Если говорить про механику звука, похожее ощущение или звук можно слышать при сильных головных височных болях, когда каждое биение сердца, сопровождается перегоном крови в сосудах, и с небольшой задержкой сильно ударяет по вискам головы.
Следующая же половина записи, сразу после входа, одновременно кидает нас в ощущение спокойствия и расслабленности, резко уходит гул, дальше он в сцене не появится, на спектрограмме виден чёткий разрыв. А также с спокойствием сердце резко меняет ритм и силу, а дыхание практически заменяет по интенсивности сердце в прошлой половине записи, что опять же вызывает контраст напряжённости и спокойствия, и разной игры с ощущением этого в одной сцене, только посредством звука.
Вторая половина спектрограммы второго отрывка из фильма «Гравитация» 2013 г. в Adobe Audition
Сердце бьётся меньше, на спектрограмме виден привычный умеренный, но при этом беспорядочный узор такта, также на болезненность намекает и сила каждого удара, создаётся даже ощущение, что сердце в определённый момент может не продолжить биться. Дыхание практически без остановки, каждый вздох затяжный и глубокий, признак удушение, передающийся зрителю во всей полноте имитации биоакустических звуков.
Итоги
На чувственном и субъективном опыте, экспериментах внутри себя, эндогенные звуки несут гораздо серьёзную роль, чем на первый взгляд можно предположить, если говорить про объективное доказательство, то на данный момент — это вопрос спорный. В отличии от других каналов восприятия мира, слух имеет действительно в своём ограничении большую уязвимость, чаще можно услышать, что человеку что-то послышалось, чем привиделось. Определённо можно сказать, что на человека можно влиять посредством звука. Помимо этого, в рамках исследования и попытке эмоционально понять влияние имитационных эндогенных звуков на восприятие человека себя в моменте, можно было наблюдать как описание личного опыта подтверждающего эту теорию, так и нахождение ответа в поле эмпирических объективных замеров, положительного и активного использования режиссёрами звука приёмов направленных на частое воспроизводства внутренних звуков человека, с объективной целью создать дополнительную эмоциональную нагрузку, к имеющимся драматургическим ключам повествования. Анализ визуализации звуков, помогает куда быстрей и достоверней определять закономерности и их пересечение.
[1]Adler’s Physiology of the Eye / edited by M. E. Hartnett, P. L. Kaufman, L. A. Levin. — 12th ed. — St. Louis: Elsevier, 2024. — 816 p. — ISBN 978-0-323-83406-3.
[2]Møller, A. R. Hearing: Its Physiology and Pathophysiology / A. R. Møller. — San Diego; London: Academic Press; Elsevier, 2000. — 515 p. — ISBN 978-0-12-504255-0.
[3]The Pointing and Calling Practice / Japan Industrial Safety and Health Association (JISHA). — Tokyo: JISHA, 1997. — 32 p.
Спектрограммы выполнены посредством программы Adobe Audition.
