Современные методы позиционирования и сжатия звука

Нетрудно заметить, что хотя мы рассмотрели технологию EnvironmentFX

самой последней в статье, она, несомненно самая важная из применяемых на

практике разработок Sensaura.

В видении компании Aureal (Wavetracing)

Для создания полного ощущения погружения в игру, необходимо рассчитать

акустическую среду окружения и ее взаимодействие с источниками звука. По

мере распространения звуковой волны, она ослабляется, т.е. находится под

воздействием среды, в которой она распространяется. При распространении

звуковые волны достигают слушателя различными путями:

Они могут следовать по прямому пути к слушателю (direct path).

Один раз отразившись от объекта (путь первого отраженного звука -- first

order reflected path).

Отраженный дважды (путь вторично отраженного звука -- second order

reflected path) и более раз.

Звуки могут так же проходить сквозь объекты, такие, как вода или стены

(occlusions или звук, прошедший сквозь препятствие).

Алгоритмы обсчета путей распространения звуковых волн (wavetracing)

компании Aureal воспроизводят эффект распространения звука в окружающей

среде; причем это немалая работа с любой точки зрения. В документации с

сайта Aureal алгоритмы wavetracing описываются так:

Технология Wavetracing компании Aureal анализирует геометрию

описывающую трехмерное пространство для определения путей распространения

звуковых волн в режиме реального времени, после того, как они отражаются и

проходят сквозь пассивные акустические объекты в трехмерной окружающей

среде.

Существуют три главных компонента: интерфейс A3D, geometry engine

(геометрический движок, определяющий геометрию объектов в пространстве) и

scene manager (менеджер сцены). Интерфейс A3D является основным

компонентом. Один в отдельности он используется для реализации прямых путей

распространения звука (direct path). Geometry engine является основным

компонетом для обсчета отраженных и прошедших сквозь препятсвия

акустических звуковых волн или для Acoustic Wavetracing. Менеджер сцены

используется как геометрическим движком, так и интерфейсом A3D для

управления сложными звуковыми сценами. Обработка каждого из этих компонетов

будет производиться именно в таком порядке.

Взаимосвязь и функционирование менеджера сцены, геометрического движка

и реализация прямых путей распространения звука показаны ниже:

Прямые пути распространения A3D звука

Реализация прямых путей распространения A3D звука содержит 4

компонента: источник звука (Sound source), окружающая среда, в которой

распространяется звук, слушатель (или приемное устройство) и отраженный

звук с запаздыванием (late reflections).

Источник звука (Sound source)

Источник звука описывается на основе информации о его местоположении,

направленности и угла конуса (угол между лучем слышимости и границей звука,

распространяемого источником). Если источник звука динамичен, т.е.

движется, то применяются дистанционная и допплеровская модели. Для

эффективного распределения ресурсов, источники звука располагаются в

соответствии с приоритетом.

Дистанционная модель: В дистанционной модели определяется масштабный

коэффициент, который контролирует эффективность увеличения количества

источников звука на расстоянии. В результате определяется минимальная

дистанция для начала увеличения количества источников звука и максимальное

расстояние, на котором этот процесс прекращается.

Допплеровская (Doppler) модель: В этой модели определяется скорость

распространения звука, высота звука и масштабы применения эффекта Допплера

(эффект Допплера заключается в том, что при движении источника волны

относительно приемника изменяется длина волны. При приближении источника

звука к приемнику длина волны уменьшается, а при удалении растет на

величину, определяемую по специальной формуле).

Слушатель

Слушатель определяется свойствами, включающими местоположение,

направленность и скорость перемещения.

Окружающая среда

Окружающая среда представляет вещество, окружающее распространяющийся

звук. После начала распространения звуковой волны, она начинает проходить

через окружающую среду, в которой с волной могут происходить разные вещи:

она поглощается воздухом, причем степень поглощения зависит от частоты

волны, наличия ветра (т.е. движения воздуха) и влажности воздуха.

В интерфейсе A3D 2.0 окружающая среда определяется свойствами и

задается особым образом, описанным ниже. Эти переменные окружающей среды

вероятно будут применяться ко всем источникам звука внутри сцены. С

аппаратной точки зрения, чипсет Vortex 2 объединяет атмосферные фильтры

внутри своего блока реализации A3D звука. По всей вероятности, ввод данных,

основанных на переменных окружающей среды осуществляется с применением

фильтров, которые должны имитировать различные изменения звука во время

прохождения через разные атмосферные среды.

Свойства окружающей среды A3D звука

Заранее задаваемые свойства окружающей среды:

Воздух и вода.

Скорость распространения звука.

Высчокочастотное затухание, зависящее от окружающей среды.

Степень затухания звукового сигнала с увеличением расстояния от источника

до приемника.

Звук, отраженный с запаздыванием (Late Reflections)

Использование отраженного звука предоставляет способ точно определить

местоположение источников звука, а так же размер, форму и тип помещения или

окружающей среды, в который мы находимся. Чипсет Vortex 2 имеет возможность

оперировать до 64 трехмерными источниками отраженного звука. Это

осуществляется благодяря использованию геометрического движка, который

моделирует ранние отраженные звуки. Ранние отраженные звуки (early

reflections) относятся к звукам, отраженным в первую очередь.

Запаздывающий отраженный (late order reflections) звуковой сигнал

воспринимается как эхо или реверберация (reverberation). Вот разумное

объяснение этому: человек имеет возможность индивидуально воспринимать

первый отраженный звук, в то время как второй и все последующие отраженные

звуки обычно смешиваются в форму поля запаздывающих отраженнных звуковых

сигналов или просто эхо.

Лучше всего эхо проявляется на очень больших пространствах, когда

требуется большое время для затухания сигнала. Хорошим примером является

медленное перемещение внутри кафедрального собора или большой пещеры, когда

при движении вы слышите долго длящееся эхо. От свойств окружающей среды

зависят параметры, определяющие запаздывающий отраженный сигнал.

Переменные механизма расчета звуков, отраженных с запаздыванием

(reverb):

Варьирование уровней входного и выходного звукового сигнала, отраженного с

запаздыванием.

Предварительная задержка искусственного эха (reverb).

Время затухания запаздывающего отраженного звукового сигнала.

Ясность (четкая различимость) запаздывающего отраженного звука.

В настоящее время нет возможности использовать поле запаздывающего эха,

но такая возможность будет доступна после модернизации драйверов, и,

возможно, будет включена в интерфейсе A3D 2.1.

Механизм построения геометрических фигур в пространстве

Геометрический движок или geometry engine в интерфейсе A3D 2.0 это

уникальный механизм по своей возможности моделирования отраженных и

прошедших сквозь препятствия звуков.

В отличии от менеджера сцены, геометрический движок оперирует с данными

на уровне геометрических примитивов: линий, треугольников и

четырехугольников. Геометрия может быть определена в двумерном или

трехмерном пространстве, соответственно, в случае 3D геометрии, вычисления

могут быть очень интенсивными.

Геометрический движок может быть задействован приложением с помощью

менеджера сцены или напрямую, для полного контроля над описанием путей

распространения волн. В последнем случае, приложение содержит базу данных

звуковой геометрии и передает только необходимые в данный момент звуковые

полигоны в геометрический движок.

Геометрический движок использует полученные звуковые полигоны для

построения системы координат, определяющей взаимное расположение слушателя

и источников звука.

Звуковой полигон (audio polygon) имеет местоположение, размер, форму, а

также свойства материала из которого он сделан. Форма полигона и его

местоположение в пространстве связаны с источниками звука и слушателем,

влияя на определение того, как каждый в отдельности звук отражается или

проходит сквозь полигон. Свойства материала, из которого состоит полигон,

могут изменяться от полностью прозрачного для звуков до полностью

поглощающего или отражающего.

Очень важно иметь минимальную по размерам базу данных акустических

полигонов, что бы минимизировать загрузку CPU. В играх должно быть

задействовано около 50 звуковых полигонов в любой момент времени. Этого

количества достаточно для описания сложной акустики и представления всех

важнейших случаев прохождения звуков сквозь препятствия. Более того,

звуковые полигоны должны быть так же точно определены, как и их эквиваленты

в графике.

Материалы

Каждый раз, когда звук отражается от объекта, материал из которого

сделан объект влияет на то, как сильно поглощается каждый частотный

компонет звуковой волны и как много компонетов отражается обратно в

окружающую среду. Материалы, используемые для звуковых полигонов могут быть

определены в интерфейсе A3D 2.0.

Переменные материалов:

Заранее определенные материалы: дерево, бетон, сталь, ковер.

Отражающие свойства: меняются от полностью отражающих до совсем

неотражающих звуки.

Свойства звуковых преград: меняются от полностью прозрачных до непрозрачных

для звуков.

После ввода всех необходимых данных, геометрический движок вычисляет

ранние отраженные звуки и звуки прошедшие сквозь препятствия, основываясь

на свойствах материалов. Уровень детализации звучания и режим реализации

акустической модели могут быть установлены с помощью геометрического

движка.

Звук прошедший через преграду (occlusions): геометрические алгоритмы

вычисляющие то, как звук преодолевает преграду в виде поверхностей.

Точность и качество реализации могут быть принесены в жертву скорости

вычислений.

Один раз отраженные звуки: вновь, качество реализации может быть

принесено в жертву скорости вычислений.

Менеджер сцены

Менеджер сцены использует высокоуровневую базу данных звуковой

геометрии и управляет звуковыми полигонами, используемыми в сцене.

Приложения создают высокоуровневые объекты, называемые стенами (walls),

проходами (openings) и помещениями (rooms), которые могут быть использованы

в акустической сцене. Обычно, программа загружает сцену и просто вызывает

функцию реализации. Менеджер сцены использует акустическую сцену для

определения соседства помещения (т.е. что смежно с помещением) и уровень

слышимости. Слышны только те звуки, которые распространяются в помещении,

где в данный момент находится слушатель, и звуки в смежных помещениях.

Менеджер сцены определяет необходимые для данной сцены полигоны и

пересылает их геометрическому движку для построения акустической модели.

Примеры высокоуровневых объектов:

Стены: имеют свойства материала из которого они сделаны. Они могут

двигаться и менять ориентацию в пространстве. Не все сцены должны отражать

звук.

Проходы: это отверстия в стенах; звук перемещается от одной стороны стены к

другой стороне. Проходы могут быть открытыми и закрытыми.

Помещение: это пространство, которое со всех сторон полностью окружено

стенами.

Сцена: это набор из помещений.

Менеджер сцены от Aureal описывет пути распространения звуковых волн

для каждого уровня в форме упрощенных полигонов.

Использование технологии Wavetracing в играх

Реализация wavetracing весьма сложна. Существуют простые

высокоуровневые способы доступа (через менеджер сцены и загрузчик сцены)

для людей, которым нужен быстрый результат. Дополнительно, доступно

управление на низком уровне для разработчиков, которые хотят "сделать

акустику действительно ошеломляющей, т.е. совершенно на новом уровне".

Быстрый и простой способ расчета путей распространения звуковых волн

Быстрый и грубый способо добиться этого, это использовать менеджер

сцены. По мнению Скипа Макилвейна (Skip McIlvaine) из Aureal, база данных

графической геометрии может быть пропущена через конвертер, который

преобразует все необходимые графические полигоны в звуковые полигоны за

время загрузки уровня игры. Глобальные значения могут быть установлены для

параметров объектов отражающих и препятствующих звуку. Кроме того, возможно

произвести обработку базы данных графической геометрии заранее, прогнав

алгоритм преобразования полигонов и храня базу данных звуковой геометрии в

качестве отдельного файла-карты и подгружать этот файл во время загрузки

уровня игры.

Тонкая регулировка wavetracing

Существует несколько способов, с помощью которых разработчик звукового

оформления может тонко регулировать пути распространения звуковых волн для

достижения лушей производительности и эффекта реалистичности:

Индивидуально выбирать толщину стен и материал, из которого они сделаны.

Заранее подготовить установки эха (reverb) для помещений.

Оптимизировать акустическую геометрию с целью использования минимального

набора полигонов.

Законченная картина

Результатом является последний шаг в сторону истинного реализма

создаваемого звука: комбинация из 3D позиционируемого звука, акустики

помещений и окружающей среды и точное представление звуковых сигналов для

слушателя. Моделирование окружающей среды, реализованное Aureal, не имеет

аналогов, даже EAX от Creative Labs не может сравниться по набору

предоставляемых возможностей. Тем не менее, технология EAX более проста в

реализации и меньше загружает CPU.

Технология Wavetracing не является быстро реализуемым эффектом, который

может быть добавлен и так же легко использован, как запаздавшая мысль.

Необходимо серьезное планирование перед реализацией. Первые несколько игр,

которые будут использовать Wavetracing, возможно будут использовать все

преимущества лишь на 50% от всего имеющегося потенциала. Но даже при этом,

эти игры будут самыми передовыми, чем все остальные, созданные до них.

Первые игры, сделанные с использованием технологии Wavetracing, появились

уже в 1999 году. Они были поистине ошеломляющими. В любом случае, A3D 2.0 и

Wavetracing были разработаны чтобы стать основными 3D технологиями, которые

могут быть использованы всеми разработчиками, т.е. нечто вроде OpenGL для

звука.

Печально, что такой перспективной наработке придется пропасть, либо

исчезнуть в недрах конкурента. Недавно фирма Aureal. Ее тут же попытался

купить основной конкурент – Creative Labs, но эта сделка по определенным

причинам не состоялась. Дальнейшее будущее компании неизвестно. Будем

надеяться, что потенциал инженеров и разработчиков не пропадет даром, благо

опыт перерождения у них уже есть: в свое время с рынка исчезла достаточно

известная компания Media Vision, а родилась – Aureal.

В видении компании EAR

Что такое Interactive Around-Sound (IAS)?

Проще говоря, IAS это новый звуковой движок (audio engine), который

дает возможность на всех компьютерах (при наличии минимум Windows95 и

DirectX5) создавать одинаковое 3D звучание вне зависимости от того, какое

аппаратное обеспечение для воспроизведения и создания звука используется.

Главный козырь IAS это поддержка воспроизведения звука на более чем через

две акустические колонки (т.е. поддержка multi-point технологии

воспроизведения звука).

IAS это тоже самое что и A3D или EAX?

Нет. IAS разработана с целью заменить A3D и EAX там, где имеется

возможность воспроизведения звука через более чем две колонки, так как EAR

считает, что A3D 1.0 и EAX 1.0 не могут полноценно использовать множество

акустических колонок.

Будет ли IAS работать совместно с A3D или EAX?

Да. IAS поддерживает обе технологии A3D и EAX, создающие виртуальный 3D

звук (т.е. трехмерный звук через две колонки).

Преимущества при использовании IAS вместо A3D или EAX

IAS не требует наличия специального аппаратного обеспечения. IAS

обеспечит то звучание звука, которое заложено разработчиком приложения вне

зависимости от того, какая звуковая карта используется. Это означает, что

приложение созданное с помощью IAS будет воспроизводить звук при

использовании звуковых картах от Guillemot, Diamond и ряда других, так же,

как и при воспроизведении через Dolby, DTS и MP3 декодеры без необходимости

какой-либо перекомпиляции. Кроме того, IAS может воспроизводить звук через

две колонки (Phantom IAS), соответствующим образом накладывая звуковые

каналы, если только такой вариант внешней акустики доступен. Это позволяет

любому пользователю слушать 3D звук, создаваемый IAS движков независимо от

аппаратного обеспечения, которое есть в наличии. Тот же интерфейс Phantom

IAS позволяет получить 3D звук на системах не оснащенных аппаратным

акселератором.

Microsoft не имеет стандарта на воспроизведение

DirectSoun/DirectSound3D звука на более чем две колонки. Различные

производители звуковых карт используют свои собственные алгоритмы

воспроизведения DirectSound3D звука, причем расчет того, какой звук будет

воспроизводиться из каждой колонки перекладывается на CPU. При этом каждый

производитель использует собственную технику и в результате, одна и та же

игра будет звучать по-разному на разных звуковых картах. Использование IAS

устраняет эту проблему.

IAS работает на любой звуковой карте, которая работает через DirectX5.

Некоторым звуковым картам требуется дополнительное программное обеспечение

для того, чтобы была возможность использования более двух колонок при

воспроизведении звука.

Заключив партнерское соглашение с Creative Labs, EAR теперь

поддерживает все доступное в настоящее время аппаратное обеспечение от

Creative, имеющее возможность воспроизводить звук через более чем две

колонки.

Будет ли IAS работать с любой игрой?

Нет, игра должна быть написана с учетом поддержки звукового движка.

Все, что использует DirectSound или работает под Windows95 можно

портировать, т.е. встроить поддержку IAS.

Как работает IAS?

IAS использует систему наложения координат, которая интерполирует

местоположение звукового события и конвертирует это местоположение с

определенным уровнем затухания звука для каждой акустической колонки при

заключительном микшировании. Независимо от того, как много колонок

подключено один и тот же код используется для каждого варианта, а это

означает, что звуковой движок очень мал и компактен по размерам, но при

этом поддерживает множество разных аппаратных конфигураций. Этот "напиши

один раз, исполняй потом везде" код делает решение от IAS очень

привлекательным для разработчиков, многие из которых используют IAS и для

интерактивных и для не интерактивных приложений.

Есть два аспекта индустрии персональных компьютеров, с которыми

напрямую сталкивается пользователь: видео и звук. При оценке качества игры

пользователь, прежде всего, смотрит на то, насколько реалистичны

графические и звуковые эффекты, а не то, насколько быстро данные

перекачиваются с CD или жесткого диска. Наряду с ростом вычислительной

мощности процессоров для PC и емкости носителей информации, особое внимание

всегда уделяется увеличению производительности видео акселераторов и

скорости перекачки данных с CD/DVD/HDD, в то время как на долю звука

остаются лишь избытки ресурсов. При такой философии разработчиков, развитие

компьютерного звука долгое время оставалось на уровне стерео решений

(воспроизведение через две акустические колонки). Еще год назад, широкое

распространение получила технология воспроизведения 3D звук через две

колонки с использованием алгоритмов HRTF, IAD, ITD и т.д.

К несчастью, для воспроизведения 3D звука требуется больше, чем просто

алгоритмов создания эффекта окружающего звука (surround sound).

Человеческое ухо может определять движение только при высокой частоте

(около 10000 Гц). Однако типичная частота дискретизации, используемая при

создании HRTF эффектов, находится ниже этого порога (частота дискретизации

11.025 kHz может обеспечить частоту звучания только на уровне 5000 Гц), что

заставляет уши реагировать на другие звуковые компоненты для определения

истинного положения источника звука. Из одиннадцати звуковых компонентов,

используемых мозгом для определения местоположения звукового события,

только до трех (включительно) моделируются в современных звуковых решениях.

Это означает, что многие пользователи просто не услышат никаких 3D звуковых

эффектов.

Есть два способа решения этой звуковой проблемы. Первый относится к

управлению распределением ресурсов частоты дискретизации с целью сделать

соответствующие частоты доступными для использования, чтобы помочь

пользователю слышать эффекты 3D звука. Второй способ заключается в

утверждение стандарта на использования тыловых колонок сзади пользователя

для PC платформы. Так как управление ресурсами может быть реализовано в

хорошем звуковом движке (например, IAS), главная забота это убедить

пользователей в том, что использование "более двух акустических колонок"

для воспроизведения звука это норма. Эта забота существенно упростилась с

появлением звуковых карт, поддерживающих воспроизведение через четыре

колонки и всевозможных компьютерных устройств и приставок (set-top-box,

Living Room PC), рассчитанных на воспроизведение окружающего звука

(surround sound) и даже AC-3.

Компания Extreme Audio Reality, Inc. (EAR) работает с разработчиками и

производителями аппаратного обеспечения с целью достичь высококачественного

звучания с учетом использования имеющихся ограниченных ресурсов.

Результатом этого сотрудничество стало создание технологии Interactive

Around-Sound (IAS), запатентованной техники для реализации воспроизведения

3D звука на всех доступных платформах. IAS позволяет разработчикам "write

once, run anywhere" (написав один раз, запускать везде) получая трехмерный

звук на любой платформе, путем определения какое аппаратное обеспечение

доступно для использования. IAS была разработана для создания

высококачественного, действительно интерактивного 3D звука без ущерба

производительности всей системы в игре, т.е. получив 3D звук, вы не

потеряете значений fps.

"Напиши и запускай"

Главная забота для разработчиков игр состоит в предоставлении

пользователю высококачественного продукта с реалистичной графикой и звуком.

Microsoft предлагает разработчикам использовать набор интерфейсов DirectX,

в который входят API для создания видео и звука для игр. Однако, в DirectX

уделяется слишком много внимания совместимости со старым аппаратным

обеспечением и слишком мало современным технологиям, в результате чего

разработчики получают неэффективное средство создания настоящего 3D звука

(с каждой новой версией DirectX ситуация улучшается, но происходит это

очень медленно). IAS была разработана для управления всеми звуковыми

ресурсами необходимыми дизайнеру звука и включает в себя поддержку

DirectSound, DirectSound3D и других реализаций surround sound. В результате

программист может потратить больше времени на создание реалистичного

взаимодействия с 3D звуком и меньше заботиться о буферизации, распределении

потоков и совместимости с аппаратным обеспечением.

Любой дизайнер звука, который работал с DirectSound от Microsoft,

знает, что имеется много мест, в которых можно улучшить то, как DS

управляет звуком. Эти разработчики высоко оценят IAS, если встроят его

звуковой движок в свою игру. EAR создала IAS для работы совместно с

DirectSound, поэтому при использовании IAS корректируются многие недостатки

DirectSound и в результате получается высококачественное звучание.

На уровне интерфейса IAS обеспечивает по настоящему раздельное,

динамичное определение местоположения звуковых событий:

Распределение ресурсов и управление буферизацией/потоками происходит

автоматически

Все вычисления, связанные с расположением источников 3D звука в

пространстве и расчет скорости распространения звука осуществляются

автоматически

Автоматически вычисляются эффект Допплера, высота, удаленность, время

задержки для звуков и другие управляющие факторы

Любое звуковое событие можно разрешить или запретить для воспроизведения

Все звуковые события полностью независимы от других звуковых событий

Плюс ко всему, звуковой движок автоматически конфигурирует выходные

звуковые потоки с целью использовать все преимущества решений 3D звука:

Специализированные звуковые карты, имеющие выход на тыловые колонки (т.е.

поддерживающие воспроизведение через четыре колонки), поддерживаются в

первую очередь. Через такие звуковые карты обеспечивается воспроизведение

настоящего интерактивного surround звука.

При наличии внешних декодеров, выходные потоки автоматически кодируется,

для воспроизведения звука через системы Dolby Pro-Logic, AC-3, DTS и т.д.

Решения типа SRS, Q3D и A3D поддерживаются на уровне интерфейса DirectSound

При использовании звуковых карт, поддерживающих воспроизведение только

через две колонки, реализована полная совместимость с DirectSound3D

Разработчику надо лишь один раз написать звуковой код, так как все

звуковой аппаратное обеспечение, рассчитанное на Windows95/98

поддерживается через одинаковый интерфейс программирования. После чего игра

будет звучать на любой звуковой карте, работающей через DirectX.

"Нужно услышать, чтобы поверить"

IAS от EAR имеет много преимуществ по сравнению с другими звуковыми

решениями. Накладные расходы при использовании IAS очень маленькие, при

этом звуковой движок всегда обеспечивает пользователю наилучшее звучание

для доступной конфигурации. Технология IAS создавалась с целью быть вперед

совместимой. Это означает, что разработчики, используя звуковой движок IAS

при написании игр для сегодняшнего аппаратного обеспечения, могут быть

уверены, что завтра, когда появится новое аппаратное обеспечение, звучание

в игре все равно будет таким, каким оно задумывалось.

IAS создавалась и тестировалась людьми, чей опыт в качестве звуковых

инженеров существенно превосходит их опыт работы в качестве компьютерных

программистов. Это означает, что основное внимание было уделено на переносе

работы на управление ресурсами, чтобы обеспечить наивысшее качество

звучания на доступной системе, а не на попытке обеспечить низкокачественно

звучание на "приемлемом" уровне. Плюс ко всему, основной упор был сделан на

создание 3D звучания в играх. Звуковой движок был создан с целью

воспроизведения истинного интерактивного "around-sound" (окружающего звука)

через четыре или более акустических колонок, с возможностью воспроизведения

через две колонки при необходимости. IAS уже сейчас поддерживает PC

будущего, но при этом прекрасно работает на современных системах.

Кроме поддержки современных мультимедиа PC, EAR уделяет внимание

новейшим Интернет технологиям (VRML, Indeo и т.д.), так что игры, созданные

с использованием IAS автоматически совместимы с сетевыми вариантами. EAR

поддерживает MIDI, DLS, S/P DIF, IEEE1395, USB и многие другие цифровые

технологии передачи данных, что дает возможность разработчикам игр

полностью использовать сегодняшние и завтрашние звуковые системы. Наш SDK

обеспечивает полностью интуитивную возможность встраивания IAS в игру с

помощью простых программ, которые могут помочь разработчику скомпилировать

свое первое IAS приложение менее чем за десять минут.

Доступна техническая поддержка, чтобы помочь легко интегрировать

технологию EAR в приложение.

Особенно важно то, что нет необходимости использовать другой звуковой

движок в игре; IAS работает на любом существующем или будущем аппаратном

обеспечении для 3D звука.

В видении компании Creative

EAX это API для создания звучания окружающей среды, созданный Creative.

Цель EAX помочь разработчикам игр создавать ощущение реальности

происходящего действия в игре с помощью звука. EAX это расширение DS3D,

звукового API от Microsoft, являющегося частью среды для программистов

DirectX. Оба интерфейса дополняют друг друга.

DS3D управляет позиционированием источников звука и ориентированием

слушателя в виртуальном 3D пространстве игры. Например, разработчик может

использовать DS3D для создания независимых источников звука для каждого

персонажа в FPS игре, обеспечивая их различными голосами и звуками оружия с

ясно различимой принадлежностью каждому персонажу. Эти источники звука

могут перемещаться в 3D пространстве, также как и слушатель (игрок),

который слышит звук. Разработчик игры может использовать DS3D для

управления источниками звука, изменяя такие нюансы, как характер

направленности (источник может распространять более громкий звук в одном

направлении) и действие эффекта Допплера (увеличение высоты тональности при

приближении источника звука к слушателю и снижение тональности при

удалении).

EAX расширяет возможности DS3D за счет создания мира вокруг источников

звука и слушателя - т.н. виртуальную звуковую среду окружения. Эта звуковая

среда создается за счет моделирования отражения звуков и реверберации,

исходящих со всех сторон от слушателя. Волны отраженных звуков и

реверберация, достигая слушателя, дают ему возможность составить

представление о природе окружающей его среды - размерах помещения,

отражающих свойств стен и многое другое. Разработчики могут использовать

EAX для простой установки различных типов свойств акустики для разных

помещений и мест в игре. Например, играя в игру, поддерживающую EAX, игрок

может слышать, как изменяется акустика при переходе их коридора в пещеру.

В дополнение к созданию звуковой окружающей среды, EAX 1.0 может также,

внутри звуковой окружающей среды значительно усилить ощущения восприятия

расстояния до различных источников звука: интерфейс автоматически

подстраивает индивидуальные параметры источников реверберации, когда каждый

источник звука изменяет свое местоположение в пространстве, т.е. расстояние

до слушателя изменяется. При этом EAX находится в стадии развития: в

следующей версии (EAX 2.0) будет сделан значительный шаг вперед с целью

улучшения интерфейса программирования и акустической модели используемой

для создания звуковой окружающей среды.

С точки зрения поддержки в приложениях аппаратного обеспечения от

Creative и Emu, существует нечто большее. "Presets" (заранее сделанные

установки EAX) в линейке звуковых карт Creative SB Live! дают возможность

пользователю добавлять эффекты звука окружающей среды в самые популярные

старые игры. Плюс к этому, аппаратное обеспечение Creative и Emu также

поддерживает позиционирование источников звука в 3D пространстве, то, что

используется любой игрой, написанной под DS3D.

EAX предоставляет очень эффективный интерфейс программирования, который

очень интуитивен в использовании. Он предоставляет три различных типа

управления:

1. Обширный выбор заранее сделанных установок звучаний окружающей среды

("presets"), который дает возможность очень просто выбрать требуемый

тип окружающей акустики.

2. Набор параметров интерфейса, которые дают возможность делать

собственные настройки для заранее установленной акустики окружающей

среды, применяется к любому индивидуальному источнику звука или ко

всем источникам звука одновременно.

3. Автоматическое изменение важнейших параметров в зависимости от

местоположения источников звука. Когда источники звука двигаются

относительно слушателя, EAX автоматически моделирует естественное

поведение реверберации и отраженных звуков с целью улучшить восприятие

того, что источник звука удаляется или приближается и правильного

воспроизведения процесса перемещения источников звуков в акустической

окружающей среде.

В результате продолжающихся разработок, в EAX будет добавляться больше

возможностей по управлению акустикой окружающей среды, с целью обеспечить

слушателю более богатые ощущения. Все улучшения, которые будут введены,

можно разделить на две категории:

1. Расширенное управление акустикой окружающей среды. Программист может

изменять размеры помещения и манипулировать параметрами ранних

отраженных звуков отдельно от затухающей реверберации с запаздыванием.

Это позволяет разработчикам создавать реалистичные и полные модели

широкого диапазона акустики окружающей среды, начиная от полуоткрытых

пространств (например, городской двор, улица и т.д.) и заканчивая

узким коридором или маленьким тесным кабинетом.

2. Добавление эффектов окклюзии и обструкции и управления за ранними

отраженными звуками для каждого источника звука. Эти эффекты или

отраженные звуки могут подчиняться или не подчиняться правилам

графического/физического описания виртуального мира - все зависит от

мнения программиста, от его или ее виденья того, что нужно в игре и от

эмоционального воздействия, которое должна оказывать игра.

Окклюзии и обструкции, как они улучшают ощущения от игр

EAX окклюзии (occlusions - звуки, проходящие через препятствия)

применяются для моделирования источников звука, расположенных в другом

помещении или в пространстве с другой стороны стены. Окклюзии имеют

свойства, при изменении параметров которых меняются характеристики

звукового сигнала, проходящего сквозь препятствия, в результате

моделируются различные типы стен, состоящие из разных материалов и имеющие

различную толщину. Например, если слушатель находится внутри дома, т.е. в

помещении, а источник звука находится снаружи, тогда приложение может

использовать свойства окклюзии для воспроизведения реалистичного звучания

голоса или шума, так если бы они действительно слышались из-за двери или

снаружи дома, в котором находится слушатель.

Использование свойств обструкции (obstruction, звук задерживается

препятствием) позволяет моделировать дифракцию звука препятствием для

создания ощущения, что источник звука находится в той же окружающей среде,

что и слушатель, но закрыт от слушателя преградой. Возвращаясь к

предыдущему примеру, использование свойства обструкции может сделать

звучание голоса таким, будто его источник расположен за большой колонной в

Страницы: 1, 2, 3, 4, 5, 6, 7, 8, 9, 10, 11, 12, 13, 14