Пока часть разработчиков думает, что достаточно освоить пару туториалов Unity — и можно смело называться VR-разработчиком, на практике хороший опыт погружения получается в результате сочетания многих факторов (картинка, размытие, фокус, управление, движение, и т.п.), в числе которых звук - играет большую роль, чем может показаться (попробуйте плотными наушниками или бирушами закрыть уши и походить так полчасика в реальном пространстве, если сомневаетесь). В объемный звук в наушниках сейчас идут большие вложения - из свежих анонсов - Dolbi Atmos и Windows Sonic. В Hololens (Windows Holographic) распределенный в пространстве звук - одна из ключевых отличительных возможностей. Вот и в Valve озаботились распределенным пространственным звуком для VR и выпустили Steam Audio Kit: https://www.engadget.com/2017/02/25/steam-audio/ #vr #mr #spatial #sound

Про аудио-измерение AR/MR/VR. Я уже несколько раз писал о том, что spatial audio (пространственный звук) в опыте погружения в любую реальность не менее важно, чем видео канал. Вот еще один взгляд на это от Bilboard в контексте запуска Pixel Buds от Google. По началу может показаться, что речь идет просто о более удобном формфакторе: сделали вкладыши беспроводными, значит не нужно путаться в проводах, плюс получили "цифровой" звук по bluetooth. Но тут же оказывается, что в дополнение идет подавление звука (noise canceling), позволяющее в нужной пропорции фильтровать или смешивать внешние и подаваемые звуки, плюс микрофон для общения. И вот в этом миксе появляются фантастические (ранее) идеи о том, что можно "дополнять" или изменять звуковую картину вокруг. Хотите слышать шумы, но чуть потише? Пожалуйста. Хотите отфильтровать в метро звук колес? Давайте попробуем. Хотите смешать звук на концерте с более "чистым" звучанием? Почему бы и нет. Сюда же все идеи перевода на лету, подстройки музыки под ритм бега и т.п. Большая тема, в общем! :) www.billboard.com/articles/business/7998347/how-augmented-reality-audio-soundtrack-your-life #ar #mr #vr #audio #spatial

Небольшая важная новость. Я как-то пропустил, а оказывается HTC Vive анонсировала 3DSP audio SDK для работы с пространственным звуком. Внутри много облегчающего жизнь рабработчиков VR (если, конечно, вы хотите создать по-настоящему погружающий опыт ;).

https://www.vrfocus.com/2018/06/htc-vive-introduce-spatial-audio-sdk/

#vr #spatial #audio