15.11.2023

IAMF — революция в пространственном звуке от Samsung и Google

Samsung рассказала о разработанной совместными усилиями с Google технологии IAMF (Immersive Audio Model and Formats), которая, уверены создатели, произведёт революцию в области домашнего трёхмерного звука. Технология является бесплатной и открытой. Очевидно, IAMF может оказаться серьезным конкурентом популярному запатентованному стандарту Dolby Atmos.

Трёхмерный звук в традиционном исполнении призван обеспечить эффект присутствия, но технологические ограничения не всегда позволяют внедрять его, используя стандартное оборудование — встроенные динамики телевизоров и звуковые панели. Их неспособность точно интерпретировать информацию 3D-аудио в цифровом потоке оставляла слушателя с недостаточно полной звуковой картиной. IAMF направлена на решение этой задачи — она помогает в интерпретации данных пространственного звука даже на стандартном оборудовании.

Технология предполагает анализ звуковой картины при помощи алгоритмов искусственного интеллекта и его корректировку на выходе — звук становится направленным, а слушатель начинает воспринимать его под разными углами: спереди, сзади, слева, справа, сверху и снизу. К примеру, можно будет услышать пролёт птицы над головой одновременно с её движением на экране.
Анализ звуковой сцены при помощи алгоритмов глубокого обучения помогает подчеркнуть важные компоненты общего звукового потока, разделяя музыку, фоновые шумы и диалоги персонажей. В результате IAMF позволяет пользователям настраивать вывод звука в соответствии с собственными предпочтениями, повышая громкость отдельно, например, звуковых эффектов или диалогов.

Технологии IAMF присвоен статус открытого стандарта в соответствии с требованиями Open Media Consortium — организации, ответственной, в частности, за открытый кодек AV1. Это значит, что его могут свободно внедрять все игроки отрасли. Samsung, в частности, не собирается ограничивать сферу применения IAMF домашними кинотеатрами — технология будет поддерживаться и её смартфонами.

Источники:  Samsung Newsroom , Sparrowsnews , 3DNews

Павел Котов