object tracking sound что это
Samsung QLED 8K: всё о звуковых технологиях в новых телевизорах
Когда говорят о телевизорах, в первую очередь рассуждают о качестве картинки, её чёткости, насыщенности, широком динамическом диапазоне, богатстве цветов, глубине чёрного. Всё это у Samsung QLED 8K есть, но ведь телевизор не только смотрят, но и слушают.
В этом году Samsung представила новое поколение своих телевизоров, особого внимания в которых заслуживают технологии улучшения звука.
Object Tracking Sound+
Так называется новая технология, основанная на использовании искусственного интеллекта. С её помощью телевизор анализирует движение объектов на экране и приводит звук в соответствие с ним. Object Tracking Sound+ доступна в моделях Q950 и Q800T, которые оборудованны шестью динамиками сверху, снизу и с боков.
Благодаря наличию процессора с искусственным интеллектом, алгоритм анализирует сцену и отслеживает движение объекта, после чего в режиме реального времени создает звук, который «движется» за объектом, создавая эффект полного погружения в атмосферу фильма.
Active Voice Amplifier
Название этой технологии дословно переводится как «активный усилитель голоса». Назначение её предельно простое: помочь не пропустить ни одной реплики в фильме или передаче, несмотря на шум и гам вокруг.
Телевизор постоянно отслеживает звуковую обстановку в помещении. Если окружающий шум превысит определенный пороговый уровень, то телевизор начнет постепенно повышать громкость, но не во всём диапазоне частот, а только в той её части, которая соответствует человеческому голосу — от 100 Гц до 4 кГц.
Таким образом, например, уборка квартиры пылесосом не помешает слушать новости. А следуя кулинарному мастер-классу, не придётся ставить его на паузу, пока работает блендер.
Q-Symphony
Это ещё одна новая разработка инженеров лаборатории Samsung Audio Lab. В ней, кстати, работают 20 человек, большинство из которых имеют степень магистра или доктора наук, а многие из них ещё и музыканты, так что звуком они буквально живут и на работе, и в свободное время. Но вернёмся к технологии.
Q-Symphony позволяет использовать саундбар вместе с динамиками телевизора, а не вместо них. Обычно при подключении саундбара собственную акустику ТВ отключают, поскольку в противном случае возникают эхо и искажения звуковой картины.
А вот телевизоры и саундбары с поддержкой Q-Symphony способны не перетягивать одеяло, а действовать в команде. У ТВ продолжают работать боковые и верхние динамики, так что звук сохраняет (и даже усиливает) объёмность и атмосферность.
Теория звука: подробно об аудиотехнологиях в телевизорах Samsung QLED 8K
С появлением телевизоров высокой четкости пользователи все чаще обращают внимание на качество звука, которое является заключительным штрихом для создания ярких впечатлений от домашних развлечений.
Компания Samsung Electronics внедрила искусственный интеллект в телевизоры линейки QLED 8K, чтобы их владельцы могли наслаждаться максимально качественным контентом на большом экране. В новых моделях применяются технологии, которые настраивают воспроизведение звуковой дорожки, отслеживая перемещение объектов на экране, и меняют настройки звука в зависимости от окружающих условий и фоновых шумов.
Качество звучания становится еще выше при подключении саундбара HQ-Q800T, который был удостоен награды CTA 1 «За лучшие инновации» (“Best of Innovation”). При этом динамики в QLED телевизоре работают синхронно со звуковой панелью, что превращает ее в дополнительный аудиоканал и создает более объемный звуковой ландшафт.
Технология Object Tracking Sound: когда звук следует за объектом на экране
В обычных телевизорах звук исходит только снизу экрана (на фото слева), а в QLED 8K 2020 года динамики расположены со всех сторон (на фото справа). Благодаря подобному размещению динамиков, модели QLED 8K обеспечивают объемное звучание.
В телевизорах с обычным дизайном, в которых динамики располагаются только в нижней части устройства, увеличение размера экрана приводит к большему количеству акустических «слепых зон» между точками излучения звука. Например, когда в фильме вертолет пролетает в верхней левой части экрана, звук все равно будет исходить снизу, что приводит к диссонансу между визуальными элементами контента и его звуковым сопровождением.
В сравнении с двухканальным звуком, где динамики располагаются только с левой и правой сторон телевизора, многоканальный звук, как в кинотеатрах, вызывает ощущение реалистичности.
В новых моделях динамики размещаются сзади экрана – так же, как и в кинотеатрах. Это означает, что при перемещении объекта на экране звук будет воспроизводить тот динамик, который расположен прямо за этим объектом, в результате чего звуковое сопровождение будет соответствовать изображению на экране.
Для воссоздания той же динамической реалистичности, что и на экранах кинотеатров, технология Samsung OTS использует все шесть динамиков со всех сторон QLED 8K телевизора, в результате чего звуковое сопровождение полностью совпадает с тем, что происходит на экране, отслеживая перемещения объектов в режиме реального времени.
В OTS также реализована технология 3D-рендеринга, которая автоматически распознает жанр контента и соответствующим образом оптимизирует звуковую дорожку. Любой тип звука, в том числе стерео и 5.1-канальный, будет оптимизирован как многоканальный 3D-звук. Благодаря инновационной технологии пользователям не нужно сидеть непосредственно спереди от экрана, чтобы в полной мере оценить, например, звук летящего вертолета.
AVA: активный усилитель речи и интеллектуальная система обнаружения шума
Технология Active Voice Amplifier (AVA-Активный усилитель речи) позволяет оптимизировать звук в режиме реального времени. Она распознает внешние источники шума и увеличивает громкость голоса на экране, если окружающие шумы становятся слишком громкими. Например, если во время просмотра фильма пользователь включает пылесос, устройство автоматически поднимает громкость звуковой дорожки, чтобы было слышно происходящее на экране.
Эта инновация не только помогает не пропустить важный диалог, но и тщательно анализирует условия окружающего пространства – комнаты, в которой установлен телевизор. Благодаря звуковому датчику в нижней части посередине экрана технология AVA позволяет квантовому процессору менять настройки звука на выходе при обнаружении непрерывного шума в окружающем пространстве, если его уровень выше громкости устройства и длится более 3 секунд.
Отслеживание увеличения уровня шума в окружающем пространстве > Выделение голосовой составляющей в звуковом сигнале > Усиление голоса и увеличение громкости речи > Возврат к прежнему уровню громкости, когда фоновый шум исчезает >
Звуковой сенсор телевизора анализирует сигнал из звуковой дорожки и фоновый звук из окружающего пространства. Затем искусственный интеллект сравнивает уровни громкости этих сигналов. Если внешний звук оказывается громче, чем звуковое сопровождение, то алгоритм избирательно повышает только громкость голоса в звуковой дорожке. При этом он держит громкость остального звука на прежнем уровне, чтобы пользователи могли четко слышать каждое сказанное слово.
Благодаря технологии AVA пользователям больше не придется спешно искать пульт, когда уровень окружающего шума по каким-то причинам внезапно возрастает, и требуется повысить громкость телевизора. Поскольку AVA является единственной существующей телевизионной технологией, позволяющей отслеживать и усиливать одну лишь голосовую составляющую звуковой дорожки, пользователям не придется мириться со слишком громким звуком всего трека, как в обычных телевизорах, когда нужно увеличивать громкость звука из-за шумного окружения. Кроме того, можно с легкостью включить или отключить автоматическую настройку звука AVA в меню настроек.
Все эти аудиоинновации, позволяющие реализовать динамический звук в QLED 8K-моделях 2020 года, избавляют пользователей от неудобств, связанных с настройкой звука телевизора. Технологии Samsung OTS и AVA обеспечивают интеллектуальное трехмерное звучание.
Как достигается реалистичное звучание в QLED 8K 2020 года:
Технология Object Tracking Sound+:
Технология Active Voice Amplifier:
1 Ассоциация потребительских технологий (Consumer Technology Association, CTA)
2 Относится к продуктовым линейкам 2020 года: в 8K QLED реализована технология OTS+, которая использует шесть динамиков, а в 4K QLED моделях (серии Q90, Q80) реализована технология OTS, которая использует в общей сложности четыре динамика сверху и снизу телевизора.
Что такое Object Tracking Sound, Object Tracking Sound pro в телевизорах Samsung
Впервые технология Object Tracking Sound сокращённо OTS была представлена в 2020 году для серии QLED, телевизоров премиум сегмента. Эта технология работает на программном уровне.
Object Tracking Sound — это технология объемного звука в телевизорах Samsung, а именно отслеживание перемещения объектов на экране и сопровождение движения изменением звука. Если сказать просто, то например на экране телевизора показывается фильм в котором есть сцена с автомобилем, автомобиль проезжает справа налево, так вот вы сначала услышите звук справа а по мере перемещения автомобиля по экрану звук будет двигаться вместе с автомобилем.
Object Tracking Sound против Object Tracking Sound+ против Object Tracking Sound pro
Сначала было объявлено о двух модификациях Object Tracking Sound и Object Tracking Sound+, в 2021 году вышла новая версия Object Tracking Sound pro для премиум телевизоров NEO QLED. Отметим, что модификация технологии зависит от класса телевизора.
Как работает Object Tracking Sound
Основная цель этой технологии улучшить звук на телевизоре. Для этого применяются следующие сценарии. Да отметим, что такая технология без +, применена в телевизорах ниже классом с двумя динамиками и сабвуфером.
Как работает Object Tracking Sound +
Object Tracking Sound + используется в телевизорах с большим количеством динамиков, например в телевизоре серии Q800T. Этот телевизор поддерживает 4.2.2 формат звука, 6 динамиков и 2 сабвуфера. Динамики размещены не только снизу но и сбоку и сверху телевизора.Телевизор поддерживает звук формата 5.1 и 7.1 Если демонстрируется видео с звуком формата 5.1 то создаётся объёмный звук, для обработки используются звуковые каналы. Если принимается видео с звуком стерео формата то по алгоритму прописанному в программе дополнительно работают и динамики сбоку и сверху. Так создаётся более объемный звук.
Как работает Object Tracking Sound pro
Object Tracking Sound pro — это модификация для телевизоров 2021 года, скорей всего это тотже Object Tracking Sound +, немного возможно доработанный. Для маркетинга нужно придумать каждый год, что то новое, вот и появилось через год следующее поколение Object Tracking Sound pro
Примечание: Object Tracking Sound работает только на телевизорах с размером экрана более 49 дюймов. На телевизорах маленького размера из-за близкого расположения динамиков эффект объемного звука создать сложно и использование Object Tracking Sound не эффективно. Чем больше экран вашего телевизора, тем лучше будет работать Object Tracking Sound.
Инновационные звуковые технологии QLED 8K: как воссоздать атмосферу кинотеатра у себя дома
Сегодня люди по всему миру смотрят кино дома. Организовать зону для комфортного просмотра фильмов и создать у себя в квартире неповторимую атмосферу настоящего кинозала помогут современные технологии телевизоров QLED 8K 2020 года. Благодаря инновационной звуковой системе пользователи смогут полностью погрузиться в происходящее на экране.
Samsung задает новые стандарты аудио в линейке телевизоров QLED 8K 2020 года. Технология Object Tracking Sound+ использует программное обеспечение на основе AI для согласования движения звука с движением на экране. AVA (Активный усилитель речи) отслеживает уровень шумов в помещении, а Q-Symphony создает более реалистичный, трехмерный звук.
Специалисты по звуку подразделения устройств визуального отображения Samsung Electronics рассказали о широких возможностях инноваций в области аудио, а также о пути к их внедрению.
(Слева направо) Янгтэй Ким (Sound Lab), Чонбэй Ким (Sound Lab), Юнчжан Ли (Sound Device Lab) и Сунмин Ким (Sound Lab)
Object Tracking Sound+: звук, следующий за объектом на экране
Экшн-фильмы с потрясающей звукорежиссурой оставляют яркие впечатления при просмотре в кинотеатрах. Это связано с тем, что практически на всех стенах, вокруг экрана и даже на потолке в кинозалах установлены многоканальные динамики с трехмерным звуком. По сравнению с двухканальным аудио, при котором колонки расположены только слева и справа, многоканальные динамики в кинотеатрах обеспечивают более реалистичные ощущения. Как же воссоздать эту атмосферу дома? Для этого специалисты Samsung разработали технологию Object Tracking Sound +, которая воспроизводит звук через шесть встроенных в телевизор динамиков.
С технологией Object Tracking Sound + звук перемещается по экрану, следуя за объектом в каждой сцене. Когда автомобиль в кадре движется слева направо или тяжелый предмет падает сверху вниз, то же самое происходит и со звуком.
При разработке телевизоров QLED 8K 2020 года инженеры Samsung увеличили количество встроенных динамиков с двух до шести, чтобы звук мог имитировать визуальные действия. «Расположив по две колонки с каждой стороны экрана, а также по одной сверху и снизу, мы обеспечили распространение звука во всех направлениях, – отметил Чонбэй Ким. – Расстояние между двумя основными динамиками было максимально увеличено. Дополнительные динамики были установлены, чтобы максимизировать звук по всем осям, чтобы он был трехмерным. Например, мы разместили динамики в верхней части экрана, чтобы обеспечить движение звука в вертикальном направлении для более захватывающего звучания».
Несмотря на сложность конструкции телевизоров с шестью встроенными динамиками, инженерам удалось сохранить дизайн устройств компактным и тонким.
Чтобы звук точно соответствовал движениям на экране, важно понимать первоначальный замысел создателей контента. «Роль инженера по звуку заключается в создании согласованности между действием на экране и звуковой дорожкой. Это он отвечает за передачу информации о местонахождении звука в конкретном фрагменте видео, – добавил Чонбэй Ким. – Технология Object Tracking Sound+ анализирует информацию о местоположении, содержащуюся в аудиосигналах, в том виде, в котором она была изначально во время микширования. Это означает, что телевизор может эффективно распределять звук между шестью динамиками и различать, находится ли источник аудио в кадре, за его пределами, на переднем плане или вдали».
Технология Active Voice Amplifier (AVA-Активный усилитель речи)
Звуковой датчик, установленный внизу средней части телевизора, воспринимает звук, исходящий как из динамиков устройства, так и из окружающей среды. Затем технология ИИ сравнивает громкость двух типов звука. Если уровень внешнего шума оказывается выше, громкость воспроизводимого контента выборочно увеличивается. «Система не имеет единого определения шума, – объяснил Сунмин Ким. – Она считает таковым все без исключения элементы, которые мешают получать удовольствие от контента. Когда внешние звуки превышают определенный уровень в децибелах, система регистрирует их как шум».
«Система использует AI для поддержания согласованности звуковых эффектов и фонового аудио, а также только для увеличения громкости голосов, – подчеркнул Сунмин Ким. – Наши исследования продемонстрировали, что большая часть контента насыщена диалогами, поэтому мы считаем, что именно эта часть звука наиболее важна для зрителей».
Q – Symphony : создание многомерного звукового ландшафта
Одним из ключевых элементов для достижения реалистичного звука во время воспроизведения контента является трехмерность, которая охватывает как горизонтальные, так и вертикальные характеристики звука. До недавнего времени специалисты по телевизорам и по саундбарам работали над этими параметрами отдельно. С включением верхних боковых динамиков на телевизорах Samsung 2020 QLED 8K, команда разработчиков представила комплексное решение, которое использует возможности как телевизора, так и саундбара. Q-Symphony – уникальная технология, которая позволяет одновременно работать динамикам телевизора и саундбара. Недавно она была отмечена наградой Best of Innovation Award на CES 2020.
«Ключевой элемент этой технологии – специальный алгоритм, который плавно разделяет и гармонизирует звуки между динамиками телевизора и саундбара», – отметил Юнджа Ли.
В процессе разработки возникла проблема качества воспроизведения диалогов. Когда и звуковая панель, и динамики телевизора воспроизводили голоса одновременно, качество звука заметно ухудшалось. Однако специалисты смогли решить эту проблему, отделив основную звуковую дорожкуот всего сигнала и назначив разные дорожки динамикам телевизора и звуковой панели. «В линейке телевизоров Samsung QLED 8K 2020 года речь отделяется от звука. За воспроизведение звуковых эффектов отвечают встроенные динамики, – пояснил Ли. – А саундбар, в свою очередь, отвечает за основную звуковую дорожку, в том числе диалоги. Благодаря этой технологии Q-Symphony использует преимущества как динамиков телевизора, так и саундбара, предоставляя пользователям наилучшее и наиболее гармоничное звучание».
Совместная работа над безупречным аудиоопытом
Янгтэй Ким (слева) и Cунмин Ким представляют инновационные звуковые технологии линейки телевизоров Samsung QLED 8K 2020
Разбираем мощные звуковые технологии в ультратонких телевизорах Samsung Neo QLED 8K
Представим себе, дождливый вечер, все собрались в гостиной, чтобы вместе посмотреть «ужастик», заказали пиццу и придвинули диван поближе к телевизору, чтобы усилить жуткую атмосферу. Что еще может помочь погрузиться в фильм? Конечно, звук!
Функция SpaceFit при каждом включении ТВ проводит анализ пространства, для оптимизации настроек аудио
Пользователи предпочитают смотреть телевизор по-разному: в гостиной, кабинете, спальне, на террасе, сидя или лежа. Поэтому разработчики придумали и реализовали функцию SpaceFit : алгоритмы проверяют изменения в помещении и при необходимости калибруют настройки звука.
Принцип ее работы заключается во встроенном микрофоне, который определяет элементы, оказывающие влияние на звук, например, занавески, ковры или одеяла, как в примере выше. Функциональность меняет настройки, увеличивая громкость в средневысоком диапазоне частот. В результате звук будет не менее качественным, даже если в комнате поменяются тумбочки или добавятся декоративные подушки. Если телевизор придвинут ближе к стене, пространство за ним сократится, что может повлиять на низкочастотные звуки. Устройство заметит это изменение и заранее отрегулирует параметры для большей четкости аудио.
Из-за того, что для создания этой технологии пришлось учитывать так много переменных, инженеры Samsung собрали большую базу данных и проанализировали ее с помощью искусственного интеллекта. Работа устройства была даже протестирована в экстремальных условиях просмотра, в помещениях с подавлением звуковых волн, так называемых «глухих комнатах» и в помещениях с акустическими отражающими панелями. Поэтому Neo QLED ТВ подходят практически для любого пространства.
Object Tracking Sound Pro использует восемь динамиков для воспроизведения трехмерного звука
Аудиотехнологии развиваются параллельно с технологиями отображения, чтобы пользователи получали максимум удовольствия от просмотра.
Для расположения динамика в центральной части телевизора и сохранения эргономики всего устройства в тыльной его части поместили твитер с волноводом. Множество мелких отверстий позволяет обеспечить хорошее распространение звуковых волн от высокочастотного динамика к передней части экрана.
Как расположить несколько динамиков в таком тонком устройстве
Раньше для передачи низкочастотного звука из низкочастотной головки наружу применяли звукопроводы, но такая конструкция может создавать нежелательный шум из-за турбулентности воздуха. Поэтому для моделей 8 K решили использовать “пассивный излучатель”, что позволило добиться глубокого низкочастотного аудио.
Толщина панелей постоянно уменьшается, поэтому разработчики вынуждены адаптировать и компоненты. Например, использовали часть задней крышки телевизора в качестве акустического распределителя, который направляет звук по сторонам и переосмыслили конструкцию щелевого вентиляционного отверстия на задней панели ТВ, которая идет от центрального высокочастотного динамика вниз. Раньше он использовался для теплопередачи, а теперь улучшает акустику за счет регулировки направленности.
Обеспечение глубокого, реалистичного звука
По мере изменения форм-фактора динамиков растет и важность повышающего микширования. Входные каналы становятся разнообразными, а среднее количество динамиков увеличивается до шести-восьми. В общей сложности это дает бесчисленные возможные комбинации входов и выходов. Вместо того чтобы передавать сигнал через восемь динамиков вслепую, важно учитывать характеристики микширования контента и работать с каждым сигналом по отдельности. Уникальная технология Samsung реализует это за счет оптимизированного алгоритма на базе ИИ. Например, при анализе спортивных трансляций особое внимание уделяется передаче гула болельщиков, а для музыки создается стабильное звуковое пространство. Во время просмотра фильмов телевизор анализирует аудио трек, чтобы обеспечить вывод диалога из центра экрана.