A IAMF usa inteligência artificial e tecnologia de aprendizado profundo para analisar cenas e enfatizar certos aspectos do conteúdo, ajustando os níveis de áudio para aprimorar o som durante toda a experiência de visualização.
Pesquisa Samsung
O laboratório de som da Samsung desenvolveu áudio 3D que adiciona um nível mais profundo de imersão às experiências de entretenimento, dando vida a cenas de ação emocionantes e capturando os detalhes mais silenciosos do ruído ambiente.
O áudio 3D nas Smart TVs Samsung permite que os usuários se sintam como se estivessem realmente no meio da ação. Tradicionalmente, instalado em salas de cinema ou estúdios de gravação, o áudio 3D chegou às residências para fornecer uma nova maneira de desfrutar de seu conteúdo favorito.
Por sua vez, a Samsung trabalhou com empresas como o Google, com quem desenvolveu o Immersive Audio Model and Formats (IAMF), uma tecnologia avançada de áudio espacial 3D que foi adotada pela Alliance for Open Media (AOM) em outubro de 2023.
Uma nova maneira de desfrutar de áudio 3D em casa
O ruído ambiente existe em todas as cenas, desde o som de sapatos raspando a calçada até o barulho de carros passando. Embora esse ruído possa parecer desnecessário, é vital adicionar profundidade e um senso de realidade. O áudio 3D combina continuamente o ruído ambiente com conversas e outros efeitos sonoros para criar uma experiência de entretenimento mais vibrante e autêntica.
"O áudio 3D faz você se sentir como se estivesse realmente no centro da ação, ajustando a força, o movimento e a vibração do som. Dessa forma, os espectadores podem desfrutar de um som mais encorpado que captura os aspectos 3D do mundo ao nosso redor", disse WooHyun Nam, da equipe de tecnologia visual da Samsung Research.
A Samsung trabalhou duro com o Google para desenvolver uma solução de áudio que permita aos espectadores experimentar o áudio do conteúdo conforme pretendido. "Se os fabricantes de dispositivos puderem ler dados de áudio 3D, eles poderão ajustar o som em dispositivos de áudio, permitindo experiências de áudio imersivas com alto-falantes de TV padrão ou barras de som em casa. Ao ajustar o áudio para corresponder ao ambiente do dispositivo doméstico, os ouvintes podem experimentar o áudio como o criador pretendia", explica Nam.
Um padrão uniforme é necessário para enviar e receber dados de áudio sem problemas entre criadores e fabricantes de dispositivos. "A experiência da Samsung e do Google em dispositivos e conteúdo tornou as empresas parceiras ideais para criar a tecnologia IAMF. Ao nos unirmos para desenvolver essa tecnologia sem precedentes, estamos abrindo caminho para que os usuários desfrutem de áudio 3D em suas casas", disse JeongHoon Park, vice-presidente executivo e chefe da equipe de tecnologia visual da Samsung Research.
Capacidade de expressar som verticalmente
Os codecs de áudio de código aberto anteriores suportavam apenas a expressão de som horizontal. Com a tecnologia IAMF, o áudio agora pode ser expresso verticalmente para torná-lo cada vez mais multidirecional. O IAMF torna o som mais realista, permitindo que os ouvintes ouçam o áudio na frente, atrás ou em ambos os lados e acima ou abaixo deles. Quando a tecnologia IAMF é aplicada a alto-falantes e barras de som de TV, ela permite que os ouvintes ouçam sons como pássaros voando em suas TVs em casa.
Análise de cena baseada em IA e efeitos de áudio 3D
A IAMF usa inteligência artificial e tecnologia de aprendizado profundo para analisar cenas e enfatizar certos aspectos do conteúdo, ajustando os níveis de áudio para aprimorar o som durante toda a experiência de visualização. Na televisão e no cinema, há certas cenas em que a trilha sonora ou a música de fundo é o foco principal. O FMI equilibra o som nesses casos. Da mesma forma, a tecnologia ajusta o áudio quando há diálogo entre os personagens para permitir que o ouvinte se concentre na conversa.
Além disso, a tecnologia IAMF fornece som ideal, apesar das mudanças no ambiente do dispositivo. Ao ajustar os dados de áudio da análise de cena de acordo com o ambiente do dispositivo, a tecnologia IAMF permite que os ouvintes desfrutem da qualidade de som original do conteúdo.
Áudio altamente personalizado
Os usuários poderão ajustar livremente o som de acordo com suas preferências com a tecnologia IAMF. Esteja você procurando amplificar os efeitos sonoros de uma cena de ação ou aprimorar o diálogo.
