공간까지 배려하는 스페이스핏 사운드

소비자의 시청 공간 분석에도 AI 기술이 활용된다. ‘스페이스핏 사운드(SpaceFit Sound, 공간 맞춤 사운드)’ 기능은 TV 내장 마이크를 통해 TV 재생 음질의 반사음(reflection)을 측정해 TV와 벽과의 거리, 공간의 흡음 특성 등을 분석한다. 이를 토대로 주파수 대역별 부족한 부분을 알맞게 보상하는 과정을 통해 원작자의 의도가 반영된 사운드가 출력되도록 돕는다.

사용자를 배려한 혁신 기술로 업계 최초라는 타이틀도 얻었다. 삼성전자는 스페이스핏 사운드 기능으로 2년전 독일 인증 기관 VDE(Verband Deutscher Elektrotechniker)로부터 ‘공간 최적화 사운드(Spatial Sound Optimization)’ 인증을 받았다.

초연결성으로 더욱 역동적인 사운드 완성, ‘Q-Symphony 3.0’

Q심포니는 TV의 모든 스피커와 사운드바가 동시에 사운드를 구현하는 기능이다. Q심포니의 핵심 포인트는 여러 악기가 협주를 하는 이름처럼 ‘조화’. TV와 사운드가 역할 분담을 해 입체감 있는 음질을 구현한다. 목소리를 포함한 메인 사운드는 사운드바에서만 나오고 TV 스피커는 효과음 위주의 서라운드를 재생한다. 사운드의 명료성을 강조하고 입체감을 구현하기 위해서다.

간단해 보여도 AI 사운드 기술이 모두 집약됐다. 기기가 다르면 소리의 강도와 크기가 달라 소리 레벨의 편차를 동일하게 맞춰야 하고 동시에 소리가 나오도록 시간 차를 정밀하게 조정해야 한다. 소리가 재생되는 타이밍이 어긋나면 동굴에 있는 듯 울리는 소리가 연출되기 때문이다.

세대를 거칠수록 혁신은 더해졌다. TV의 탑 스피커만 사용했던 Q심포니 1세대에 비해 2세대에서는 TV의 모든 스피커를 제어할 수 있게 됐다. 특히 2세대부터는 사운드 분리 기술이 개선돼 모든 스피커를 통해 사운드가 재생되면서 더욱 풍성한 사운드를 구현할 수 있게 됐다.

올해 공개된 Q심포니 3세대는 뉴럴 프로세서에 AI 기반의 실시간 음성 분리 기술이 탑재되며 더욱 고도화됐다. 대사, 배경음, 효과음 등 모든 사운드 객체 분리는 물론 콘텐츠 특성과 사용자 볼륨 설정에 최적화된 사운드 리믹싱이 가능해 원작자가 의도한 대사 명료도와 입체감을 제공한다.

또, 다양한 콘텐츠를 보다 몰입감 있게 경험할 수 있게 됐다. AI 알고리즘이 입력 신호를 분리해 사운드바와 TV의 모든 스피커를 통해 사운드를 재생한다. 2개의 신호도 20여 개로 분리가 가능해 돌비 애트모스(Dolby Atmos)나 5.1 채널 콘텐츠가 아닌 일반 스테레오 콘텐츠도 더욱 실감나게 즐길 수 있다.

화질과 음질, 상생의 시너지

AI가 본격적으로 사운드에 적용되면서 다양한 응용 기능이 개발됐다. TV 안팎의 소리를 분리한 뒤 소음과 화자의 위치에 따라 영상 속 화자의 목소리를 조정하는 ‘액티브 보이스(Active Voice Amplifier)’와 ‘휴먼 트래킹 사운드(Human Tracking Sound)’나 영상 내 물체의 움직임에 따라 입체적 사운드를 구현해 주는 ‘무빙 사운드 Pro (OTSPro)’가 그것.

이때 필요한 AI 기술은 영상을 분석하는 모델과 사운드를 분리하는 모델로 두 기술 뉴럴 프로세서 상에서 동시 동작해 시너지를 낸다. 문제는 뉴럴 프로세서가 음질뿐 아니라 화질과 같은 다른 영역에서도 함께 사용해야 하는 자원이라는 점이다.

이를 위해 삼성전자에서는 매년 각 분야의 개발자들이 모인 협의체를 구성해 어플리케이션의 사양을 공유하고 조정한다. 화질과 음질, 각 기능들이 어느 정도 리소스가 필요한지 확인하고 동작 시점에 서로 영향을 받지 않도록 최적화 작업을 진행한다. 협력이 필요한 좋은 아이디어가 있으면 구체적으로 논의하기도 한다. 공존을 위해 선택한 협의체는 결과적으로 17년 연속 글로벌 TV 판매 1위라는 시너지를 만들어냈다.