AI 노이즈 캔슬링 헤드폰으로 듣는 소리를 선택하세요

워싱턴 대학교 연구진들이 AI 노이즈 캔슬링 헤드폰에 대한 혁신적인 접근 방식을 도입하여 착용자가 청각 경험을 실시간으로 큐레이션할 수 있게 된 획기적인 발전이 있었습니다. '시맨틱 히어링(Semantic Hearing)'이라 명명된 이 시스템은 딥러닝 알고리즘을 활용하여 사이렌, 아기 울음소리, 대화, 새 지저귐 등 다양한 옵션 중 특정 소리를 선택할 수 있는 전례 없는 능력을 사용자에게 제공합니다.

시맨틱 히어링의 탄생 – 오디오 기술의 게임 체인저

워싱턴 대학교 연구진은 노이즈 캔슬링 기술을 정교화하기 위해 '시맨틱 히어링' 개념을 발표했습니다. 환경 소리를 무차별적으로 차단하는 기존 노이즈 캔슬링 헤드폰과 달리, 이 혁신적인 시스템은 사용자가 자신의 청각 환경을 통제할 수 있도록 합니다. 헤드폰은 캡처된 오디오를 연결된 스마트폰으로 원활하게 스트리밍하며, 스마트폰은 고급 알고리즘을 통해 모든 주변 소음을 제거합니다. 

이로써 사용자는 음성 명령이나 전용 스마트폰 앱을 통해 20개의 서로 다른 클래스 중 소리를 선택할 수 있게 됩니다. 사이렌의 비명부터 새 지저귐의 차분한 소리까지, 착용자는 이제 자신의 선호도에 따라 청각 환경을 맞춤 설정할 수 있습니다. 선택된 소리만 헤드폰을 통해 전달되어 개인화된 몰입감 있는 오디오 경험을 제공합니다.

Paul G. Allen 컴퓨터과학공학과 교수인 수석 저자 Shyam Gollakota는 실시간 인텔리전스가 이 과정에서 갖는 중요성을 강조합니다. Shyam Gollakota는 환경에서 특정 소리를 식별하는 데 있어 실시간 인텔리전스의 과제를 강조하며, 현대의 노이즈 캔슬링 헤드폰은 이 능력을 달성하는 데 미흡하다고 언급했습니다(출처). 과제는 소리를 시각적 자극과 동기화하는 데 있으며, 이는 100분의 1초 이내에 소리를 처리하는 신경 알고리즘을 요구합니다.

이러한 시간 제약으로 인해 시맨틱 히어링 시스템은 더 강력한 클라우드 서버에 의존하기보다 연결된 스마트폰에서 소리를 처리합니다. 또한 착용자가 환경을 의미 있게 지각할 수 있도록 다양한 방향에서 오는 소리와 관련된 지연 시간 및 공간 단서를 보존해야 합니다. 

사무실, 거리, 공원 등 다양한 환경에서 테스트된 이 시스템은 사이렌, 새 지저귐, 알람과 같은 목표 소리를 추출하고 다른 모든 원치 않는 소음을 효과적으로 제거하는 능력을 입증했습니다. 참가자들의 피드백은 원래 녹음본과 비교하여 전반적인 음질 향상을 보여주었으며, 이는 노이즈 캔슬링 기술에서 유망한 도약을 의미합니다.

시맨틱 히어링 경험 정교화

시맨틱 히어링 시스템이 오디오 기술에서 중요한 도약을 이루었음에도 불구하고, 연구진은 보컬 음악과 인간 음성처럼 유사한 특성을 가진 소리들을 구별하는 데 있어 과제가 있음을 인정합니다. 시스템이 어려움을 겪었던 사례들은 그 능력을 향상시키기 위해 다양한 실제 세계 데이터에 대한 추가 훈련이 필요함을 보여줍니다. 

UW 박사 과정 학생인 Bandhav Veluri와 Malek Itani, 그리고 카네기 멜론 대학교의 Justin Chan, AssemblyAI의 Takuya Yoshioka를 포함한 공동 저자들은 이 프로젝트에 협력하며 다양한 전문 지식을 제공했습니다.

연구가 상업적 출시를 향해 나아가면서, 연구진은 사용자가 시맨틱 히어링을 일상생활에 원활하게 통합할 수 있는 미래를 상상합니다. 청각 경험을 미세 조정할 수 있는 능력은 여가 활동뿐만 아니라 청각 장애나 감각 민감성과 같은 특정 청각 요구가 있는 개인들에게도 유망한 가능성을 제시합니다.

AI 노이즈 캔슬링의 빛남으로 내일의 소리 풍경 탐색하기

개인화가 핵심인 세상에서 노이즈 캔슬링 헤드폰에 시맨틱 히어링이 도입되면서 흥미로운 가능성이 제기됩니다. 이 기술은 소비자 응용 분야를 넘어 어떻게 진화할 수 있을까요? 특정 청각적 과제를 해결하거나 독특한 요구가 있는 사람들의 청각 경험을 향상시키는 데 적용될 수 있을까요? 오디오 기술의 미래로 들어서면서 우리 소리 환경을 조각할 수 있는 능력은 개인화된 청취의 새로운 시대를 예고합니다.