GN⁺: 군중 속 한 사람의 목소리를 듣게 해주는 AI 헤드폰

AI 헤드폰: 군중 속에서 한 사람의 목소리만 듣기

주요 내용

• 연구 배경

  • 소음 제거 헤드폰은 특정 소리를 차단하는 데 뛰어남.
  • 하지만 사용자가 특정 소리만 듣고 싶을 때는 한계가 있음.

• 새로운 시스템 개발

  • 워싱턴 대학교 팀이 "Target Speech Hearing"이라는 AI 시스템 개발.
  • 사용자가 헤드폰을 착용하고 3~5초 동안 특정 사람을 바라보면 그 사람의 목소리만 들을 수 있게 함.
  • 이 시스템은 사용자가 움직이거나 다른 방향을 보더라도 특정 목소리를 계속 들려줌.

• 사용 방법

  • 마이크가 장착된 일반 헤드폰을 착용하고, 특정 사람을 바라보며 버튼을 누름.
  • 헤드폰이 해당 사람의 목소리 패턴을 학습하고, 다른 소리를 차단함.
  • 시스템은 사용자가 움직여도 특정 목소리를 계속 추적함.

• 연구 결과

  • 21명의 실험 참가자들이 시스템의 음성 명료도를 평가한 결과, 기존 오디오보다 두 배 더 명확하게 들린다고 평가함.
  • 현재는 한 번에 한 명의 목소리만 등록 가능하며, 동일 방향에서 큰 소리가 나면 등록이 어려움.

• 미래 계획

  • 시스템을 이어버드와 보청기로 확장할 계획.

GN⁺의 의견

• 기술의 유용성

  • 소음이 많은 환경에서 특정 사람의 목소리를 명확히 들을 수 있어 회의나 강연 등에서 유용할 수 있음.

• 기술의 한계

  • 현재는 한 번에 한 명의 목소리만 등록 가능하다는 점에서 다소 제한적임.
  • 동일 방향에서 큰 소리가 나면 등록이 어려운 점도 개선이 필요함.

• 기술의 확장 가능성

  • 이어버드와 보청기로 확장되면 더 많은 사용자에게 도움이 될 수 있음.

• 경쟁 기술

  • 비슷한 기능을 제공하는 다른 소음 제거 기술과의 비교가 필요함.

• 실용성

  • 실제 상용화되기 전까지는 연구 단계에서의 성능과 실생활에서의 성능 차이를 고려해야 함.

[neo]

Hacker News 의견

• 작은 크기의 이어플러그 크기로 줄어든다면, 청각 장애가 없는 사람으로서 사용하고 싶음. 바쁜 식당이나 바에서 대화가 잘 안 들려서 답답함을 느끼는 상황을 해결할 수 있을 것 같음.

• 청각 보조 기기의 비싼 가격과 품질 문제. 기본적인 소리 증폭 기능만 있는 기기도 매우 비쌈. 또한, 귀에 간섭하여 다른 소리들을 걸러내는 능력을 잃게 만듦.

• 페이스북의 AR 연구가 저렴한 실험 플랫폼 제공. 눈 추적, 마이크 배열, 전면 카메라가 있어 쉽게 조정 가능한 마이크로 변형 가능.

• 청각 장애인에게는 이런 기능이 신의 선물. 청각 보조 기기에 이 기능이 ASAP 통합되길 바람.

• 이 기능이 이명 치료에 도움될 수 있음. 한 사람이 말할 때는 잘 들리지만, 여러 사람이 말하거나 음악이 있을 때는 아무것도 들리지 않음.

• 오픈 소스 코드와 연구 논문 링크 제공. 독립적으로 작동시킬 수 있는지 궁금함.

• 상업적 성공 가능성. 시끄러운 사람의 목소리를 음소거할 수 있는 기능을 상상해보라.

• Sonos에서 일할 때 비슷한 기능을 연구. ANC 칩셋을 통해 특정 사람의 목소리만 들리게 하는 기능을 개발하려 했음.

• 코드 링크 제공. (https://github.com/vb000/LookOnceToHear)

• ADHD로 인해 바쁜 방에서 대화가 어려움. 대화 상대의 목소리만 들리게 하는 기능이 매우 유용할 것 같음.

• ANC 기능이 있는 헤드폰이 집에서 유용할 수 있음. 파트너의 목소리를 자동으로 통과시키는 기능이 있으면 좋겠음.