마이크로소프트($MSFT), 시청자별 생중계 발언 바꾸는 AI 특허 출원
공개된 출원서는 시청자 프로필에 따라 음성과 입 모양을 함께 수정하는 방식을 설명했다. 마이크로소프트는 제품화나 생중계 적용 계획을 발표하지 않았다.
토포AI로 이 기사 더 깊이 읽기
마이크로소프트($MSFT)가 시청자 프로필에 따라 생중계 화자의 발언을 AI로 바꾸고, 수정된 말에 맞춰 입 모양도 조정하는 기술을 특허 출원했다. 같은 방송을 보더라도 시청자마다 다른 음성과 영상을 전달할 수 있는 구상이다.
미국 특허출원서 US 2026/0341309 A1의 출원일은 2025년 4월 29일이다. 문서는 2026년 10월 29일 공개됐다. 출원인은 Microsoft Technology Licensing이다.
출원서는 생방송과 증강현실(AR) 발표에 생성형 AI를 적용하는 절차를 다룬다. 첫 번째 청구항은 AI 에이전트가 수정할 발언을 고르는 방식부터 설명한다.
AI 에이전트는 미리 설정한 조건과 시청자 프로필을 바탕으로 바꿀 단어를 선택한다. 선택된 단어는 생성형 AI를 통해 다른 표현으로 대체된다.
시스템은 교체된 말에 맞춰 앞뒤 음성을 다듬고 새 영상 프레임을 만든다. 이 과정에서 화자의 입 모양도 바뀐 발음에 맞춰 조정된다.
프로필 예시에는 나이, 사용 언어, 지역, 종교·민족적 배경, 교육 수준과 음성·영상 표본이 포함된다. 이 정보에 따라 같은 생중계도 시청자별로 다르게 전달될 수 있다.
화자의 언어가 시청자의 프로필에 설정된 언어와 다르면 발언을 번역하고, 번역된 말에 맞춰 입 모양을 새로 만드는 사례도 제시됐다. 강의와 시상식, 스포츠 경기, TV 생방송이 활용 대상으로 언급됐다.
수정 대상은 번역에 한정되지 않는다. 출원서는 ‘um’ 같은 군말을 줄이고 발음 실수와 말더듬, 속어를 고치는 사례를 담았다.
비속어나 모욕적 표현은 삭제하거나 다른 말로 바꿀 수 있다. 청구항에는 대체 단어를 인터넷 검색에서 가져오는 방식도 포함됐다.
출원서는 ‘준실시간’을 수초 안에 처리하는 방식으로 설명하고, 1~10초 지연을 예로 들었다. 이 시간은 문서에 든 작동 방식의 예시로, 실제 서비스의 측정 결과는 아니다.
구현 기기로는 AR 안경과 스마트폰, 태블릿, 카메라가 열거됐다. 생중계뿐 아니라 이미 녹화된 영상의 음성과 화면을 수정하는 사후 편집 방식도 담겼다.
다른 청구항은 긴 녹화물을 짧은 요약 영상으로 만들면서 새로 생성한 장면을 포함하는 방식도 설명한다. 생중계 발언 수정과는 별도로 제시된 활용 사례다.
수정 전 음성과 영상은 나중에 대조할 기준 기록으로 보관할 수 있다. 원본 보관 방안은 종속항 한 건에 담겼으며, 모든 구현 방식에 공통으로 적용되는 조건은 아니다.
퓨처리즘(Futurism)은 실시간 번역을 가능한 활용 사례로 제시하면서, 방언이나 특정 표현을 지우는 기능이 시청자를 개인화된 정보 환경에 가둘 수 있는지 물었다. 편집된 영상과 원래 발언을 구분하는 방식이 논점으로 남는다.
마이크로소프트가 이 기능을 제품화하거나 생중계에 적용하겠다는 계획을 발표한 바는 없다. 공개된 문서는 특허출원서다.
이도현 기자 




Comment 0
불러오는 중…