인공지능 서비스 전문기업 이스트소프트는 영상 속 화자의 음성을 복제하고 입모양까지 생성해 다국어 발화 영상으로 변환해 주는 오토 더빙 서비스 ‘AI 비디오 트랜슬레이터’(AI Video Translator)를 출시했다고 13일 밝혔다.
AI 비디오 트랜슬레이터는 언어의 장벽을 뛰어넘는 혁신적인 AI 커뮤니케이션 서비스로 이스트소프트의 AI 휴먼 구독 서비스 페르소닷에이아이(PERSO.ai)의 확장 기능이다. PERSO.ai에 회원 가입만 하면 누구나 무료로 1분 분량의 더빙 영상을 제작해 볼 수 있다.
AI 비디오 트랜슬레이터의 혁신성은 화자의 음성과 미세한 어감은 물론 감정선까지 살리고, 이에 더해 배경 소음과의 조화까지 완벽하게 이루어 원본 영상에서 제공하는 메시지와 감동을 언어장벽 없이 그대로 경험할 수 있도록 돕는 데 있다.
이러한 기술적 혁신으로 시청자는 자막, 음성 더빙 없이 온전히 원본 영상에 집중할 수 있는 시청 환경을, 글로벌 콘텐츠 제작자는 혁신적인 영상 제작 환경을 AI 비디오 트랜슬레이터로 구축할 수 있게 된다.
AI 비디오 트랜슬레이터는 PERSO.ai의 AI 휴먼 영상 생성 기능 ‘AI 스튜디오’에서 선보였던 고품질의 음성 및 영상 생성 기술에 높은 변역 정확도까지 확보해 글로벌 경쟁사 대비 뛰어난 품질로 영상을 번역한다. 지원되는 언어는 한국어를 포함해 영어, 스페인어, 프랑스어, 포르투갈어, 중국어, 일본어 등 29가지에 달한다.
사용성 역시 뛰어나다. 우선 영상을 번역하는 데 걸리는 시간을 혁신적으로 줄였다. 일반적인 영상 더빙 작업에 최소 하루 이상의 시간과 수백만 원의 비용이 들지만, AI 비디오 트렌슬레이터는 불과 수 분 만에 1만 원 내외로 입모양까지 더빙에 맞춰 립싱크 영상을 생성해 업무 생산성을 획기적으로 높여준다.
정상원 이스트소프트 대표는 “음색과 감정을 보존해 다국어로 변환하는 AI 비디오 트랜슬레이터가 글로벌 콘텐츠 제작 환경에 혁신을 가져올 것”이라며 “앞으로 언어 제약 없는 정보 공유, 크리에이터와 기업의 해외 진출을 AI 비디오 트랜슬레이터로 적극 지원하며 글로벌 소통을 위한 플랫폼으로 역할을 확장해 나갈 것”이라고 전했다.