ElevenLabsが感情再現AI吹替Dubbing v2発表

人工知能（AI）オーディオ企業イレブンラボ（ElevenLabs）が新規AI吹き替えモデル「Dubbing v2（ダビングv2）」を16日に披露した。

当該モデルは、従来のAI吹き替えの限界として挙げられてきた感情と伝達力の損失問題を改善した点が特徴だ。原音声の感情、トーン、抑揚、話の間合いなど話者の実際の表現様式を分析し、90以上の言語で自然に再現する。

また、自動ボイスクローニング、音声タイミングの自動調整、文脈に基づく翻訳機能により、単純な翻訳を超えて原作コンテンツの没入感と個性を維持した多言語吹き替えを支援する。

「Dubbing v2」は韓国のドラマ・映画・ウェブトゥーン・ゲーム・YouTubeコンテンツなどのグローバル展開を支援すると会社側は期待している。イレブンラボ関係者は「韓国は全世界の視聴者を魅了する強力なコンテンツ資産を保有しているが、これまではグローバル進出のために翻訳、脚本作成、声優収録、オーディオ編集、タイミング調整など莫大な制作工程と費用がかかった」と述べ、「Dubbing v2」はこうした作業時間の短縮に寄与すると説明した。

ホン・サンウォンイレブンラボ韓国総括は「翻訳された音声を、まるで原作者が実際にその言語を話したかのように感じさせることは、これまでAI吹き替え分野で最大の難題の一つだった」と述べ、「今回披露した『Dubbing v2』は精緻な感情再現力と優れたシンクを基盤に、国内のクリエイターやマーケター、コンテンツ企業が言語の壁を越え、世界の人々とより深く自然にコミュニケーションする強力な橋頭堡になる」と語った。