ElevenLabsが新AI吹替モデル『Dubbing v2』を発表、感情・トーンを保ちながら90以上の言語に対応

ElevenLabsは、動画・音声コンテンツの翻訳と吹替を多言語で自然に行う新AI吹替モデル『Dubbing v2』を発表しました。オリジナル話者の感情やトーン、息遣いといった細やかな表現をそのまま保持しながら、別言語へ変換する点が、従来の音声翻訳技術からの大きな進歩です。日本語コンテンツのグローバル展開を、より効率的に支援することを目指しています。

従来の音声翻訳技術では、オリジナルの声が持つ感情表現や演技のニュアンスが失われることが課題でした。『Dubbing v2』は、話者本人の特有のトーン、絶妙な間（ま）、息遣い、細やかな感情表現を保持したまま、別の言語へ変換します。

主な機能は、以下の3点です。

• Voice Cloning（音声クローン）の自動適用で話者本人の声質を維持
• Speaker separationによる複数話者の識別と個別変換
• BGMや環境音を損なわずに音声部分のみを翻訳・統合

これらの機能が自動かつ包括的に適用されることで、「機械的に翻訳された音声」という枠を超え、オリジナルの表現に近い、より自然で臨場感のある多言語吹替体験を実現します。対応言語は、英語や中国語、スペイン語、フランス語といった主要言語からスワヒリ語・アイスランド語まで、90以上の言語およびアクセントをカバーしています。

日本語コンテンツの多言語展開では、これまで翻訳や台本作成、声優収録、音声編集、タイミング調整など多くの工程とコストが必要でした。『Dubbing v2』は、日本語コンテンツのグローバル展開をより効率的に支援します。

想定される主な活用シーンは、以下の通りです。

• アニメ・ゲーム:権利処理と同意に基づきキャラクターの演技・感情表現を活かして多言語展開
• VTuber・YouTubeクリエイター:話し方のニュアンスを保ちながら海外視聴者へのリーチを拡大
• 教育・インバウンド向け動画:話者の熱量や説明の自然さを保ちながら多言語化
• グローバル企業の社内研修・企業動画:経営陣のメッセージや製品紹介を海外拠点へ一貫して届ける

『Dubbing v2』はElevenLabsのUI上で利用可能です。今後、シンプルな編集機能や新しいプロフェッショナル向け編集体験も順次拡充される予定で、エンタープライズ向けにはAPI提供も予定しています。

Fortune 500企業の75%以上を含む数千もの企業がすでに活用しているという実績は、AI音声技術の普及がすでに一定の段階に達していることを示しています。業界全体としては、翻訳の「正確さ」だけではなく「らしさ」の再現をどこまで自動化できるかが、次の競争軸になりつつあるのではないでしょうか。

マーケティングの現場でも、グローバル向けの動画コンテンツを制作する際、ナレーターの収録・編集コストが意外と大きな障壁になっています。感情やトーンを保ったまま多言語化できるなら、一度つくった日本語コンテンツを複数の市場に展開するコストが大きく変わる可能性があります。同種のAI音声サービスへの関心がさらに高まる可能性があり、マーケティング業界の文脈に置き換えると、コンテンツのローカライズコスト構造そのものが変わる動きとして注目されます。

References

1. ^ PR TIMES. 「イレブンラボ、オリジナルの感情やトーンを多言語で再現する新AI吹替モデル 『Dubbing v2』を発表 | Ｅｌｅｖｅｎ　Ｌａｂｓ　Ｊａｐａｎ合同会社のプレスリリース」. https://prtimes.jp/main/html/rd/p/000000045.000160611.html, (参照 26-06-05).

※上記コンテンツの内容やソースコードはAIで確認・デバッグしておりますが、間違いやエラー、脆弱性などがある場合は、コメントよりご報告いただけますと幸いです。

ITやプログラミングに関するコラム

• 
  【Git】remote設定を変更する方法
• 
  【VBA】コメントアウトを設定する方法
• 
  マークダウンで改行する方法
• 
  【CSS】notで複数の件を除外する方法
• 
  x86とx64の違いを分かりやすく解説
• 
  GitLabとGitHubの違いを解説
• 
  パソコンのメモリの目安を用途別に選ぶ方法
• 
  Linuxで環境変数を確認する方法
• 
  CapsLockキーを解除する方法
• 
  UbuntuのIPアドレスを確認する方法

ITやプログラミングに関するニュース

• 
  AITORAがAI検索での競合比較を可視化、対策レポートをモニター価格月額10万円〜で提供
• 
  株式会社MIXIが「Romi（Lacatanモデル）」の選べる声を全4種類に拡大、キャラ変との組み合わせが広がる
• 
  藤枝市役所が国産LLM「Sarashina」活用の窓口AI実証事業で総務省採択、ソフトバンクと協定締結
• 
  Hanji株式会社がAIチューター「Knock」に赤入れ添削機能を追加、数十秒〜1分程度で大学入試レベルまで対応
• 
  KozotaiがAIネイティブ会計ソフト「KOZOTAI」を正式リリース、自然言語入力だけで仕訳から決算書まで一貫処理
• 
  NTT西日本株式会社が大阪・福岡に次世代AI対応型データセンターを新設、西日本のAIインフラ強化へ
• 
  パテント・インテグレーション株式会社が「サマリア」の弁理士法対応を強化、利用規約改訂と注意喚起機能を追加
• 
  アステリアキャンバスがAI業務プラットフォーム「Bakusoku.AI」を提供開始、最短3分で業務ソフトウェアを自動生成
• 
  合同会社DMM.comが「DMMキャラトーク」を提供開始、1,000以上のパターンのキャラクターと1対1でトーク
• 
  株式会社アスレバがゴリラセールスAI商談を正式リリース、顧客の検討熱度が高い瞬間にAIが商談化を自動化