イレブンラボ、感情を再現するAI吹替モデル『Dubbing v2』を発表

イレブンラボ、最新AI吹替モデル『Dubbing v2』を発表

音声AIリサーチの先駆者であるイレブンラボが、革新的なAI吹替モデル『Dubbing v2』をリリースしました。このモデルは、動画や音声コンテンツにおいて、より自然で感情豊かな多言語翻訳と吹替を実現します。これにより、視聴者はまるで元の話者が異なる言語で話しているかのような体験を味わえます。

感情表現を活かしたリアルな吹替体験

『Dubbing v2』の最も際立った特徴は、トーンや感情を正確に再現する能力です。従来の機械翻訳とは異なり、このモデルは話者の個性をしっかりと引き継ぎながら異なる言語に翻訳します。例えば、話し方や間の取り方、さらには呼吸の息遣いまで、オリジナルの表現に近い状態で翻訳が可能です。この結果、音声の翻訳が「機械的」なものではなく、より自然で聴きやすいものになります。

さらに、以下の高度な機能が自動的に適応される点も注目です。

- 音声クローン機能: 話者の声質を保ちながら別言語にスムーズに変換。
- 複数話者の識別: 複数の登場人物がいる際の声の特徴を明瞭に再現。
- BGMや環境音の保持: 背景音楽や環境音を損なうことなく、自然に音声を統合。

90以上の言語に対応

『Dubbing v2』は、英語、スペイン語、中国語などの主要言語から、スワヒリ語やアイスランド語に至るまで、90以上の言語およびアクセントに対応しています。この特性により、日本のコンテンツが国内外でより広がりやすくなります。特に、教育コンテンツや企業向け動画、さらにはVTuberやYouTubeクリエイターのコンテンツ制作においても、多言語でのリーチが可能になります。

日本市場への影響

この新技術は、特に日本市場において、コンテンツのグローバル展開を強力にサポートする役割を果たします。以前は多言語展開には多くの時間とコストがかかりましたが、『Dubbing v2』はオリジナルの魅力を保ちながら、効率的にプロセスを簡素化してくれます。アニメやゲーム、教育コンテンツなど、さまざまな分野での展開が期待されます。

導入の容易さ

『Dubbing v2』は、イレブンラボのユーザーインターフェース上で簡単に利用できるほか、今後はさらにシンプルな編集機能やプロ向けの機能も追加される予定です。また、エンタープライズ向けにはAPIの提供も計画されており、大規模なコンテンツ制作や既存システムへの組み込みが可能となります。

世界へのメッセージを届ける

イレブンラボの目指すところは、日本独自のコンテンツを世界中の視聴者に届けることです。『Dubbing v2』を通じて、国境や言語の壁を越えたコミュニケーションを支援し、視聴者により自然な形でメッセージを伝えられる未来を築いていきます。これからの展開が非常に楽しみです。

会社概要

イレブンラボは2022年に設立され、全世界の企業やクリエイターに向けた最先端の音声AI技術を提供しています。現在、企業評価額は110億ドルを超え、Fortune 500企業の75%以上が導入している実績があります。私たちは、AI音声エージェントやボイスオーバーの大規模生成を支援し、多言語での対話型AIの実現を目指しています。

詳しくは、イレブンラボの公式サイトをご覧ください。