イレブンラボが多言語吹替を革新！新AIモデル『Dubbing v2』発表

イレブンラボが新たに発表したAI吹替モデル『Dubbing v2』

2023年、音声AI分野の先駆者であるイレブンラボが、革新的な新機能を搭載したAI吹替モデル『Dubbing v2』を発表しました。この新技術は、多言語での吹替えをより自然に行うことを目指し、特に感情や演技のトーンを忠実に再現できる点が特徴です。

『Dubbing v2』の主な特徴

『Dubbing v2』は、従来の音声翻訳技術から一歩進んだ技術を採用。
このモデルは、話者のオリジナルのトーンや言葉遣い、さらには微細な感情表現を保持しながら、他の言語へと翻訳を行います。これにより、ただ機械的に翻訳された音声に留まらず、まるで話者本人がその言語で話しているかのようなリアルな吹替えを実現します。

各種機能の充実

具体的には、次のような機能が盛り込まれています：

- 音声クローン：話者の声の質をそのままにして別の言語へ変換。
- 複数話者の識別：同時に複数の話者がいる場合でも、個々の声を正確に再現。
- BGM・環境音の保持：背景音や環境音を失わずに音声部分を翻訳・統合。

これにより、多言語吹替えが必要な動画やポッドキャストにおいて、視聴者がより臨場感を持って楽しむことができるのです。

90以上の言語に対応

『Dubbing v2』は、英語や中国語、スペイン語、フランス語といった主流の言語に加え、スワヒリ語やアイスランド語など90以上の言語およびアクセントに対応しています。これにより、日本語で制作されたさまざまなコンテンツが、海外の視聴者にもスムーズに届けられることが期待されます。

コンテンツのグローバル展開を支援

日本のコンテンツや企業メッセージが、国境や言語の壁を越えてより多くの人々に届く可能性を秘めた『Dubbing v2』。これまでは、多言語展開には複数の工程とコストがかかっていたため、多くのクリエイターや企業が手をこまねいていました。しかし、この新モデルにより、オリジナルのニュアンスを保ちながら、より効率的な多言語展開が可能となります。

例えば、アニメやゲームの多言語展開では、キャラクターの演技や感情をそのまま活かしつつ、VTuberやYouTubeクリエイターによる動画コンテンツも、英語をはじめとした多言語で配信しやすくなります。さらに、教育コンテンツや企業向けの社内研修動画も、多言語化を通じて海外の視聴者に届けられるのです。

未来への展望

イレブンラボは、今後さらにシンプルで直感的な編集機能を追加する計画も進めており、APIの提供も視野に入れています。これにより、大規模なコンテンツ制作を行う企業向けにも柔軟に対応できるようになります。

これからの『Dubbing v2』の展開により、より多くの日本の素晴らしいコンテンツが、世界中の視聴者へ自然な形で届けられる未来が楽しみです。日本市場におけるコンテンツのグローバル化を強力にサポートする主役として、この技術は間違いなく注目を集めるでしょう。