Last Updated on 2024-06-14 08:08 by admin

Deepdub、AIを用いたアクセント変更技術を発表。この技術は、キャラクターのアクセントを他言語への吹き替え時に正確に制御することを可能にし、AI吹き替え素材の真正性を新たなレベルへと引き上げる。イスラエル・テルアビブに拠点を置くDeepdubが開発したAccent Control技術は、独自の生成AIを使用し、コンテンツクリエーターが吹き替えコンテンツ内のキャラクターのアクセントを柔軟に操作できるようにする。これにより、オリジナルのアクセントを保持するか、ターゲットオーディエンスの文化的ニュアンスに合わせて適応させるかの選択が可能となる。

DeepdubのCEO、Ofir Krakowskiは、この技術が声優の仕事を奪うものではなく、むしろ新たな機会を創出すると述べている。Accent Controlは、Deepdubの感情的テキスト・トゥ・スピーチ(eTTS) 2.0モデルによって支えられており、130以上の言語をサポートする大規模な多言語モデルである。このモデルは、感情的な表現が豊かな音声を生成し、アクセントを含む様々な音声特性を操作する能力を持つ。Deepdubは、この技術をDeepdub Goプラットフォームおよび同社のホワイトグローブ吹き替えサービスを通じて提供している。

Deepdubは、メディア業界の経験豊富なエグゼクティブをアドバイザリーボードに迎え、従業員数は34名、資金調達額は2000万ドルである。

【ニュース解説】

イスラエル・テルアビブに拠点を置くDeepdubが、AIを活用した革新的なアクセント変更技術「Accent Control」を発表しました。この技術は、映画やテレビ番組などのコンテンツを他言語に吹き替える際、キャラクターのアクセントを正確に制御し、調整することが可能になります。これにより、コンテンツクリエーターは、オリジナルのアクセントを保持するか、またはターゲットオーディエンスの文化的ニュアンスに合わせて適応させるかを選択できるようになります。

この技術の背景には、コンテンツの真正性と視聴者体験の向上という二つの大きな目的があります。従来の吹き替えプロセスでは、特定のキャラクターのアクセントを保持するか、それともターゲット市場の文化に合わせて変更するかという難しい選択を迫られていました。しかし、Accent Control技術により、このような課題を解決し、より柔軟なアクセント制御が可能になります。

DeepdubのCEO、Ofir Krakowskiは、この技術が声優の仕事を奪うものではなく、新たな機会を提供すると述べています。例えば、特定のアクセントを持たないために役割を得られなかった人々が、この技術を利用して新たな役割に挑戦できるようになります。

Accent Controlは、Deepdubが開発した感情的テキスト・トゥ・スピーチ(eTTS) 2.0モデルによって支えられています。このモデルは130以上の言語をサポートし、感情的な表現が豊かな音声を生成することができます。さらに、アクセントを含む様々な音声特性を操作する能力を持ち、コンテンツの微細なローカライゼーションを可能にします。

この技術は、Deepdub Goプラットフォームおよび同社のホワイトグローブ吹き替えサービスを通じて提供されます。これにより、ポストプロダクションの編集者やローカライゼーションの専門家が、直感的なインターフェースを通じてアクセントを簡単に適用し、調整することができます。

この技術の導入により、コンテンツのグローバルな展開がさらに進むことが期待されます。言語の壁を越え、文化的なニュアンスを尊重しながら、より多くの人々にとってアクセスしやすいコンテンツを提供することができるようになります。しかし、AIによる吹き替えが進む中で、声優の役割や人間の感情を表現する微妙なニュアンスをどのように保持していくかという課題も残ります。また、文化的な感受性を正確に捉えるためには、技術的な精度だけでなく、深い文化的理解も必要とされるでしょう。

長期的には、この技術がエンターテインメント業界におけるローカライゼーションの標準を再定義し、より多様で包括的なコンテンツ制作を促進する可能性を秘めています。

from Deepdub adds AI dubbing tech that can change a speaker’s accent.

admin

See Full Bio