innovaTopia

ーTech for Human Evolutionー

AIビデオ革新:Pikaが「Lip Sync」機能を発表、Runwayは動き検出を強化

AIビデオ革新:Pikaが「Lip Sync」機能を発表、Runwayは動き検出を強化 - innovaTopia - (イノベトピア)

Last Updated on 2024-06-15 07:11 by admin

Pikaは、支払い加入者向けに「Lip Sync」という新機能を発表した。この機能は、別の生成音声スタートアップであるElevenLabsが提供するAI生成音声を使用してビデオに話し言葉を追加し、話しているキャラクターの口が対話に合わせて動くようにアニメーションを追加する。Lip Syncの早期アクセスは、Pika Proユーザー(月額58ドル、12ヶ月前払いで696ドルのサブスクリプション)や、Discordグループを通じて招待のみで利用可能な「Super Collaborators」プログラムのメンバーに限定されている。

一方、Runwayは「Multi Motion Brush」機能のアップデートを発表した。この機能は、ビデオ内の異なるオブジェクトや風景に最大5つの独立した動きの方向を追加できる。今回のアップデートでは、ユーザーが手動でブラシを使って塗りつぶすことなく、自動的に異なるオブジェクトを強調表示して選択するリージョン検出が追加された。

しかし、AIビデオトレーニングデータに関する懸念と質問が続いている。新しいAI認証非営利団体であるFairly TrainedのCEO兼創設者であるEd Newton-Rexは、Pikaのビデオモデルが何に基づいてトレーニングされているかを問い合わせた。多くのクリエイターは、自分たちの作品が許可なく利用されていることを懸念している。

それにもかかわらず、AIビデオジェネレーター企業は新機能の導入とさらに高品質なビデオ生成を続け、これらの企業間での競争が激化している。

【ニュース解説】

AI技術の進化により、ビデオ生成の分野でも競争が激化しています。この中で、Pikaという企業が「Lip Sync」という新機能を発表しました。この機能は、AIが生成した声でビデオ内のキャラクターに話し言葉を追加し、その口の動きを対話に合わせてアニメーション化するものです。この技術は、別のスタートアップであるElevenLabsが提供する生成音声を利用しています。

この機能の導入により、従来の映画制作ソフトウェアにとって大きな変革がもたらされる可能性があります。特に、長編の物語映画をAIで作成する際の障壁の一つであった、話し言葉と口の動きの同期が、この機能によって解消されることになります。これまで、AIビデオジェネレーターではこの機能がネイティブに提供されていなかったため、第三者のツールや後処理による追加が必要でしたが、PikaのLip Syncにより、そのプロセスが大幅に簡略化されます。

一方で、Runwayという別の企業も「Multi Motion Brush」という機能をアップデートしました。これは、ビデオ内のオブジェクトや風景に独立した動きの方向を追加できる機能で、今回のアップデートにより、ユーザーが手動で操作することなく、自動的にオブジェクトを選択できるようになりました。

しかし、これらの技術進歩には懸念も伴います。特に、AIビデオトレーニングデータの使用に関する透明性の欠如が問題となっています。クリエイターの中には、自分たちの作品が許可なく利用されているのではないかと心配する声もあります。この問題に対処するため、AIモデルがクリエイターやデータ保持者からの許可を得てトレーニングされていることを確認する非営利団体も登場しています。

このような技術の進化は、映画制作のプロセスを大きく変える可能性がありますが、クリエイターの権利保護やデータの透明性に関する課題も同時に解決する必要があります。また、これらの技術が広く普及することで、映画制作における職種の変化や新たな表現の可能性も生まれるでしょう。しかし、その一方で、技術の進歩によって仕事が失われる可能性も指摘されており、このバランスをどのように取るかが今後の大きな課題となります。

from AI video wars heat up as Pika adds Lip Sync powered by ElevenLabs.

ホーム » AI(人工知能) » AI(人工知能)ニュース » AIビデオ革新:Pikaが「Lip Sync」機能を発表、Runwayは動き検出を強化

“AIビデオ革新:Pikaが「Lip Sync」機能を発表、Runwayは動き検出を強化” への1件のコメント

  1. 佐藤 智恵のアバター
    佐藤 智恵

    AI技術の進化がもたらす可能性には目を見張るものがありますが、その一方で、クリエイターの権利やデータの透明性に関する懸念には、特に注意を払う必要があります。私自身、小説家として作品を生み出す者として、自分の作品が許可なく利用されることへの懸念は非常に理解できます。Pikaの「Lip Sync」やRunwayの「Multi Motion Brush」のような機能は、映画制作プロセスを革新的に変える可能性を秘めているものの、これらの技術がどのようにして開発されたのか、その背後にあるデータはどこから来たのかという点では、透明性が求められます。

    特に、文学作品が映画化される際には、原作の魂をどのようにして映像に反映させるかが重要な課題となります。AI技術がこのプロセスを助け、よりリアルなキャラクターの口の動きや表情を生み出すことができれば、物語の表現力は飛躍的に向上するでしょう。しかし、その技術がクリエイターの意志や著作権を尊重する形で使用されていることが前提となります。

    これらの技術の進化は、映画制作における新たな表現の可能性を開くと同時に、クリエイターの権利という観点から新たな議論を引き起こしています。私たちは、技