Pikaは、支払い加入者向けに「Lip Sync」という新機能を発表した。この機能は、別の生成音声スタートアップであるElevenLabsが提供するAI生成音声を使用してビデオに話し言葉を追加し、話しているキャラクターの口が対話に合わせて動くようにアニメーションを追加する。Lip Syncの早期アクセスは、Pika Proユーザー（月額58ドル、12ヶ月前払いで696ドルのサブスクリプション）や、Discordグループを通じて招待のみで利用可能な「Super Collaborators」プログラムのメンバーに限定されている。
一方、Runwayは「Multi Motion Brush」機能のアップデートを発表した。この機能は、ビデオ内の異なるオブジェクトや風景に最大5つの独立した動きの方向を追加できる。今回のアップデートでは、ユーザーが手動でブラシを使って塗りつぶすことなく、自動的に異なるオブジェクトを強調表示して選択するリージョン検出が追加された。
しかし、AIビデオトレーニングデータに関する懸念と質問が続いている。新しいAI認証非営利団体であるFairly TrainedのCEO兼創設者であるEd Newton-Rexは、Pikaのビデオモデルが何に基づいてトレーニングされているかを問い合わせた。多くのクリエイターは、自分たちの作品が許可なく利用されていることを懸念している。
それにもかかわらず、AIビデオジェネレーター企業は新機能の導入とさらに高品質なビデオ生成を続け、これらの企業間での競争が激化している。
【ニュース解説】
AI技術の進化により、ビデオ生成の分野でも競争が激化しています。この中で、Pikaという企業が「Lip Sync」という新機能を発表しました。この機能は、AIが生成した声でビデオ内のキャラクターに話し言葉を追加し、その口の動きを対話に合わせてアニメーション化するものです。この技術は、別のスタートアップであるElevenLabsが提供する生成音声を利用しています。
この機能の導入により、従来の映画制作ソフトウェアにとって大きな変革がもたらされる可能性があります。特に、長編の物語映画をAIで作成する際の障壁の一つであった、話し言葉と口の動きの同期が、この機能によって解消されることになります。これまで、AIビデオジェネレーターではこの機能がネイティブに提供されていなかったため、第三者のツールや後処理による追加が必要でしたが、PikaのLip Syncにより、そのプロセスが大幅に簡略化されます。
一方で、Runwayという別の企業も「Multi Motion Brush」という機能をアップデートしました。これは、ビデオ内のオブジェクトや風景に独立した動きの方向を追加できる機能で、今回のアップデートにより、ユーザーが手動で操作することなく、自動的にオブジェクトを選択できるようになりました。
しかし、これらの技術進歩には懸念も伴います。特に、AIビデオトレーニングデータの使用に関する透明性の欠如が問題となっています。クリエイターの中には、自分たちの作品が許可なく利用されているのではないかと心配する声もあります。この問題に対処するため、AIモデルがクリエイターやデータ保持者からの許可を得てトレーニングされていることを確認する非営利団体も登場しています。
このような技術の進化は、映画制作のプロセスを大きく変える可能性がありますが、クリエイターの権利保護やデータの透明性に関する課題も同時に解決する必要があります。また、これらの技術が広く普及することで、映画制作における職種の変化や新たな表現の可能性も生まれるでしょう。しかし、その一方で、技術の進歩によって仕事が失われる可能性も指摘されており、このバランスをどのように取るかが今後の大きな課題となります。
from AI video wars heat up as Pika adds Lip Sync powered by ElevenLabs.
