最近の動画生成AIの新機能として、Runwayの「Act-One」が紹介されています。これにより、ユーザーの顔の表情を動画に反映し、より自然なリップシンクが可能に。また、4Kアップスケール機能も追加され、動画の解像度が向上。さらに、SVFRという顔修復ツールも登場し、古いビデオの画質を改善できます。
要約すると最近の動画生成AIの進化に関する記事では、特にRunwayの新機能「Act-One」に焦点を当てています。
この機能は、ユーザーが自分の顔の表情を動画に反映させることができ、リップシンクをより自然に行うことが可能です。
具体的には、ユーザーが自分の顔を演技している動画を基に、目や口の動きをリアルに再現する仕組みです。
これにより、従来のオーディオデータに基づくリップシンクの不自然さを改善し、よりリアルな口パクを実現します。
また、Runwayは新たに4Kアップスケール機能も追加し、生成した動画を簡単に高解像度に変換できるようになりました。
この機能は、他の動画生成AIサービスではまだ実現されていないため、特に注目されています。
さらに、SVFR（Stable Video Face Restoration）というオープンソースの顔修復ツールも紹介されており、古いビデオの顔を修復する能力に優れています。
これにより、1980年代に撮影された粗いホームビデオを滑らかに修復することができ、全体的な画質の向上が期待できます。
記事の最後では、これらの機能を駆使してミュージックビデオを作成した例が紹介されており、AI技術がリアルな記録と「フェイク」の境界をどのように曖昧にしているかが示されています。
参考リンクhttps://news.yahoo.co.jp/articles/5ed975cedadf81818ffb55f2962cb19c7a20a835