安定性 AI ビデオは長年にわたりテキストや画像に動きと活気を与えてきましたが、現在では 2D 画像を 3D ビデオに変換することで文字通り新しい次元を追加しています。この技術は、ビデオ生成人工知能の分野に質的な付加価値をもたらします。
同社の新しい「Stable Virtual Camera」ツールは、単一の画像を処理し、それを多視点のアニメーションビデオに変換するように設計されており、ビデオを回転させてあらゆる角度から見ることができる。このツールを使用すると、革新的な 3D ビデオ コンテンツを簡単に作成できます。
このコンセプトはまったく新しいものではありません。仮想カメラは長い間、映画制作やアニメーションの定番であり、クリエイターがデジタルシーンをナビゲートしたり操作したりできるようにしてきました。しかし、Stability AI はこのコンセプトを採用し、そこに生成 AI を大量に追加します。その結果、詳細な 3D シーンの再構築や細かく調整されたカメラ設定を必要とせず、Stable Virtual Camera を使用すると、ユーザーは最小限の労力で、単一の画像からでもスムーズで深度が正確な 3D モーションを作成できます。
このツールが他の AI ビデオ生成ツールと異なる点は、アニメーションを推測せず、大規模なデータセットやフレームごとの再構築に依存しないことです。安定した仮想カメラは、マルチビュー伝播プロセスを使用して、提供された画像に基づいて新しい角度を生成し、結果が現実世界に実際に存在する可能性のあるモデルのように見えるようにします。このアプローチにより、結果として得られるビデオのリアリティが向上します。
このツールを使用すると、ユーザーはズーム、オービット、スパイラル パスなどのアクションを選択して、映画のような精度でカメラ パスを制御できます。作成されたビデオは、モバイルデバイスまたはワイドスクリーン用の縦向き形式になります。デフォルトのカメラは 32 つの画像のみで動作しますが、最大 XNUMX 枚の画像を処理できます。
Stability AI は、研究目的で非商用ライセンスの下でこのモデルを公開しています。つまり、ある程度の技術的能力があれば、GitHub からコードを取得して試してみることができます。 Stability AI が一般的にオープンソースであるということは、AI 開発者コミュニティが同社に費用を支払うことなく仮想カメラの機能を改善および拡張できることも意味します。
3D AI
もちろん、完璧な AI モデルなどありません。Stability AI は、現在も改善に取り組んでいる欠陥について率直に認めています。リアルな人物や動物、または特に乱雑な質感の素材 (水など) を作成したい場合は、低予算のホラー映画に出てくるような作品になってしまう可能性があります。
これを使って作成されたビデオで、視点がオブジェクト間で奇妙に移動したり、視点の変化によってちらつきや幽霊のような効果が生じたりしても驚かないでください。このツールが広く採用されるのか、それともニッチな映画製作者に見過ごされる単なる AI ツールになるのかはまだ分からない。
OpenAI の Sora、Pika、Runway、Pollo、Luma Labs の Dream Machine などの AI ビデオ ツールとの競争も激しいことは言うまでもありません。安定した仮想カメラは、単なる楽しいデモビデオの域を超えるには、実際の映画制作の世界でその実力を証明する必要があります。
コメントは締め切りました。