アリババは世界モデル「Happy Oyster」を発表し、ユーザーはリアルタイムでAIが生成しているシーンを書き換える指示を出すことができる。

robot
概要作成中

MEニュース 4月16日(UTC+8)、動察Beatingの監視によると、アリババは世界モデル製品のHappy Oysterを発表しました。これはAI動画生成ツールではなく、リアルタイムでインタラクティブな世界エンジンを目指しています。既存のAI動画ツール「プロンプトを書き、レンダリングを待ち、映像を収穫する」一回限りのプロセスとは異なり、Happy Oysterは生成過程で継続的に指示を受け取り、シーンはリアルタイムで反応しながら進化し続けます。 製品は二つのモードに分かれています。「ディレクター」モードでは、ユーザーはリアルタイムの監督役を務めます:生成されるコンテンツは、照明、重力、キャラクターの動き、シーンの因果関係を維持する持続的な物理世界です。ユーザーはいつでも文字、音声、画像を使ってカメラアングルを切り替えたり、キャラクターを指示したり、ストーリーの展開を変更したりでき、世界は即座に反応して展開を続けます。「ローミング」モードでは、ユーザーは一人称で自由に移動でき、キーボードとカメラコントロールをサポートします。初期フレームを超えると、世界は継続的に生成され、一貫性を保ちます。 技術仕様:ディレクターモードは最大3分、解像度720p;ローミングモードは最大1分、480p;両者ともマルチモーダル入力と音声の同期出力をサポートします。 映画・ゲーム業界にとって、Happy OysterはAI動画生成を「素材の大量生産」から「リアルタイムの仮想制作」へと推し進めます。監督は生成過程でビジュアルスタイルを調整でき、毎回の変更で完全に再レンダリングする必要はありません。ゲーム開発者は文字による説明で歩行可能なレベルの原型を生成できます。アリババは最近、新モデルを次々にリリースし、組織構造を再編してAIの商業化に注力しています。Happy Oysterは、その中でもコンテンツクリエイターやゲーム開発者向けに最も偏った製品の一つです。(出典:BlockBeats)

原文表示
このページには第三者のコンテンツが含まれている場合があり、情報提供のみを目的としております(表明・保証をするものではありません)。Gateによる見解の支持や、金融・専門的な助言とみなされるべきものではありません。詳細については免責事項をご覧ください。
  • 報酬
  • コメント
  • リポスト
  • 共有
コメント
コメントを追加
コメントを追加
コメントなし
  • ピン