Alibaba запустила світову модель Happy Oyster, користувачі можуть у реальному часі давати накази на переписування сцен, які генерує AI.

ME News Новини, 16 квітня (UTC+8), згідно з моніторингом Beating, Alibaba запустила продукт світової моделі Happy Oyster, який не є інструментом для генерації відео з ШІ, а є реальним інтерактивним світоінженером. На відміну від існуючих інструментів для відео з ШІ «написати підказки, рендеринг, збирання кліпів» у разовому процесі, Happy Oyster під час генерації постійно отримує інструкції, сцена реагує в реальному часі та продовжує еволюціонувати. Продукт має два режими. «Режим режисера» дозволяє користувачам виступати у ролі режисера в реальному часі: створений контент — це постійний фізичний світ, що підтримує освітлення, гравітацію, рух персонажів і причинно-наслідкові зв’язки сцен, користувач може в будь-який момент змінювати кут зору за допомогою тексту, голосу або зображень, керувати персонажами, змінювати сюжетний хід, світ миттєво реагує і продовжує розгортатися. «Режим мандрівки» дозволяє користувачам рухатися у першій особі вільно, підтримує керування клавіатурою і камерою, після виходу за межі початкового кадру світ продовжує генеруватися та зберігати цілісність. Технічні параметри: максимальна тривалість режисерського режиму — 3 хвилини, максимальна роздільна здатність — 720p; режим мандрівки — до 1 хвилини, 480p; обидва режими підтримують мультимодальний ввід і синхронний вивід аудіо. Для індустрії кіно і ігор Happy Oyster переводить генерацію відео з ШІ з «масового виробництва матеріалів» у «реальний час віртуального виробництва». Режисери можуть під час генерації налаштовувати візуальний стиль без необхідності повного повторного рендерингу кожного разу; розробники ігор можуть описати текстом прототипи рівнів, що можна пройти. Нещодавно Alibaba активно випустила нові моделі та реорганізувала структуру для фокусування на комерціалізації ШІ, і Happy Oyster — один із продуктів, орієнтованих переважно на контент-мейкерів і розробників ігор. (Джерело: BlockBeats)