Колишній дослідник OpenAI опублікував прототип Flipbook: пропускаючи HTML, генеруючи кожен піксель безпосередньо за допомогою AI-відеомоделі.

robot
Генерація анотацій у процесі
ME News повідомляє, 23 квітня (UTC+8), за даними моніторингу Beating, колишній дослідник OpenAI Zain Shah та команда випустили Flipbook — експериментальний прототип, який безпосередньо генерує пікселі екрана за допомогою моделі AI, замінюючи традиційні веб-технології, такі як HTML, CSS.
Кожна «сторінка», яку бачить користувач, є згенерованим AI зображенням, при натисканні на будь-яку область зображення генерується нове зображення для подальшого заглиблення; весь інтерфейс не має HTML-коду, фіксованих посилань, попередньо визначених кнопок, навіть текст — це пікселі на зображенні.
Відеорежим базується на відкритій моделі генерації відео DiT (Diffusion Transformer) LTX Studio ізраїльської компанії Lightricks, яка після оптимізації може передаватися в реальному часі через WebSocket на екран користувача у форматі 1080p 24fps, з бекендом на безсерверному GPU від Modal Labs.
Shah зазначає, що наразі Flipbook має обмежену функціональність, команда проектувала його навколо візуальної інтерпретації, але це демонструє більший напрямок: у міру того, як моделі стають точнішими та більш стабільними, у майбутньому можна буде розширити до структурованого інтерфейсу користувача, включаючи сценарії програмування.
Раніше Shah працював у OpenAI над дослідженнями AI та робототехніки, потім був експертом з креативних технологій у Samsung, а також є випускником YC S13.
До складу команди також входять колишній інженер Humane та Slack Eddie Jiao та колишній інженер Apple Drew O'Carr.
(Джерело: BlockBeats)
Переглянути оригінал
Ця сторінка може містити контент третіх осіб, який надається виключно в інформаційних цілях (не в якості запевнень/гарантій) і не повинен розглядатися як схвалення його поглядів компанією Gate, а також як фінансова або професійна консультація. Див. Застереження для отримання детальної інформації.
  • Нагородити
  • Прокоментувати
  • Репост
  • Поділіться
Прокоментувати
Додати коментар
Додати коментар
Немає коментарів
  • Закріплено