Колишній дослідник OpenAI опублікував прототип Flipbook: пропускає HTML, безпосередньо генеруючи кожен піксель за допомогою моделі відео AI

МЕ Новини повідомляють, 23 квітня (UTC+8), згідно з моніторингом Beating, колишній дослідник OpenAI Zain Shah та його команда випустили Flipbook, експериментальний прототип, який використовує модель штучного інтелекту для безпосереднього генерування пікселів екрана, замінюючи традиційні веб-технології, такі як HTML та CSS. Кожна «сторінка», яку бачить користувач, є зображенням, згенерованим штучним інтелектом, натискання будь-якої області зображення створює нове зображення для подальшого дослідження, весь інтерфейс без HTML-коду, без фіксованих посилань, без попередньо визначених кнопок, а текст також є пікселями на зображенні. Режим відео базується на відкритій моделі DiT (Diffusion Transformer) для генерації відео від ізраїльської компанії Lightricks, моделі LTX Studio, яка після оптимізації може передавати 1080p 24fps у реальному часі через WebSocket на екран користувача, а бекенд використовує безсерверний GPU від Modal Labs. Shah зазначив, що наразі функціональність Flipbook обмежена, команда орієнтується на візуальні інтерпретації, але демонструє більш широкий напрямок: з підвищенням точності та стану моделей у майбутньому це може бути розширено до структурованого інтерфейсу користувача, включаючи сценарії програмування. Shah раніше займався дослідженнями штучного інтелекту та робототехніки в OpenAI, потім був технічним експертом у Samsung Creative, а також є випускником YC S13. До команди входять також колишні інженери Humane та Slack Eddie Jiao, колишній інженер Apple Drew O’Carr. (Джерело: BlockBeats)